不是。
配偶与婚外异性发生不正当性行为是属道德规范调整的范畴，受道德规范所遣责，但不具有强制力。
夫妻间的身体权不同于财产权，夫妻之间对对方的身体并不享有占有、支配的权利，《婚姻法》第四条规定的夫妻应当互相忠实的义务体现的是夫妻间的义务，而非权利。因此不能以侵权界定。
但是如果夫妻一方与他人构成事实婚姻的，根据《刑法》第258条的规定：“有配偶而重婚的，或者明知他人有配偶而与之结婚的，处二年以下有期徒刑或者拘役。