如果只是通奸行为，属于道德调整的范畴，不承担相关法律责任，但是在离婚分财产时法院会酌情考虑这一因素。

如果同居或重婚，属于违法行为，在民事上离婚时一方可要求损害赔偿，刑事上可涉嫌重婚罪或破坏军婚罪，要承担刑事责任。

《刑法》第二百五十八条规定，有配偶而重婚的，或者明知他人有配偶而与之结婚的，处二年以下有期徒刑或者拘役。