所謂「精神外遇」，係指肉體接觸之外的婚姻外遇，相對於「肉體外遇」。在現實生活中，常見有所謂「紅粉知己」之類的男女交往情形，它們互訴生活上不愉快的遭遇，相互精神慰藉，並沒有任何越軌的性行為。根據調查報告，婚後女性較怕男性肉體上的外遇，男性較怕女性精神上的越軌。

按刑法的通（相）姦罪，必須是婚姻關係存續中，配偶之一方與他方以外的異性發生性交行為。而所謂「精神外遇」，係指肉體接觸以外的婚姻外遇，與法律所責難的「肉體外遇」不同，縱使他們在精神上、思想上、言語上、文字上有出軌甚或性愛的表現，只要他們沒有發生婚姻外的性交行為，仍然不能成立刑法的通（相）姦罪。