Eu acho que deixa, ou ele começa a tratar a esposa diferente, com menos importância,

existem casos e casos, tem homem que quando está traindo começa a tratar a esposa mal, mas costuma ser algo passageiro, paixão é passageira, amante é mais para sexo e dificilmente eles trocam a esposa pela amante.