Acho que em uma traição tanto o homem como a mulher podem se apaixonar
E todos

estao disposto a isso.

Agora voce tem que identificar de onde esta vindo essa insegurança, geralmente a grande maioria dos casos eh a nossa própria cabeca nos enganando.
Verifique se realmente o seu companheiro ja deu motivos para você, caso negativo trabalhe o seu psicológico. Todo o relacionamento so sobrevive com a confiança.

Caso tenha motivos, análise os friamente também, e tente conversar numa boa com ele. E caso continuem se repetindo, creio que sabera a resposta.