Não é traição, mas sei lá, isso todos os dias não deve fazer bem não.

Conversa com ele sobre. Talvez a frequência com que vocês fazem sexo tenha diminuído e ele está procurando uma válvula de escape.
Dialogar provavelmente será a melhor opção!