Se o casamento não anda bem, é o momento de tentar melhorar o relacionamento.
Conversar com

seu marido, conversar consigo, buscar terapia de casal, etc.
Ou então decidir que não dá mais e terminar a relação.
A atração por outra pessoa não é anormal, especialmente qdo o casamento não vai
bem, mas ceder a ela é piorar ainda mais as coisas.