Por que ele fez isso?

Porque com a memória que temos, em geral associamos o primeiro cheiro que sentimos à pessoa ou lugar. No teu caso, teu marido lembra de ti com outro cheiro/perfume, como ele não tem esse contato com ela igual ao que tem contigo, associou o teu perfume a ela.

Primeira coisa é pensar em outras possibilidades e não a de que seu marido pode ter feito algo errado.
É normal que a gente já queira condenar os outros no primeiro pensamento.

Esse negócio de perfume é uma questão tão subjetiva. Tipo a gente reparar que a mulher cortou o cabelo 1dedo kakaka
Mas enfim... invés de ficar nessa neura... vá ao ponto com seu marido..

Amor, hoje pela manhã vc disse que eu estava com o cheiro da fulana, mas esse perfume eu a emprestei, logo, como vc não percebeu esse cheiro em mim anteriormente?

Detalhe: não é pra questioná-lo condenando-o e sim com um ar de "preste mais atenção em mim" seu cachorro.

Enfim...

Perfume é algo muito pessoal. Eu uso um que não é comum justamente para não lembrar ninguém.

Como você tem uma coleção e deve ficar alternando, nada mais normal do que ele associar o cheiro a sua amiga que usou apenas ele durante todo esse tempo.

Não vi nada de mais no comentário do seu marido, mas jogaria fora esse perfume.

Vish... Espero que o Vader esteja certo.