Claro que não é errado. E você não deve satisfação a ninguém.

Toda mulher vai

dizer isso, toda. Não dê atenção a elas, elas só vão dizer aquilo que é benéfico para elas, mesmo que para você não seja, e ainda vão te fazer se sentir culpado por isso.