Porque é algo incomum pra homens. Experimente chamar um de fofo, por exemplo, e veja a reação do cara. Como sempre fui zoado a adolescência inteira em vez de elogiado, se ouvisse algo do tipo eu ficaria desconfiado.
Bom, vou falar por mim.
Não é algo comum eu receber elogios, então, para mim é muito estranho quando recebo algum e além de estranho por não ser comum, não acredito que seja verdade.
É até dependendo da pessoa, costumo ficar sem graça ou vermelho também.