Provavelmente a pessoa não te acha uma mulher incrivelmente bela, mas se atraiu por ti

em decorreria de outros fatores, te acha atraente por questões secundárias, não necessariamente o físico.

Podem ser coisas como, suas expressões faciais, olhar, sorriso, voz, tua aparência (estilo de vestuário + acessórios), postura corporal, seu andar, bom humor, tu pode transmitir uma imagem que ele goste e se atrai bastante (comigo por exemplo, seria feminilidade, meiguice), enfim... seu jeito.

Se atraiu por outras razões, o físico foi só detalhe não-preponderante.