Nem uma coisa e nem outra. Pode apenas não ser atraído por elas.
Eu particularmente até

já me relacionei com algumas gordinhas que eram muito atraentes. Mas passando de um certo ponto já não me atraem mais.