Por quando o homem não namora as pessoas começam a chamá-lo de gay?

Convivo com essa situação há alguns anos, gente me olhando torto, ou com cara de escárnio. Não sou gay, e não teria problema se fosse mas muita gente tenta difamar um homem dessa forma, já me ocorreu alguma vezes de ir à faculdade e pessoas da rua chamando de v**do dizendo que eu ia dar o **. O problema é que essa situação está me gerando ansiedade e muitas vezes até evito sair de casa.