Depende do homem, e podem existir várias razões. Para o meu caso, em específico, seria

mais difícil de eu me relacionar com essas garotas porque as chances de eu ter uma conversa com elas seria mais baixa que com outras garotas, já que elas provavelmente não estariam nos mesmos ambientes em que eu frequento, e seria mais difícil ter alguma conversa, se não tiverem acesso a internet ou a celular. Maior parte do tempo em que vejo pessoas de baixa renda é durante o meu estágio, e seria esquisito eu pensar nas minhas pacientes como potenciais parceiras enquanto eu faço o meu trabalho, já que provavelmente, não tenho conversas muito pessoais em ambiente de enfermaria, e eu não vejo meus pacientes de ambulatório normalmente mais que duas vezes. (Além de que hoje em dia, nem passa perto eu pensar nisso, pois eu já tenho uma namorada, que é de baixa renda, também, e ela conseguiu conversar comigo e me mostrar a atenção dela porque tem algum acesso à internet, e depois, ao telefone, também).
Outra coisa que acontece com muitos homens é que garotas de baixa renda normalmente não vão ter como dividir as contas da mesma forma como uma garota mais rica, então, as atividades que ambos farão no relacionamento ou serão mais simples ou demorarão mais para acontecer. Além disso, as garotas mais ricas tendem a ter uma bagagem maior em termos de cultura, além de estarem mais afastadas de regiões com drogas ou violentas e terem uma família melhor estruturada, que poderá dar suporte, além de que existe muita mulher interesseira no mundo, e as mulheres mais pobres têm mais razões para procurar algum parceiro pensando no dinheiro, mesmo que talvez não seja a maioria que pense assim.
Eu, pessoalmente, vejo algumas vantagens em se relacionar com garotas de baixa renda, no geral: têm uma propensão maior a se sentirem gratas com o que você fizer para elas (pois não ganharam as coisas na vida de mão beijada, no geral, então entendem mais facilmente o valor das coisas), tendem a ser menos