Porque uma questão da biologia da mulher: mulher precisa se sentir protegida, passiva na relação, o homem precisa ter segurança sobre a situação que ele está. Como a mulher vai se sentir atraída por um cara que um ambiente social intimida? Esse é o homem que ela vai respeitar?
Conforme dito pela usuária @Sofii, o homem não precisa falar bem e ser popular pra atrair as mulheres. Se o homem for "na dele", ou seja, que é um cara quieto, discreto e reservado, mas que sabe conversar com outras pessoas apenas no momento que isso for possível e sabe se adaptar a uma situação que ele não é muito acostumado no dia a dia, tá ótimo. Eu sou assim!
Elas rejeitam ou vc que é quieto demais pra te coragem de tentar?
ADD:
Além do mais é como disseram, homem quieto tem poucos amigos, não é expansivo mas sabe se comunicar o que não dá pra confundir com o antisocial que nem falar com os outros não sabe.