Sim...acho que eles levam para o pessoal!
Você só fala "Não" e, eles entendem como se

quiséssemos humilhá-los ou inferiorizá-los
Existem vários motivos para uma negativa diante de uma investida e, nem sempre significa que existe algum problema com os envolvidos.
Ninguém se interessa por todo mundo e, isto é normal
Relacionamentos são muito mais que pessoas boas juntas...as vezes, não era o momento, não houve afinidades ou interesses em comum e, um monte de outras coisas etc... Apenas isto e, não deveriam encarar tão mal!
Pessoas não são conquistas para acharem que "fracassaram" ao tentarem um relacionamento...são pessoas com livre arbítrio!