O que pode explicar momentos de desconfiança?

As vezes eu tenho momentos em que não confio nas pessoas ao meu redor, exceto a minha família.
Na universidade, com amigos, na academia. As vezes falar com as pessoas me deixa com um pé atrás, me dá a sensação de que a qualquer momento elas vão usar o que eu falo contra mim. Não que eu me ache protagonista nem nada, mas as vezes me passa essa sensação.