O que significa e porque ele faz isso?

Quando um homem faz contato visual com você as vezes, porém, em outras vezes ele olha e quando percebe que você tá olhando ele tira a vista rapidamente?
Sempre fica nisso, ele parece ser do tipo mais observador e é sério.