É normal alguém mostrar interesse e depois que um dos dois toma iniciativa ele se afasta?

Algm poderia me ajudar, no começo ele ficava me observando e mostrando que estava interessado em mim, quando tomei uma pequena iniciativa ele ficou diferente, passo por ele e ele abaixa a cabeça, me olha pouco nos olhos, meio que se "afastou", e não sei se sigo em frente e deixo ele pra lá ou se insisto nele sla.