Por que alguns homens fogem quando a mulher toma atitude?

Já me aconteceu de algumas vezes o cara demonstrar interesse por mim, puxar conversas, mas quando eu tomei iniciativa de falar que queria vê-lo ou fazer algo, eles recuarem e sumirem. Não entendo.