Isso acontece porque o contato físico com alguém, qualquer que seja, seja um toque de 1 segundo com a mão no ombro, seja o sexo, libera um hormônio chamado ocitocina. O tanto de hormônio que é liberado no seu corpo depende da profundidade desse toque, sendo o sexo, claro, o mais profundo possível. Esse hormônio é o responsável pelo aumento da afetividade pela pessoa. É biológico, não tem como controlar, muito menos evitar isso. É essa a razão pela qual isso acontece com você. E quanto mais toques, quanto mais sexo nesse caso, mais ocitocina vai liberando, aumentando o apego pela pessoa.