Homem pode se apaixonar quando transa casualmente?

Estou saindo com um cara, saímos umas três vezes para transar (teve anal, teve tudo). Mas eu combinei que não queria me envolver emocionalmente e ele concordou. Mas estou sentindo que ele se apaixonou e não quer falar. Até se afastou um pouco. Os homens podem se apaixonar no sexo casual?