Depende, mesmo que ambos percebam que não rola algo sério, as vezes surge sentimentos. Assim,

vc não quer que a pessoa se afaste.
Tem pessoas que rola sexo bacana, outras vc tem afinidade devido aos interesses... Então fica meio receoso da pessoa se distanciar.