É errado responder que não sinto mais atração?

Inicio do ano passado um cara me chamou numa rede social, conversamos mas ele nunca me chamou e eu levei para o lado da amizade. Uns dois meses depois comecei a namorar, terminei e já me relacionei com outras pessoas durante esse tempo....
Mas esse cara voltou a me procurar e ele acha que por eu responder significaa que pode rolar algo. Ontem ele perguntou se valia a pena tentar me conquistar e eu disse que não (gosto de outra pessoa e não sinto mais nada por esse cara), agora ele quer saber o grande motivo de eu ter respondido que não. Mandar que não tenho atração é pesado e o suficiente para ele parar de dar em cima de mim?
A intenção não causar um constrangimento mas eu fico sem o que falar quando ele começa com aquelas piadinhas de casal, tanto que paro de responder e ele sempre volta nisso.......