Como lidar com um cara que fala isso?

Namorado fala assim: "Vc pensa que eu não sei que tem outro cara atrás de você?" . Aí eu falei "Que outro cara?"
Aí ele disse: "Não sei, sempre tem".
Galera, não tem outro cara e não to dando bola pra outros. O que fazer com um namorado que fala essas coisas pra mim?