Se ele já te perguntou se ele ficaria com você se ele não namorasse, é

porque ele já tá com segundas intenções. Mas a questão não é deixar ou não de conversar, mas sim como vocês conversam e qual a sua atitude. Pelas coisas que você escreve aqui no site, você passa o ar de ser um tanto ingênua e aí qualquer coisa pode ser mal interpretada.