Dê apenas sexo a ele. Não fale mais nada, não demonstre sentimentos, só sexo mesmo, preto no branco.
Se ele ficar de boa com isso, quer dizer que só interessa o sexo.
Se começar a fazer muitas perguntas a falar muita abobrinha sentimental, é porque tem algo a mais.
Falando por mim....
Quando o sexo é bom mas ela é limitada a dar gostoso eu evito interações, só quero pra sexo, não durmo junto e nem sequer conversar muito eu não converso, é bem pouco, só o necessário.
Agora se ele gosta de passar tempo junto com vc, conversar e interagir, aí creio que é coisa de tua cabeça.
Acho que a insegurança é a nossa pior inimiga. Às vezes essas neuras nem fazem sentido, o melhor nesse caso seria se resolver consigo mesma, deixando essas inseguranças de lado.