Simples: vc difine as regras. Se ele gostar ele vai aceitar. Se ele quiser apenas

diversão e sexo, ele sempre vai tocar nesse assunto, e se vc cortar o assunto ele vai se afastar. Melhor que ele se afaste do que vc focar com ele e depois ele sumir e vc ficar com sentimento de que foi apenas usada para atender os desejos dele.