Não tem jeito, tem que se afastar. Dependendo de como está a relação de vocês e de como é a sua vida, não precisa ser de imediato, mas precisa ter isso em mente e planejar uma forma de se afastar.
Enquanto não der, se proteja fornecendo o mínimo de informação possível sobre a sua vida e se for necessário e possível, até minta.