Tenha uma conversa franca, explique que você não tem interesse. Para deixar bem claro que

não é aquele Não que nada verdade é sim, mas um Não definitivo! Se ele insistir, o ignore e se ele lhe incomodar muito, vá a Polícia.