Se você não tem nenhuma intenção de transar com a pessoa, não a acha atraente,

não aceite o convite para sair. Simples assim.

Tem muitas garotas que nem estão afim de sair com o homem, porém o convite é bacana, é para um restaurante legal, acabam aceitando. Não sei se esse é seu caso.