Primo que fala mal de mim

Tenho um primo que me ferra pelas costas, até uma conversa normal ele pega e inventa histórias e acabou que ele inventou tantas mentiras de mim que um propio amigo dele me falou oq ele fazia há anos comigo, questão é o seguinte oq devo fazer?parar de falar com ele?e quando for natal e outros dias de festas em família??