Depende muito. As vezes quem fala mal de mim pode estar certo.
Como eu costumo dizer:
-Se

vão falar mal de mim, me chamem, conheço coisas terríveis a meu respeito.