Depende, mas evitar uma briga sempre é bom. Só que se o cara partir pra agressão, ele deve se defender, lógico. Ninguém merece apanhar e ficar quieto.
Eu não apanharia calada mas nem morta com farofa.
Depende muito, tem situações que é bom deixar pra lá, mas tem outras que merecem uma resposta. No entanto se deve levar em consideração a própria segurança.