Agressão física nunca é justificável, vindo de ambas as partes.
Na minha opinião, estão os dois

errados: ele por te humilhar e você por ter agredido ele.