Se você não gostasse da família do seu namorado e se sentisse mal, falaria pra ele?

Não.

Eu não iria conseguir nada

Não falaria por medo de magoar ele

Depende. Acho que não falaria assim abertamente "Olha, detesto a sua família" mas com delicadeza falaria as atitudes que me incomodam... mas bem talvez mesmo sou do tipo que guardo sentimentos pra mim.

Falaria, conversaria com ele...
Até pra evitar de ir em algumas situações na casa deles.
Mas acho importante o convívio com familiares próximos do parceiro.