Algo extremamente subjetivo.
Sem graça é o quê? Alguém que não gosta de sair e é

mais caseiro? Gosta de coisas mais à moda antiga? Alguém que é séria demais?

Acredito que quando alguém comenta isso de outrem é porque este não acha "graça" no estilo de vida vivido pelo indivíduo. Essa percepção varia de pessoa pra pessoa. Não é algo fácil de mensurar.