Por que ele não sai comigo?

Estou ficando com um rapaz há pouco mais de 1 anos, nos encontramos sempre possível, pois moramos em cidades diferentes, porém próximas. O que me incomoda é o fato de sempre ficarmos privados a casa dele, nunca saímos para comer algo em uma lanchonete ou outros lugares, nossos encontros resumem-se a casa dele, mais precisamente ao seu quarto. Quando chamo ele para sair ele sempre mostra entusiasmos, as vezes até me convida, mas no dia marcado ou alguns dias antes ele sempre vem com a mesma justificativa/desculpa para não ir, diz que está sem dinheiro.
Não sei se ele tem vergonha ou que motivos teria para evitar sair comigo.
OBS: Eu não sou uma pessoa de luxos, por isso acho que a justificativa da falta de dinheiro não cola, ele sempre posta fotos de saídas com amigos, onde bebem e provavelmente ele tem gastos nessas saídas.