É feio eu me autoconvidar para almoçar no meu irmão?

Feio não é.
Mas é algo que eu não faria com meus irmãos.

Não.

Depende do nível de intimidade que você tem com ele

"Oi, o que acha de me convidar para almoçar aí hoje?"

Não.

é irmão, então acho que não

Claro que não pô, é irmão.
Mas leva algo, nem que seja a bebida ou sobremesa, pelo menos.