Sou e estou feliz onde estou. Passaria tudo de novo.

"Servidor público" é algo muito

extenso. Policiais são servidores públicos. Bombeiros. Há médicos, professores...

Sobre não haver oportunidade de crescimento : apesar de você não poder mudar de cargo sem ser por concurso, há seleções internas para algumas oportunidades, participações em comissões, há cargos (ao menos até o momento, antes da reforma, mas deve-se manter assim ) de chefia que só podem ser exercidos por quem é da casa.

E concurso não prende ninguém. A exoneração é livre.

Claro que tem que ter vocação para o ofício. Assim como qualquer atividade laboral que você exerça.