Tá ficando com uma pessoa e quer um relacionamento sério, como tocar no assunto sem parecer chata?

Ser clara é o mais difícil mas é a melhor saída.
Vc tem todo direito de deixar claro o que espera disso, assim como ele tem o direito de decidir por sim ou não. O que não dá é permitir que ele te enrole com o passar do tempo.