Primeiro que seu namorado só pode exigir isso se ele tiver firmado compromisso sério com

você, no mínimo. Tem que dar estabilidade e prover pra você ter condições de levar uma gravidez com tranquilidade.
E segundo, 23 é uma boa idade sim, aliás, muitas têm filhos até mais cedo (cedo demais, as vezes). É preciso estar bem consciente dessa decisão e ir se preparando de forma física e emocional.