Pode não dar muito certo por alguns motivos:
A mãe da criança pode usar o

filho pra ter uma aproximação indesejada com meu namorado;
A criança pode não me aceitar e tornar a relação estranha;
Pode ser que quando ela cresça, tente colocar o pai dela contra mim;
O filho sempre terá uma prioridade que não vou ter...
Dentre outras coisas.
Acho meio complicado apostar em alguém que já possui uma "bagagem".