Não tem a ver com medo, tem a ver com compatibilidade.
O "medo", se existe, deveria

estar no lado oposto: confiar que um estranho vá cuidar da sua criança sem nem saber como é ser pai de verdade.
Em geral, acredito que o melhor seja pessoas solteiras sem filho se relacionarem com outras pessoas solteiras sem filho, e pessoas solteiras com filho se relacionarem com outras pessoas solteiras com filho, independente do sexo.
Mas esse assunto tomou uma proporção maior do que o necessário. Falam tanto de mãe solteira, como se fosse alguma pauta socialmente importante. Na prática, sempre vai ter algum solteiro(a) sem filhos disposto(a) a se relacionar com alguém que tem. Às vezes dá certo, às vezes não. Por via de regra, é um fator dificultante, mas há casos e casos.