Tem chances do meu atual voltar com a ex dele?

Bem, comecei a namorar faz sete meses com um rapaz q tinha terminado um relacionamento longo fazia um mês (ele ja tinha largado quando começamos a sair) ele é um cara bem fechado, porém nunca me deu motivos para desconfiar e não toca no assunto sobre a ex. O problema é que eu sempre acho que ele vai me abandonar pra voltar com ela, que vai me trair com ela, que está me usando pra tapar um buraco e que pode me trocar por ela ou por qualquer uma a qualquer hora, não comento nada com ele, mas as vezes eu perco o sono por causa desses pensamentos e tenho crises de ansiedade como estou tendo agora.
Tenho um histórico péssimo com relacionamentos passados, três namoros que não deram certo. O primeiro me traia, o segundo diminuia minha auto estima e me largou do nada e o último mentia muito e era abusivo. Será q estou surtando por causa do meu histórico ou realmente devo ficar com o pé atrás.
Detalhe: sei q muitos vão falar q eu não deveria começar algo com alguém q terminou recentemente, mas eu fiquei sabendo quando ja estamos juntos há quase dois meses e nos dando bem, então resolvi deixar rolar.