Por que sempre que vou ficar com alguém comparo com o último que fiquei?

Acredito que sim. Não que você faça por maldade, comparações ocorrem até involuntariamente, quando você vê já pensou.