Existem dois tipos de "Não é você, sou eu."
Tipo um: Você é uma garota legal,

mas não quero você, quero outra.
Não se importa com você e deu desculpas para te dar um fora.
Tipo dois: Você é uma garota incrível e não quero te magoar, por isso prefiro ficar sozinho.
Se importa com você mas tem medo ou não está preparado para um relacionamento.