Independentemente de você ser neutra ou expressiva isso não dá a ele o direito de

querer mudar esse seu traço. Não aceite também essas comparações, você é você e isso deveria ser bem simples de entender.

Essa é a sua personalidade, então deixe claro que ele te conheceu desse jeito e mesmo assim te quis como namorada, diga que você não tem intenção de mudar apenas para agradar ele. Caso ele continue assim, termine e leve o seu tempo para superar, mas verá que terá sido um livramento, pois é terrível estar com alguém que não sabe lidar com nossas diferenças.

E não jogue pra debaixo do tapete, mas às vezes algumas coisas que são ditas ou faladas e parecem pequenas, servem para nos mostrar o que estava bem debaixo de nossos narizes.
Boa sorte, espero que se resolvam, e caso não consiga, faça o que falei na segunda parte da resposta.