Se ele respeita a sua decisão, por que você terminaria?
Ele tem o direito de

pensar o que quiser, só está sendo sincero com você.