Como lidar com o medo de terminar um relacionamento e magoar a pessoa?

Bom pessoal, eu namoro à distância com um rapaz de outro estado há 3 anos, e a dinâmica do nosso relacionamento tem se tornado difícil com o tempo, pois eu não vejo previsão da nossa situação mudar e a gente finalmente se encontrar e isso tem me deixado triste, então decidi que será melhor colocar um ponto final.

Mas tem sido difícil tomar coragem de terminar, eu gosto muito dele, ele sempre foi uma pessoa maravilhosa para mim e tenho medo de magoá-lo, pois ele é muito apaixonado por mim. Como proceder nessa situação?