Se fizer isso fará o que não quer, irá magoar a pessoa. Diga que não está no clima para sair porém, não é nada com a pessoa (caso realmente não seja, se for, diga o motivo real) antes uma verdade doída do que fazer o garoto de bobo, com certeza não iria gostar que fizessem isso contigo.
Não alimente a expectativa da pessoa, isso é cruel.
Melhor desmarcar do que ir sem vontade. Só que tu disse que meio que perdeu a vontade, então não perdeu totalmente. Pensa bem, vai que o encontro seja muito bom?