O que fazer? E se ele me chantagear?

Tenho um vizinho que sempre foi afim de mim, porém ele é bem mais velho que eu. Ultimamente, me apertei um pouco e precisei de um dinheiro emprestado e pedi a ele, mas sem segundas intenções. Ele me deu o dinheiro, disse que eu não precisaria pagar, porém pediu pra ficar comigo. Eu não aceitei, claro, falei que pagaria assim que pudesse. Agora ele está me cobrando muito antes da data a qual fale...