Por mais tímido que o cara seja, quando uma mulher diz que tá a fim, ele toma alguma atitude quando tá interessado. E pelo que vc disse ai, ele recuou.
Na minha opinião ele não tá a fim.
Pelo visto ele não está interessado mesmo ou pode ser comprometido e gostar muito da menina dele. Não continue forçando a situação, ainda mais que é colega de trabalho, parece que não vai dar em nada. O melhor é partir para outra.
E ele estivesse mesmo a fim, já teria tomado uma atitude.