Quando ele tiver olhando pra frente, bota a mão no queixo dele e vira o rosto dele pra você. Quando ele te olhar nos olhos você diz: Pronto, bem melhor.
EDIT: Bom, eu interpreto essa atitude dele como timidez, você tem que reparar se ele é assim com outras pessoas ou só contigo, se for só contigo pode ter algo ai.
Talvez ele goste muito de ti e não queira transparecer porque tem medo de ficar nervoso ou algo assim, ouuu talvez ele realmente não esteja tão interessado.
Quem mente olha para vc para se certificar que você acreditou na mentira. Quem fala a verdade não precisa fazer isso. É um erro as pessoas acharem que não olhar nos olhos é sinal de estar mentindo.
Mas sobre sua pergunta,ele pode ser tímido ou simplesmente não ter boa comunicação.