Pode ser tanta coisa... Esqueceu a internet ligada no celular, eu esqueço as vezes. Rsrs
Pode

estar jogando algum jogo online, ou conversando com algum amigo algo importante.
Procura conhecer bem o comportamento dele com relação a esse "tempo" de resposta a você. Se for só com você, o melhor a se fazer é perguntar diretamente a ele o porque dele agir dessa maneira.
Detesto isso também.