Como ter paciência com um cara que você só conversa, e ele fica chateado quando você demora a responder?

O demorar é coisa de 10 minutos. Por exemplo tô conversando na madrugada aí por algum motivo demoro 10 minutos, na cabeça dele tô dando prioridade pra outro. Aí ele disse que quando isso acontece ele encerrar o assunto. Isso é normal?