Ele está esperando eu ir atrás ou está tentando se afastar?

Estou saindo com um cara faz umas 4 semanas. Passamos todos os fins de semanas desde que nos conhecemos juntos. Quando chamei ele para vir aqui em casa num dia comum, o mesmo veio sem delongas.
Os encontros sempre foram de boas mesmo sem rolar nada além.
Ele desde sempre se mostrou educado, gentil, carinhoso, tranquilo, disposto. Trocamos carinhos independente do lugar e ele é super de boa quanto a isso. No sábado passamos por vários conhecidos dele no caminho até a casa do mesmo e em nenhum momento ele me soltou ou agiu diferente.
Saimos esse fds e rolou os finalmentes. Ele me trouxe em casa, avisou quando chegou, puxou assunto no dia seguinte e assim foi até segunda. Conversamos o dia todo e nos despedimos na hora de dormir. Quando foi na terça, ele não mandou mensagem e eu também não. Hoje continuamos na mesma.
Fico em duvida se ele está esperando eu ir atrás ou se quer se afastar mesmo.
Não estou com muita vontade de ir atrás, pois nas duas outras vezes que deixamos de nos falar por briguinhas, eu que puxei assunto.