O músculo tem uma facilidade maior de desenvolvimento quando você já treinou, a chamada memória muscular que facilita esse desenvolvimento mais rápido. Isso acontece pq o músculo está acostumada a ser rompido, então ele se regenera mais rápido.
Quando você nunca treinou seu corpo não está preparado para o impacto, seu corpo ainda vai ser acostumar com o esforço diário.
Uma pessoa que já fez academia antes tem muito mais facilidade em criar musculos e recuperar o corpo que tinha por causa da memória muscular, que causa a hipertrofia.