Quando o site começa a interferir nos meus afazeres, é sinal que devo ir embora?

Sim!
O ideal é diminuir o uso do site, separe um momento do dia para entrar no site, por exemplo, durante a noite. Assim poderá focar nos seus afazeres durante o dia.