Uma ideia é ter um local centralizado, já evita que se baixe várias vezes a mesma coisa. Mais ou menos como o Maven/Gradle já faziam, e bem similar ao que o Deno está fazendo.
Claro que não é livre de problemas. Gerenciamento de dependências parece ser algo difícil de resolver, no fim é algo que temos que conviver.