Toolformer decide por conta própria quais APIs usar para contornar as limitações presentes em outros sistemas, como a falta de conhecimento em aritmética, por exemplo. Seu desempenho é superior ao GPT-3, mesmo sendo baseado no GPT-J, um modelo com apenas 4% dos parâmetros.

Já dá pra fazer muita coisa com o GPT-J e o GPT-2, é que o pessoal não parou pra melhorar o modelo. E também quando o modelo do GPT-3 for melhorado também, vai dar pra fazer uma porrada de coisa, por enquanto é mais fácil apenas encher de parametros.

Meta desenvolve modelo de linguagem que aprende sozinho a usar ferramentas externas, como mecanismos de busca, calculadoras e calendários

Toolformer decide por conta própria quais APIs usar para contornar as limitações presentes em outros sistemas, como a falta de conhecimento em aritmética, por exemplo. Seu desempenho é su...

Meta desenvolve modelo de linguagem que aprende sozinho a usar ferramentas externas, como mecanismos de busca, calculadoras e calendários · NewsletterOficial