O GAIA propõe 466 questões que exigem habilidades fundamentais como raciocínio, manipulação multimodal, navegação na web e uso de outras ferramentas. Em testes, humanos obtiveram 92% de acerto, contra apenas 15% do GPT-4 equipado com plugins. O objetivo do GAIA é focar em tarefas que espelhem as habilidades humanas, um passo essencial para o desenvolvimento da Inteligência Artificial Geral.

Os poderosos estão amedrontados, de uma hora para outra, alguém com empresa de fundo de quintal poderá se tornar uma empresa melhor que a deles por ter usado I.A.
Um país de terceiro mundo pode se tornar o primeiro.
Querem rastrear, monitorar e controlar esse monstro antes de todos para manterem seus "status quo".
O desespero foi tão grande que chegaram a pedir de forma ridícula, uma pausa no desenvolvimento da I.A.

Cientistas propõem benchmark universal para avaliar progressão das IAs

O GAIA propõe 466 questões que exigem habilidades fundamentais como raciocínio, manipulação multimodal, navegação na web e uso de outras ferramentas. Em testes, humanos obtiveram 92% de a...