OpenAI registra triplo de desempenho no benchmark ARC-AGI-3 com GPT-5.6
Nova API de respostas da OpenAI eleva eficiência e performance do modelo GPT-5.6 Sol em testes de raciocínio complexo.
Pontos principais
- O modelo GPT-5.6 Sol alcançou um desempenho três vezes superior no benchmark ARC-AGI-3 ao utilizar a nova API de respostas.
- A implementação demonstrou maior eficiência operacional, reduzindo o consumo de tokens durante a execução das tarefas.
- A OpenAI divulgou um vídeo comparativo que ilustra a capacidade aprimorada do modelo na resolução de problemas complexos.
- O benchmark ARC-AGI-3 é utilizado para medir a capacidade de raciocínio e generalização de sistemas de inteligência artificial.
A OpenAI anunciou um avanço significativo na performance de seu modelo GPT-5.6 Sol ao integrar uma nova API de respostas. Segundo a empresa, a atualização permitiu que o sistema triplicasse sua pontuação no benchmark ARC-AGI-3, um teste rigoroso focado na capacidade de raciocínio e abstração de modelos de linguagem. Além do ganho em precisão, a nova implementação otimizou o uso de recursos computacionais, exigindo um volume menor de tokens para processar as mesmas tarefas complexas. A melhoria reflete o esforço contínuo da companhia em elevar o patamar de eficiência de seus modelos de ponta. A empresa demonstrou os resultados por meio de um vídeo comparativo, evidenciando como a nova arquitetura de resposta supera as limitações observadas com o harness oficial, que anteriormente registrava um desempenho de 7,8% no mesmo teste.
Comentários
Carregando comentários...