Anthropic testa agentes de IA em mercado de trocas de livros
Experimento com 201 funcionários avaliou a eficácia de agentes do Claude na negociação autônoma de bens em um ambiente de mercado controlado.
Pontos principais
- O projeto envolveu 201 funcionários da Anthropic em seis escritórios globais, que utilizaram agentes de IA para trocar livros.
- Agentes baseados no Claude realizaram conversas de cinco minutos com os usuários para entender suas preferências de leitura.
- A precisão na representação das preferências dos usuários atingiu 61% em comparação com rankings manuais de controle.
- Modelos de IA mais potentes demonstraram maior eficiência na negociação do que instruções específicas de comportamento.
- O estudo comparou agentes 'implacáveis', focados apenas no ganho individual, com agentes 'pró-sociais', que buscavam o bem-estar coletivo.
- Participantes indicaram disposição para delegar a agentes cerca de um terço de seu orçamento anual de livros.
- A Anthropic estuda táticas de negociação jurídica para preparar agentes para atuações mais complexas em mercados reais.
A Anthropic realizou o experimento 'Project Swap' para analisar como agentes de IA operam em mercados descentralizados. Durante o teste, 201 funcionários utilizaram agentes baseados no modelo Claude para negociar a troca de livros em um pregão digital, simulando situações de negociação autônoma. O objetivo foi medir a capacidade da IA em representar as preferências humanas e executar acordos eficientes sem intervenção direta dos usuários.
Os resultados indicaram que a qualidade do modelo de linguagem utilizado foi o fator determinante para o sucesso das transações, superando a influência das instruções comportamentais dadas aos agentes. Embora os agentes tenham demonstrado eficácia, a pesquisa destacou desafios importantes, como a necessidade de sistemas de verificação de identidade e regras claras para lidar com falhas em negociações. A empresa agora explora, inclusive com consultoria jurídica, como escalar essa tecnologia para aplicações comerciais mais amplas.