Equipe do Qwen lança benchmark para avaliar agentes de e-commerce
O E-Commerce Bench avalia o desempenho de agentes autônomos em operações de negócios simuladas ao longo de um ano.
Pontos principais
- O benchmark simula 365 dias de operações de e-commerce com capital inicial de ¥100.000.
- O ambiente abrange 6.886 produtos, 576 fornecedores e variáveis como taxas de armazenamento e reputação.
- A avaliação analisa sete eixos, incluindo gestão de estoque, negociação e fluxo de caixa.
- Modelos atuais demonstram dificuldade em adotar estratégias de compra mais baratas no longo prazo.
A equipe do Qwen apresentou o E-Commerce Bench, uma nova ferramenta voltada para avaliar o desempenho de agentes autônomos em operações de negócios de longo prazo. O ambiente simula um período de 365 dias de atividades comerciais, utilizando um capital inicial de ¥100.000 e integrando 6.886 produtos e 576 fornecedores, além de considerar variáveis como devoluções, custos de armazenamento e reputação. O desempenho é medido em sete eixos, como gestão de estoque e fluxo de caixa. Segundo o estudo, a maioria dos modelos de inteligência artificial testados apresenta limitações para aprender estratégias de compra mais econômicas ao longo do ciclo operacional de um ano.
Comentários
Carregando comentários...
