Microsoft lança AgentRx para debugging sistemático de agentes de IA
Framework open-source localiza o 'passo crítico de falha' em trajetórias de agentes com +23,6% de precisão sobre baselines.
||
13/03 às 09:00
Pontos principais
- Framework automatizado que identifica o passo crítico de falha em trajetórias de agentes
- Melhoria de 23,6% em localização de falhas e 22,9% em atribuição de causa raiz
- Benchmark com 115 trajetórias de falha anotadas manualmente
- Taxonomia de nove categorias de falhas incluindo 'Invenção de Nova Informação'
A Microsoft Research publicou o AgentRx, um framework automatizado de debugging que identifica o 'passo crítico de falha' em trajetórias de execução de agentes de IA, sintetizando restrições executáveis a partir de schemas de ferramentas e políticas de domínio.
O framework melhorou a precisão de localização de falhas em 23,6% e a atribuição de causa raiz em 22,9% comparado a baselines. A equipe também liberou um benchmark com 115 trajetórias de falha anotadas manualmente e uma taxonomia de nove categorias de falhas.
Comentários
Carregando comentários...