Modelos de IA superam contadores certificados em testes técnicos

Estudo da Mercor mostra que modelos de IA superam contadores em tarefas de fechamento contábil com maior precisão, velocidade e custo reduzido.

Foto: www.mercor.com

03/10 às 21:43

Pontos principais

Pesquisa da Mercor comparou 12 contadores certificados (CPAs) com modelos de IA em tarefas de fechamento mensal.
Modelos de IA, como o Claude Opus 5, atingiram 100% de acerto nas tarefas, enquanto humanos tiveram média de 37%.
O tempo de execução por tarefa foi inferior a 10 minutos para a IA, contra 30 a 180 minutos para os profissionais.
O custo por critério atendido pela IA foi de US$ 0,21, sendo 49 vezes mais barato que o custo médio de um contador humano.
O estudo focou em tarefas estruturadas e detalhistas, que são pontos fortes dos modelos de linguagem atuais.
A pesquisa ressalta que a IA não substitui o contador, pois o trabalho real envolve comunicação e contexto não testados.

Um estudo recente realizado pela Mercor demonstrou que modelos de IA de fronteira superaram contadores certificados (CPAs) em testes técnicos de contabilidade. Em cenários de fechamento mensal, a IA alcançou 100% de precisão em todas as tentativas, enquanto os profissionais humanos, com média de cinco anos e meio de experiência, atingiram um desempenho médio de 37%. Além da superioridade técnica, a eficiência econômica foi notável, com a IA operando a um custo 49 vezes menor por critério avaliado.

Os resultados indicam uma mudança significativa na automação de tarefas estruturadas e detalhistas, como a análise de arquivos e cálculos financeiros complexos. No entanto, os pesquisadores enfatizam que o teste não reflete a totalidade da profissão contábil, que exige habilidades interpessoais, comunicação com clientes e a gestão de contextos organizacionais que a IA ainda não domina. O objetivo do benchmark foi medir a capacidade da tecnologia em tarefas específicas de alta complexidade, e não a substituição completa do trabalho humano.

Cobertura da mídia