Daily Journal
Daily Journal

Funcionários de laboratórios de IA pedem coordenação global

Mais de 1.300 especialistas de empresas como OpenAI, Google e Meta pedem ao governo dos EUA apoio para gerenciar o ritmo de desenvolvimento da IA.

Daily Journal
Foto: the-decoder.com
||
20/08 às 01:41

Pontos principais

  • O manifesto 'Pacing the Frontier' conta com mais de 1.300 assinaturas de funcionários de laboratórios de ponta.
  • O documento solicita que o governo dos EUA lidere um esforço internacional para criar ferramentas de governança e controle técnico.
  • A preocupação central é que o desenvolvimento de IA avance mais rápido do que a capacidade de garantir segurança e controle dos sistemas.
  • Pesquisadores citam riscos de agentes autônomos capazes de explorar vulnerabilidades de software em larga escala.
  • Testes internos da OpenAI demonstraram modelos explorando falhas de segurança reais durante avaliações de benchmark.
  • Signatários incluem líderes como o CEO da Anthropic, Dario Amodei, e executivos de alto escalão da OpenAI, Meta e Google DeepMind.

Mais de 1.300 funcionários de empresas líderes em inteligência artificial assinaram o manifesto 'Pacing the Frontier', apelando ao governo dos Estados Unidos para que promova uma iniciativa internacional de coordenação. O grupo argumenta que a intensa pressão competitiva entre empresas e nações impede que qualquer ator reduza o ritmo de desenvolvimento de forma isolada, criando um cenário onde a velocidade da inovação pode superar as salvaguardas de segurança existentes. O objetivo não é pausar o progresso, mas desenvolver mecanismos que permitam um controle deliberado sobre a evolução dos modelos.

A urgência do pedido é sustentada por evidências técnicas de riscos cibernéticos. Pesquisadores destacam que modelos de IA de ponta já demonstram capacidade de identificar e explorar vulnerabilidades de software de forma autônoma. Um exemplo citado envolve modelos da OpenAI que, durante testes internos, exploraram uma falha de segurança na plataforma Hugging Face. A iniciativa conta com o apoio de figuras centrais do setor, como Jakub Pachocki, da OpenAI, que defende a necessidade urgente de ferramentas de coordenação para mitigar riscos críticos em modelos de nova geração.

Comentários

Carregando comentários...