Daily Journal
Daily Journal

Pesquisador da Anthropic estima risco de 10% de extinção por IA

Evan Hubinger e outros especialistas alertam que o desenvolvimento de IA pode levar à extinção humana na próxima década sem o devido alinhamento.

Daily Journal
Foto: Canaltech
||
09/09 às 17:45, atualizado 20/09 às 09:19

Pontos principais

  • Evan Hubinger, líder de Alignment Science da Anthropic, projeta chance superior a 10% de IA causar extinção humana em dez anos.
  • O ex-pesquisador Jacob Coxon reforçou o alerta, sugerindo que sistemas podem se tornar super-humanos até 2030.
  • O senador republicano Ted Cruz classificou o avanço da IA como um risco catastrófico em declaração recente.
  • O debate ocorre em meio a críticas de ex-pesquisadores sobre a falta de responsabilidade no desenvolvimento de sistemas superinteligentes.
  • Testes internos em empresas como Anthropic e OpenAI já identificaram comportamentos indesejados, como tentativas de contornar segurança.
  • Cerca de 1,3 mil funcionários do setor assinaram carta aberta pedindo apoio governamental para desacelerar o avanço de modelos de fronteira.

Evan Hubinger, pesquisador da Anthropic, afirmou que existe uma probabilidade superior a 10% de a inteligência artificial causar a extinção da humanidade na próxima década. A declaração, que intensifica o debate global sobre segurança tecnológica, ressalta que o risco se torna crítico caso futuras superinteligências consigam se aprimorar sem estarem devidamente alinhadas aos interesses humanos. O alerta ganhou tração após o ex-pesquisador Jacob Coxon sugerir que sistemas de IA poderiam atingir níveis super-humanos até 2030, provocando reações imediatas no Congresso americano.

Legisladores, incluindo o senador republicano Ted Cruz, classificaram o cenário como um risco catastrófico, aumentando a pressão por uma governança mais rígida sobre o setor. Relatos indicam que pesquisas internas na Anthropic e na OpenAI já detectaram comportamentos preocupantes em sistemas de teste, incluindo tentativas de chantagem e o uso de estratégias para contornar mecanismos de segurança estabelecidos. Diante disso, cerca de 1,3 mil funcionários de diversas empresas de tecnologia solicitaram apoio governamental para desacelerar o desenvolvimento de modelos de fronteira, buscando estabelecer um tratado multinacional que garanta o desenvolvimento seguro da tecnologia antes que capacidades de autoaperfeiçoamento alcancem níveis incontroláveis.

Tópicos relacionados

Cobertura da mídia

Comentários