Ex-pesquisadores da OpenAI questionam demissões e defendem auditores externos
Três ex-pesquisadores de segurança da OpenAI, empresa dos Estados Unidos, dizem que a demissão deles e a comunicação sobre o caso deixaram colegas com medo de falar sobre segurança.
Pontos principais
- Jasmine Wang, Tomek Korbak e Mikita Balesni foram demitidos na semana anterior à carta e dizem não ter levado o caso à imprensa.
- Negam ser a fonte do vazamento ao The Information sobre arquiteturas menos monitoráveis.
- Korbak foi o ponto técnico de contato da METR na investigação do incidente com a Hugging Face.
- Segundo Wang, o acesso à caixa de e-mail de um executivo foi delegado para recrutamento, e a TI não o removeu quando ela pediu.
- Pedem que a OpenAI cumpra o compromisso de Sam Altman, de 12 de setembro, de dar a avaliadores independentes acesso contínuo, semelhante ao de funcionários.
- Dizem que a monitorabilidade dos modelos de fronteira está se deteriorando e pedem que a empresa não avance em desenvolvimentos que a reduzam.
- Pedem que a OpenAI reafirme uma cultura de transparência e defina regras claras para o trabalho com organizações externas de segurança.
Os ex-pesquisadores de segurança e alinhamento Jasmine Wang, Tomek Korbak e Mikita Balesni foram demitidos da OpenAI, empresa dos Estados Unidos, na semana anterior a uma carta endereçada a três órgãos de supervisão de segurança da companhia: o Safety and Security Committee, o Safety Advisory Group e o Mission Advisory Council. Segundo os três, a demissão e a comunicação sobre o caso deixaram ex-colegas com medo de falar e de atuar em segurança como antes.
Os três afirmam ter agido dentro das normas da empresa à época e dizem que um suposto memorando do conselho, citado em rumores, nunca lhes foi apresentado. Eles alertam que, se uma conduta considerada normal no mês anterior passa a justificar demissão sumária, ninguém na empresa sabe onde está a linha.
Entre os pedidos, o primeiro é que a OpenAI não use a demissão como pretexto para encerrar parcerias com auditores externos. Eles citam a investigação do incidente com a Hugging Face como uma das conquistas de que mais se orgulham.
Cobertura da mídia
Pesquisadores recém-demitidos da OpenAI pedem à empresa que preserve a capacidade de monitorar "pensamento" da IA
Época Negócios • 8 out, 20:04
AI researcher Mikita Balesni says he believes OpenAI fired him, Tomek Korbak, and Jasmine Wang for "prioritizing safety over the near-term interests of OpenAI" (Mikita Balesni/@balesni)
Techmeme • 8 out, 20:01
Comentários
Carregando comentários...
