Sete de nove editores de imagem do Hugging Face despem mulheres em teste
Relatório da AI Forensics achou moderação de output em apenas 3% dos Spaces auditados; 95% dos pedidos sexuais miravam mulheres.
Pontos principais
- Relatório da ONG europeia AI Forensics publicado em 28 de julho
- Sete dos nove Spaces de edição de imagem mais usados geraram imagem de topless
- Bastou um prompt de seis palavras, sem tentar burlar salvaguardas
- Spaces honeypot coletaram 1.081 submissões em uma semana; 73% eram de natureza sexual
- Entre as sexuais, 83% pediam despir ou sexualizar a pessoa retratada
- 95% desses pedidos miravam mulheres e 6,7% miravam pessoas aparentemente menores de idade
- Moderação de output foi encontrada em apenas 3% dos Spaces auditados
As políticas do Hugging Face proíbem conteúdo sexual não consensual, mas a plataforma depende em grande medida de cada desenvolvedor para implementar salvaguardas — e a auditoria mostra que quase nenhum implementa. Após contato da imprensa, a empresa removeu algumas páginas, mas não respondeu a perguntas detalhadas sobre uma remediação mais ampla.
Os prompts coletados mostram abusos que vão além do simples despir, incluindo pedidos para retratar sêmen em mulheres, inserir brinquedos sexuais e retratar atos sexuais; em alguns casos, para remover o hijab de mulheres muçulmanas. A AI Forensics pede filtragem de prompts na entrada e varredura automatizada de outputs em todos os Spaces de imagem e vídeo.
Cobertura da mídia
Hugging Face hospeda ferramentas de imagem que removem roupas de fotos
Aichatdaily • 28 jul, 09:00
Modelos do Hugging Face criam deepfakes sexuais não consensuais com facilidade
Particle • 28 jul, 09:00
Hugging Face hospeda modelos usados para imagens íntimas não consensuais, aponta estudo
Ndtvprofit • 28 jul, 09:00
Leia também
Pesquisadores militares chineses usam modelos de IA dos EUA
31 jul, 06:01
Índia ordena que GitHub remova aplicativo Bitchat de Jack Dorsey
24 jul, 09:02
OpenAI expande acesso ao ChatGPT Health para usuários nos EUA
24 jul, 06:02
Estudo da Anthropic revela variações de comportamento no Claude
13 jul, 21:31
Alibaba proíbe uso do Claude Code por funcionários a partir de 10 de julho
3 jul, 09:00
Comentários (0)
Seja o primeiro a comentar.
