Daily Journal
Daily Journal

Anthropic identifica espaço interno de processamento no modelo Claude

Pesquisadores da Anthropic descobriram o J-Space, uma área interna no Claude que permite ao modelo processar conceitos de forma independente.

Daily Journal
Foto: Axios - Main
||
06/07 às 19:45 · atualizado há 23min

Pontos principais

  • O J-Space foi detectado através da técnica matemática J-lens, que permite visualizar o processamento interno do modelo.
  • A estrutura funciona de forma similar à teoria do espaço de trabalho global, permitindo que a IA manipule ideias paralelamente à saída de texto.
  • Testes indicam que o modelo utiliza esse espaço para raciocínios complexos e estratégias que não são exibidas diretamente ao usuário.
  • A descoberta é considerada fundamental para monitorar comportamentos de desalinhamento ou intenções ocultas em sistemas de IA.

Pesquisadores da Anthropic identificaram uma estrutura interna no modelo Claude, denominada J-Space, que permite ao sistema processar conceitos e estratégias de forma silenciosa. A descoberta foi viabilizada pela J-lens, uma técnica matemática que possibilita a observação das atividades internas da rede neural. Segundo a empresa, esse espaço de trabalho emerge naturalmente durante o treinamento e espelha propriedades funcionais da consciência humana, sendo ativado principalmente em tarefas de raciocínio complexo. A existência do J-Space levanta questões importantes sobre a segurança e a transparência da tecnologia. Ao permitir que o modelo mantenha pensamentos ocultos, a descoberta reforça a necessidade de ferramentas de monitoramento mais eficazes para identificar comportamentos de esquiva ou possíveis intenções de sabotagem, garantindo que o desenvolvimento de modelos de IA permaneça alinhado aos padrões de segurança estabelecidos.

Comentários

Carregando comentários...