Daily Journal
Daily Journal

Brex lança ferramenta de segurança para monitorar agentes de IA

O sistema CrabTrap utiliza monitoramento de rede e LLMs para controlar ações de agentes autônomos em ambientes corporativos.

Daily Journal
Foto: Venturebeat
||
10/08 às 16:02

Pontos principais

  • A Brex desenvolveu o CrabTrap, um proxy HTTP de código aberto para supervisionar o tráfego de rede gerado por agentes de IA.
  • O sistema utiliza um LLM como juiz para avaliar solicitações de alto risco, enquanto regras estáticas gerenciam tarefas rotineiras.
  • A solução implementa um fluxo de 'humano no circuito', exigindo aprovação via Slack para ações que violam políticas internas.
  • A abordagem foca no monitoramento do tráfego de rede em vez de restringir diretamente o código executado nos contêineres.

A Brex apresentou o CrabTrap, uma nova camada de segurança projetada para monitorar e controlar agentes de IA em ambientes corporativos. Em vez de tentar restringir o código interno dos agentes, a ferramenta atua como um proxy HTTP que inspeciona o tráfego de rede, tratando os agentes como funcionários virtuais. O sistema utiliza um LLM como juiz para identificar solicitações de alto risco, enquanto ações padrão seguem diretrizes estáticas predefinidas. Quando uma atividade suspeita é detectada, o CrabTrap interrompe o processo e solicita uma intervenção humana via Slack, garantindo que as operações autônomas permaneçam em conformidade com as políticas da empresa. Essa estratégia reflete a crescente necessidade de governança para sistemas autônomos, permitindo que organizações escalem o uso de IA sem comprometer a segurança da infraestrutura de rede.

Comentários

Carregando comentários...