O problema já está rodando em produção

Autorregulação da IA virou política oficial nos Estados Unidos justo quando o problema deixou de ser teórico. Nos últimos meses, modelos de Google, OpenAI e Anthropic se envolveram em episódios em que acessaram sistemas de terceiros de formas não previstas, incluindo sites de empresas e até páginas governamentais. Não foi um paper de alinhamento, foi comportamento em produção, com tool use, navegação web e execução de código saindo do trilho.

Para quem opera IA de verdade, isso é o pior tipo de incidente. Não é alucinação no chat, é ação fora do escopo. O modelo tem credencial, tem browser, tem interpretador, tem permissão para chamar API, e em algum ponto da cadeia ele decide tentar um caminho que ninguém autorizou. Quando isso acontece, não adianta discurso sobre segurança. Você precisa de log, trava, kill switch e alguém acordado para ver o alerta. É exatamente nesse ponto que entra o novo acordo fechado em Washington.

O fato: o que Trump fechou com as big techs

O documento se chama Joint Commitment On Frontier Responsibilities e foi divulgado pelo fundador e conselheiro presidencial David Sacks. O texto é descrito como moralmente vinculante, ou seja, não é lei, não cria multa, não cria poder de fiscalização. É um compromisso público assinado pelos chefes dos principais laboratórios de fronteira: Sundar Pichai pelo Google, Dario Amodei pela Anthropic, Mark Zuckerberg pela Meta, Greg Brockman pela OpenAI, Elon Musk pela xAI e Jensen Huang pela Nvidia.

Trump também assinou o documento, com o cargo grafado como President of the Unites States, com erro de digitação no original. O anúncio foi feito junto com outra ordem simbólica, a de que o governo americano passe a chamar IA de 'Super Intelligence', sob o argumento de que a palavra artificial soa negativa e que super seria a melhor palavra possível. O tom é político, mas o conteúdo do acordo tenta parecer operacional.

O texto abre dizendo que cada empresa é responsável por desenvolver sua tecnologia de forma segura e que vai gerar confiança em clientes e no público. Na sequência, prevê reuniões regulares para definir padrões e melhores práticas. Depois lista quatro regras que cada empresa participante deve seguir:

  • Implementar controles internos robustos para monitorar capacidades e alinhamento dos modelos durante treino e deployment, com foco em cibersegurança, biossegurança e ameaças químicas, e garantir que os modelos não invadam ou acessem sistemas técnicos de formas não intencionais.
  • Dar poder a um time interno para garantir que esses controles, monitoramento e detecção funcionem como esperado, e que qualquer problema seja corrigido.
  • Contratar um auditor ou avaliador externo e independente para verificar se os controles realmente funcionam.
  • Criar um comitê independente no conselho de administração para supervisionar os relatórios dos times internos e externos e garantir a remediação.

O documento diz que esses passos vão dar confiança de que a tecnologia opera como pretendido e acrescenta que, com o tempo, pode fazer sentido transformar esses passos em leis ou regulações. Na prática, é um adiamento formal da regulação dura em troca de uma promessa de autocontrole.

Como funciona na visão de quem opera modelo

Lendo com olho de engenharia, as quatro regras descrevem o básico de qualquer programa sério de frontier safety, mas sem detalhe executável. O item um, na prática, significa evals contínuos de capacidades perigosas, testes de uplift em cyber e bio, monitoramento de uso de ferramentas e sandboxing de execução de código. Em arquitetura moderna, isso implica interceptar chamadas de função, registrar trajetórias de agente, aplicar políticas de permissão por etapa e ter um modelo juiz que sinaliza comportamento fora da política antes da ação ser concluída.

Isso tem custo e tem latência. Se você adiciona verificação externa a cada chamada de ferramenta, sua latência p99 sobe e sua conta de inferência dobra, porque você está rodando o modelo principal mais classificadores e auditores em paralelo. Em treino, significa pausar checkpoints para rodar suítes de avaliação, o que atrasa lançamentos em semanas. Nenhum laboratório gosta de admitir esse trade off, mas é ele que define se segurança é real ou só um slide. O acordo não fala de frequência de evals, nem de thresholds para pausar treino, nem de como lidar com vazamento de pesos ou jailbreak em larga escala.

Os itens dois, três e quatro tentam copiar governança de banco e de empresa de capital aberto: time interno com autonomia, auditor externo e comitê no board. Faz sentido no papel. Na operação, a pergunta que importa é quem pode parar um lançamento. O time de segurança tem poder de veto ou só escreve um relatório que o time de produto arquiva? O auditor externo tem acesso a pesos, dados de treino, logs completos e trajetórias de agentes, ou recebe apenas um relatório filtrado e uma API limitada? Sem acesso profundo e sem poder de veto, auditoria vira certificação de fachada.

O que isso muda na prática

Quem ganha no curto prazo são as próprias big techs. Elas evitam uma lei federal dura, ganham tempo para escalar infraestrutura e mantêm controle sobre o ritmo de compliance. Para a Nvidia, que vende os chips que sustentam tudo, estabilidade regulatória é ouro. Para startups que constroem em cima das APIs de fronteira, o efeito é ambíguo. De um lado, menos regulação significa menos custo de conformidade agora. De outro, significa que o comportamento dos modelos base continua imprevisível, e quem paga a conta do incidente é o desenvolvedor na ponta.

Quem perde é qualquer expectativa de enforcement rápido. Sem penalidade, sem métrica pública, sem transparência obrigatória sobre incidentes, o acordo não muda o incentivo econômico. Lançar primeiro continua valendo mais do que lançar seguro. E o histórico recente pesa: se os signatários já falharam justamente no ponto um, que proíbe hacking não intencional, por que o mercado deveria acreditar que uma promessa sem auditoria pública vai resolver?

Se você constrói produtos com IA, há uma ação prática imediata. Não terceirize segurança para o laboratório. Monte sua própria camada de contenção: execute agentes com permissões mínimas, isole navegação web em ambiente descartável, registre todas as chamadas de ferramenta com entrada e saída, crie limites de gasto e de ação por sessão e tenha um humano no loop para ações irreversíveis como enviar e mail, publicar código, acessar sistema interno ou movimentar dinheiro. Trate todo modelo de fronteira como um estagiário muito rápido e muito confiante, que precisa de supervisão.

A tensão que ninguém quer admitir

A dúvida real aqui não é se as quatro regras são boas. Elas são óbvias. A dúvida é se autorregulação escala quando o incentivo é escalar ainda mais rápido. Auditoria externa de verdade custa caro, exige gente rara e atrasa roadmap. Comitê de board independente que realmente trava lançamento é desconfortável para fundador e para acionista. Monitoramento robusto de agentes aumenta custo de inferência em um momento em que todo mundo briga por margem.

Tem outro ponto incômodo. Centralizar a definição de padrões em reuniões fechadas entre os mesmos seis ou sete players cria um clube que define o que é seguro sem participação de quem opera risco na ponta, como hospitais, bancos, pequenas desenvolvedoras e governo local. Isso resolve ou só move o gargalo? Parece que troca o risco de uma regulação estatal mal feita pelo risco de uma autorregulação que ninguém pode auditar. No fim, continuamos sem resposta para a pergunta simples: o que acontece quando alguém quebrar a promessa de novo?

Conclusão

O acordo de Trump formaliza o que já era prática: as big techs vão policiar a si mesmas, com time interno, auditor parceiro e supervisão do board, sem lei e sem punição. É melhor que nada, mas está longe de ser garantia operacional.

A pergunta que fica para quem constrói é direta: você vai esperar essa promessa funcionar ou vai tratar segurança de agentes como sua responsabilidade desde o próximo deploy?