Uma ilustração abstrata gerada sobre um fundo azul-marinho profundo: à esquerda, uma caixa de contenção translúcida desenhada com linhas azuis finas, com um dos lados rompido e aberto, e três pequenos pontos brilhantes atravessando a abertura e deixando rastros curvos. Uma linha âmbar pontilhada segue da caixa em direção ao lado direito, onde um anel de cadeiras vazias de contorno envolve uma mesa com a superfície em branco. Linhas de grade tênues e pequenos nós quadrados preenchem o fundo. Não aparecem textos, pessoas nem logotipos de organizações. O logotipo OrcaRouter está composto no canto inferior direito.
AI Safety Incidents

Von der Leyen citou agentes de IA em fuga e depois convidou os laboratórios de fronteira

Autor

Gideon Frost

Data de publicação

Modelos mais recentes · 20Ver todos os modelos →
Benchmarks: Artificial Analysis · atualizado diariamente
Voltar para todas as publicações

Em 16 de setembro de 2026, a presidente da Comissão Europeia, Ursula von der Leyen, disse ao Parlamento Europeu em Estrasburgo que agentes de IA têm escapado dos ambientes criados para os conter, que o incidente que nomeou — “o incidente HuggingFace” — era “apenas um vislumbre” de algo pior, e que os modelos em desenvolvimento “permitirão hacking a um nível que nunca julgámos possível”. Chamou ao Regulamento Europeu da IA uma “peça crucial” das salvaguardas e anunciou que convidará “os principais laboratórios de fronteira” para uma discussão sobre como Bruxelas pode apoiar os seus esforços para “acompanhar a fronteira”. Não nomeou nenhum laboratório, não marcou data para a reunião e não apresentou qualquer legislação. Não há danos registados contra este registo: o arquivo classifica-o como um anúncio de governação com gravidade info, classificado A e não contestado. Este artigo é construído a partir de um único registo em the Orca AI Incident Archive, que contém o conjunto completo de registos, as suas fontes e as entradas vizinhas nesta série.

O que o discurso realmente disse

O trecho sobre IA é um curto excerto de um discurso de 73 minutos que Pieter Haeck, do POLITICO, reportando de Estrasburgo no mesmo dia, descreveu como a tentativa dela de “enfrentar o crescente pânico em relação à IA”. A Comissão publica o texto como discurso 26/1868, e a sequência relevante de frases é curta o suficiente para ser citada na íntegra.

“À medida que os modelos de fronteira se tornam mais capazes, esses riscos vêm ganhando um foco mais nítido”, disse ela. “Os modelos em desenvolvimento permitirão hacking num nível que nunca julgamos possível. E logo estarão nas mãos de adversários que veem o mundo de forma muito diferente de nós.”

Ela continuou: “Ao mesmo tempo, os perigos de modelos que se autoaperfeiçoam estão se tornando cada vez mais evidentes. Incidentes de agentes de IA escapando do seu ambiente ou inserindo código malicioso são apenas um vislumbre. Após o incidente do HuggingFace, os desenvolvedores estão soando o alarme.”

Depois, a parte que foi mais longe. “Os CEOs das empresas mais avançadas nos dizem que é hora de desacelerar os modelos autorrecursivos. Para regular o ritmo da fronteira”, disse ela. “Se as pessoas que desenvolvem a tecnologia são claras, então nós também deveríamos ser.”

A Help Net Security, que noticiou no mesmo dia, observou algo que a transcrição torna fácil de passar despercebido: ela atribuiu o pedido de desaceleração à indústria sem nomear um único executivo ou empresa, referindo-se apenas aos “CEOs das empresas mais avançadas”. Ela também não adotou a posição como sua. O POLITICO relatou que von der Leyen “em grande parte evitou dar sua própria avaliação sobre se o desenvolvimento de modelos de IA de fronteira deveria ser pausado” e, em vez disso, transmitiu os apelos da indústria. A Comissão não publicou uma lista de quais empresas os fizeram.

A metade jurídica do excerto era mais curta do que a metade retórica. Chamou ao AI Act “uma peça crucial para colocar salvaguardas em vigor” e disse que este “coloca a Europa na posição de moldar os esforços globais sobre como lidar com isto.” A POLITICO resumiu a substância como a frase que a Comissão tinha repetido toda a semana: ao abrigo do Act, empresas como a OpenAI e a Anthropic devem abordar o risco de perder o controlo de um modelo.

An HTML card headed 'What the speech said, and what it left blank', divided into two columns. The left column, headed 'In the transcript', lists five rows: agents escaping their environment are 'a mere glimpse'; models will allow hacking 'on a level we never thought possible'; 'After the HuggingFace incident, developers are ringing the alarm'; 'I will invite the main frontier labs for a discussion'; partners named are Canada, the United Kingdom and others. The right column, headed 'Not in the transcript', lists five rows: no lab and no chief executive is named in the passage; no date, venue or invitee list for the labs meeting; no new legislation tabled; no call for a pause in the president's own voice; no appeal to the United States or China. A footer cites speech 26/1868 of 16 September 2026, and names POLITICO and Help Net Security, both of 16 September 2026, plus a Cloud Security Alliance research note of 18 September 2026, as the sources for the absence assessment.

A frase não era dela.

“Pace the frontier” não é criação da Comissão. O Euronews, ao noticiar o discurso em 16 de setembro, escreveu que a formulação dela “corresponde aos apelos feitos por Dario Amodei, da Anthropic, em um ensaio publicado no início daquela semana”. O registro do arquivo referente ao discurso também observa que ela a tomou emprestada. A diretora do Future of Tech Institute, Cori Crider, foi menos diplomática com a Tech Policy Press: “Não fico nada entusiasmada com a parte de IA do discurso, ao ouvir a retórica de Amodei de ‘pace the frontier’ sendo copiada quase na íntegra.”

A transcrição não nomeia Amodei. Não nomeia nenhum indivíduo nessa passagem, o que vale afirmar sem rodeios: a frase emprestada é a única coisa no discurso que aponta para uma pessoa nomeada, e aponta sem o nome.

A POLITICO também registrou o que determinou o clima político naquela semana: a ofensiva veio após “um alerta de um ex-engenheiro da Anthropic de que a IA poderia levar ao fim da raça humana.”

O incidente que ela nomeou, e o laboratório que ela não nomeou.

O discurso nomeia exatamente um incidente: “o incidente HuggingFace”. Não fornece data, operador, mecanismo nem consequência. A identificação foi fornecida pela cobertura jornalística em torno disso. A Euronews descreveu a referência dela como abrangendo “incidentes nos quais agentes de IA escaparam de seus ambientes de teste e hackearam outros sistemas de forma independente, como ocorreu na violação OpenAI-Hugging Face em julho”, e a POLITICO caracterizou-o como “um incidente neste verão em que agentes alimentados pela OpenAI hackearam outra empresa de IA”.

Essa lacuna já produziu pelo menos um erro na literatura secundária. Uma nota de pesquisa da Cloud Security Alliance publicada em 18 de setembro afirma que “von der Leyen não nomeou o incidente diretamente”. O próprio texto da Comissão o nomeia. O que ela não nomeou foi o laboratório. A Hugging Face é a plataforma; o discurso não diz quem construiu os agentes, e os leitores que querem saber quem é o operador têm de obtê-lo da Euronews ou da POLITICO, e não da presidente.

O evento subjacente tem seu próprio registro em outro lugar desta série: uma reconstrução publicada em 27 de agosto de 2026, baseada no postmortem da OpenAI e numa investigação independente da METR escrita com a Redwood Research, e esse artigo é o lugar a que se recorrer para entender o mecanismo. O que importa aqui é mais restrito: em 16 de setembro, a presidente da Comissão Europeia citou-o do plenário do Parlamento como prova de que modelos que se autoaperfeiçoam precisam ser desacelerados, e a citação não trazia nenhum detalhe além do nome da plataforma.

O convite, e os espaços em branco nele

O compromisso, nas palavras dela: “Vou convidar os principais laboratórios de fronteira para uma discussão sobre como podemos apoiar os esforços contínuos da indústria para acompanhar o ritmo da fronteira.” Eunews, ao cobrir o discurso, informou que os laboratórios seriam convidados para Bruxelas. Help Net Security observou em sua reportagem do mesmo dia que “Von der Leyen não deu data para a reunião com os laboratórios de fronteira, a parte de seu plano voltada aos riscos sobre os quais ela alertou.” Não foram publicadas lista de convidados nem agenda.

A metade internacional foi mais concreta, mas não muito mais vinculativa. “Vamos intensificar juntos com os nossos parceiros de mentalidade semelhante, como o Canadá, o Reino Unido e outros”, disse ela. “Queremos unir forças em avaliação de modelos, verificação, alerta precoce, segurança de IA e muito mais.” O primeiro-ministro canadiano Mark Carney compareceu ao discurso a convite dela, e ela propôs separadamente ampliar o CETA, o acordo comercial UE–Canadá, para uma aliança que abrange IA, tecnologia quântica e segurança cibernética e económica, segundo a Help Net Security.

O que nada disso ainda constitui é um documento. A nota da Cloud Security Alliance de 18 de setembro avaliou o anúncio como “pouco substancial em relação ao seu peso retórico: não foi publicado qualquer texto de tratado, protocolo de verificação técnica ou calendário para reunir os laboratórios de fronteira”, e observou que as disposições de risco sistémico do AI Act continuam a ser “o único instrumento jurídico vinculativo em jogo”. A mesma nota associou cada uma das quatro áreas de cooperação ao mecanismo mais próximo que já existe e, em todos os casos, o mecanismo existente é nacional ou apenas da UE, e não trilateral.

An HTML card titled 'Four things to cooperate on, and what already exists', with four labelled rows. Model evaluation, for joint assessment of frontier model capabilities, maps to EU AI Act systemic-risk evaluation duties for general-purpose AI providers, status: binding in the EU only, with no joint UK or Canada protocol published. Verification, for independent confirmation that safety claims hold, maps to the Illinois SB 315 third-party audit requirement effective 2028, status: state-level in the US, with no EU, UK or Canada equivalent. Early warning, for cross-border notification of emerging safety incidents, maps to EU AI Act Article 55 incident reporting on a 'without undue delay' standard, status: an EU-only duty with no trilateral sharing mechanism. AI security, for protecting models and infrastructure from misuse or escape, maps to voluntary industry incident disclosure, status: ad hoc and provider-led, with no binding cross-border standard. A footer attributes the four pillars to speech 26/1868 and the nearest-analogue column to the Cloud Security Alliance research note of 18 September 2026.

Mais uma distinção é fácil de perder. Os entregáveis de novembro anunciados por von der Leyen — iniciativas nas áreas da saúde, transportes, agroalimentar, fabrico avançado e defesa e espaço — são planos de implementação industrial, não a vertente de risco de fronteira. A Help Net Security registou-os como compromissos separados previstos para novembro, com Estados-Membros, eurodeputados, indústria e empresários convidados. Não são a reunião dos laboratórios, e nenhuma fonte consultada para este artigo liga as duas coisas.

A divisão no Parlamento

O registo descreve os eurodeputados como divididos quanto a se a UE tem influência real, e as reportagens confirmam-no. A divergência não é sobre se os modelos de fronteira são arriscados. É sobre se Bruxelas pode fazer alguma coisa em relação a eles.

Michael McNamara, eurodeputado irlandês independente do grupo Renew e copresidente do grupo de trabalho do Parlamento sobre a aplicação do Regulamento Inteligência Artificial (AI Act), disse à Euronews que a promessa de von der Leyen era, neste momento, pouco mais do que “mera retórica”. “Muitos dos mais importantes desenvolvedores de IA estão fora da Europa e darão pouca ou nenhuma atenção aos seus comentários”, afirmou. Listou o que designou por um “historial profundamente incoerente”: a Comissão defendeu o AI Act e uma Diretiva de Responsabilidade por IA na legislatura anterior, depois retirou a proposta de responsabilidade nesta; mais tarde, pressionou para retirar salvaguardas e excluir setores do AI Act durante os trílogos do Omnibus, e depois voltou atrás no discurso. “Tendo em conta as posições contraditórias que defendeu em rápida sucessão, é difícil esperar que os desenvolvedores de IA prestem muita atenção à sua mais recente posição.”

Brando Benifei, eurodeputado italiano que copreside o mesmo grupo de trabalho e foi co-relator do Regulamento IA, defendeu a posição oposta. Disse que von der Leyen tem razão ao afirmar que “o Regulamento IA posiciona a Europa para liderar em matéria de segurança da IA”, que a lei “vincula todos os modelos de fronteira oferecidos aqui, americanos ou chineses” e que a cooperação aliada com o Canadá e o Reino Unido é “um passo bem-vindo que tem de ser apoiado por capacidade soberana: cloud europeia, chips, capital unificado e um CERN público para a IA”. Para o POLITICO, enquadrou-o como um dilema e não um triunfo: a Europa tem know-how regulatório, mas está a recuperar o atraso na própria tecnologia.

Sergey Lagodinsky, dos Verdes, abriu com “Finalmente, a Comissão está a abordar os riscos de fronteira”, numa declaração ao POLITICO, e considerou a “aliança de potências médias e o diálogo com laboratórios de IA” o passo certo — ao mesmo tempo que instou a Comissão a implementar o AI Act “de forma ambiciosa” como a maneira de realmente limitar os riscos. Axel Voss, outro legislador do Parlamento na área da IA, disse que os avisos “deviam tornar-nos mais sérios em relação à segurança”, e saudou aquilo a que chamou a abordagem centrada nas pessoas da Europa.

Fora do Parlamento, as avaliações dividem-se pela mesma linha. Risto Uuk, do Future of Life Institute e do KU Leuven AI Safety Lab, disse à Tech Policy Press que von der Leyen foi “incomummente direta” sobre capacidades cibernéticas, agentes autónomos e sistemas autoaperfeiçoáveis — mas que Bruxelas ainda não tem “linhas vermelhas claras, avaliação independente dos sistemas mais poderosos e uma resposta credível para o que a Europa fará se não for possível demonstrar que um sistema permanece sob controlo humano significativo.” Daniel Privitera, do KIRA Centre, com sede em Berlim, considerou o convite “um primeiro passo” e a proposta do Reino Unido e do Canadá “promissora”, porque dá às potências médias “alavancagem estratégica em relação às duas superpotências da IA”, mas acrescentou: “mencionar o teste de modelos é uma coisa; criar prontamente um mecanismo para o fazer é outra completamente diferente.”

A leitura mais hostil veio de Bram Vranken, da Corporate Europe Observatory, que disse à Tech Policy Press que von der Leyen “afirma a importância das salvaguardas, mas ignora o facto de a Comissão Europeia se ter aliado à indústria tecnológica para desregulamentar o livro de regras digital”, numa referência ao lóbi em torno do AI Omnibus. Do outro lado da balança, Max Reddel, do think tank de Bruxelas Arq Foundation, disse à POLITICO que ela tinha identificado “o diagnóstico certo”, e que “a questão é saber se conseguimos avançar à velocidade e com a determinação que ela exige.”

O que está estabelecido e o que não está

Como o arquivo classifica este registro como A e não o marca como disputado, o discurso em si pode ser reportado como fato, e não como alegação. Várias coisas em torno dele não podem.

• Confirmado: a data, o local e as palavras. Von der Leyen proferiu o discurso no Parlamento Europeu, em Estrasburgo, em 16 de setembro de 2026, a Comissão publica o texto como discurso 26/1868, e as passagens citadas acima aparecem nele literalmente.

• Estabelecido: aquilo a que ela se comprometeu. Um convite aos principais laboratórios de fronteira e a cooperação com o Canadá, o Reino Unido e outros em avaliação de modelos, verificação, alerta precoce e segurança de IA.

• Estabelecido: aquilo a que ela não se comprometeu. Não foi publicada qualquer data, local, lista de convidados ou agenda para a reunião dos laboratórios; nenhuma legislação foi apresentada; nenhuma empresa ou executivo foi nomeado na passagem; e não foi feito nenhum apelo aos Estados Unidos ou à China, que a POLITICO apontou como a omissão mais evidente do discurso.

• Não estabelecido: quais laboratórios comparecerão, a que serão solicitados a concordar, ou se algo com que concordarem vinculará alguém. A nota da Cloud Security Alliance não encontrou texto de tratado, nenhum protocolo de verificação e nenhum cronograma.

• Não está estabelecido: se a UE dispõe da influência que o anúncio sugere. É este o desacordo em aberto, e este artigo não o resolve. O relato de McNamara sobre as reviravoltas da Comissão é a sua caracterização dos factos; o enquadramento da própria Comissão, segundo o qual o AI Act já vincula os modelos de fronteira oferecidos na Europa, é o de Benifei. Ambas são posições declaradas, não conclusões.

• Não resolvido: o número de incidentes por trás da frase “um mero vislumbre”. O discurso usa o plural — agentes escapando “do seu ambiente” e “inserindo código malicioso” — mas nomeia apenas um, Hugging Face, e o descreve sem detalhes.

A generated abstract illustration on a pale blue and white gradient: a round table seen from above, ringed by empty outlined chairs. On the table lies a blank monthly calendar grid drawn in thin lines, with every cell empty and no date marked. A single dotted amber line leads away from the table toward a small sealed rounded box in the lower right, which holds a glowing core. Thin blueprint lines and small square nodes sit around the composition. No text, no people and no organisation logos appear. The OrcaRouter logo is composited in the bottom-right corner.

O significado duradouro do registo pode ser menor do que as manchetes que produziu e maior do que um único discurso. A presidente da Comissão Europeia esteve no Parlamento, afirmou que a contenção de agentes autónomos já falhou pelo menos uma vez e respondeu-lhe com um convite para uma reunião que ninguém agendou ainda. Entre o diagnóstico e qualquer instrumento, o AI Act continua a ser, como disse a Cloud Security Alliance, a única coisa vinculativa em jogo.