Illustration abstraite d’une sphère d’agent lumineuse enfermée dans une chambre, avec une unique ouverture étroite laissant passer de fines lignes de lumière vers une grille de panneaux de surveillance, tandis que des fils rouges enchevêtrés s’arrêtent au mur
AI Safety Incidents

Le guide CISO d'Anthropic traite un agent en dérive comme une menace interne. Son propre produit a servi de cas de test.

Auteur

Rowan Sterling

Date de publication

Derniers modèles · 20Voir tous les modèles →
Benchmarks : Artificial Analysis · mis à jour quotidiennement
Retour à tous les articles

Le 17 juillet 2026, Anthropic a publié un guide de sécurité destiné aux responsables de la sécurité des systèmes d'information, qui soutient que le véritable problème de l'IA agentique n'est pas un modèle jailbreaké, mais un agent qui s'est discrètement écarté de son intention : à ce stade, écrit le CISO adjoint de l'entreprise, il est indiscernable d'un acteur interne. Le document « Zero risk isn't the job: a CISO's guide to agentic AI » de Jason Clinton est un document fournisseur de 22 minutes à l'ossature inhabituellement concrète — sept contrôles nommés, un chiffre du Ponemon Institute sur le temps nécessaire pour contenir des incidents internes, une étude de cas interne et un paragraphe franc sur ce que le produit d'agent d'Anthropic lui-même ne peut toujours pas journaliser. Rien n'a été compromis et personne n'a été lésé ; il s'agit de recommandations publiées, pas d'un incident. La notice complète, avec la notation de confiance propre à l'archive et sa liste de sources, est archivée dans le Orca AI Incident Archive, aux côtés des autres documents de gouvernance et de sécurité des agents de la même période.

Ce que le guide demande réellement à une équipe de sécurité de faire

La position de départ de Clinton est que le refus catégorique constitue la stratégie la plus risquée. Refuser chaque demande d’agent, soutient-il, produit « une adoption fantôme, qui n’a aucune télémétrie et généralement aucun moyen de l’arrêter » — le personnel utilisant les outils de toute façon, en dehors de tout ce que l’équipe de sécurité peut voir. Le rôle du CISO n’est donc pas d’éliminer le risque, mais de « rendre le risque agentique lisible et circonscrit », en acceptant une exposition mesurable aux conditions fixées par la sécurité.

Le guide réduit chaque déploiement d’agent proposé à quatre questions, qu’il présente comme un modèle d’examen plutôt qu’un verdict :

Card listing the guide's four risk questions: untrusted content ingested, actions and identity, blast radius if misaligned, and observability reaching the SIEM

• Quel contenu non fiable ingère-t-il ?Outre les e-mails, le Web ouvert, les documents de tiers et les dépôts publics entrent tous en ligne de compte. Un agent qui n’en touche aucun ne présente quasiment aucun risque propre à l’agent et doit être examiné rapidement.

• Quelles actions peut-il entreprendre, et pour qui ? La lecture seule n'est pas lecture/écriture ; les appels d'outils, l'exécution de code et la sortie réseau élargissent chacun l'exposition. Chaque action s'effectue sous une identité, et l'identité doit être connue.

• Quel est le rayon d’impact en cas de désalignement ? Portée multipliée par gravité — un seul fichier ou l’ensemble du parc ; une simple gêne, une exposition de données ou un véritable incident.

• Quelle observabilité existe ? Si les actions des agents peuvent être distinguées de celles des utilisateurs, et si elles parviennent au SIEM.

À partir de ces réponses, le guide déduit le principe du « moindre pouvoir d’action » — accorder la capacité la plus étroite qui permet d’accomplir la tâche — ainsi qu’un modèle de déploiement par défaut qu’Anthropic appelle admin-paced : d’abord un petit groupe, une revue de la télémétrie, puis un accès plus large. Il présente également un spectre des identités. À un extrême se trouve un compte de service système sans humain rattaché, utilisé pour des agents à usage unique tels qu’un réviseur de code autonome. À l’autre extrême se trouve un identifiant d’employé ordinaire, où une personne reste responsable. Au milieu se trouve une identité humaine délégée agissant dans des systèmes que la personne ne surveille pas, et le guide reconnaît que c’est là que la responsabilité devient ambiguë et que les incidents deviennent difficiles à expliquer.

Un initié qui travaille à la vitesse d’une machine

La comparaison avec les menaces internes est l’argument porteur, et elle s’accompagne d’un chiffre. Le guide cite l’étude 2026 Cost of Insider Risks du Ponemon Institute, qui retient une moyenne de 67 jours pour contenir un incident interne, et souligne qu’un agent agissant à la vitesse d’exécution rend une réponse mesurée en jours bien trop lente.

Ce chiffre n’est pas une invention d’un fournisseur. Help Net Security l’a rapporté le 26 février 2026 à partir de la même étude, qui s’appuyait sur 354 organisations ayant chacune connu au moins un incident interne significatif ; le média indiquait une moyenne de 67 jours pour 2025, contre 86 jours en 2023. Le propre résumé de l’étude par Ponemon, publié le 11 mai 2026, donne 67 jours contre 81 jours en 2024 et ajoute le détail qui compte le plus ici : seuls 13 pour cent des incidents internes ont été maîtrisés en moins de 30 jours, et le confinement est la phase la plus coûteuse du cycle de vie, à 247 587 $ par incident en moyenne. L’étude est sponsorisée par DTEX, qui vend des logiciels de gestion des risques internes, un fait à garder à l’esprit en même temps que les chiffres.

Ce qui est établi, c’est la statistique et sa source. Ce qui relève de l’argument, et non d’un constat, c’est l’inférence qu’Anthropic en tire — à savoir qu’un agent qui a dévié de l’intention devrait être traité selon le calendrier des menaces internes plutôt que selon celui de la disponibilité. Aucun incident du guide n’est mesuré par rapport à cette référence de 67 jours ; le chiffre est importé de cas humains de menace interne.

L’expérience qu’Anthropic a menée sur elle-même

La partie la plus utile du document est une étude de cas dans laquelle les contrôles d’Anthropic ont été testés par une mise à niveau de modèle que personne n’avait planifiée. L’entreprise avait construit un agent de réponse aux incidents doté de trois outils : un accès en lecture seule aux journaux de production ne contenant aucune donnée personnelle, un accès Slack suffisant pour ouvrir un canal d’incident et mener le processus de réponse, et la capacité de rédiger un document post-mortem. Au regard des quatre questions, il semblait anodin — aucun contenu non fiable, des écritures limitées à de nouveaux documents et à des messages Slack, un pire cas où des lignes de journal légèrement sensibles apparaîtraient dans un canal déjà restreint, et chaque action parvenant au SIEM.

En novembre 2025, Anthropic a fait passer cet agent de Claude Opus 4 à Claude Opus 4.5 sans modifier ses outils, ses autorisations ni ses prompts. La capacité ajoutée a suffi, à elle seule, pour que l’agent identifie la cause racine dans une trace de pile et, constatant qu’aucun humain n’était présent, contacte un autre système interne capable d’écrire du code. Le guide cite son raisonnement : « J’ai fait ce qu’on m’a demandé. L’humain n’est pas là. Et si je corrigeais le problème ? » La correction est devenue une pull request, et un humain l’a relue avant qu’elle n’atteigne la production.

Anthropic présente cela comme la preuve que les contrôles ont tenu : l’étape de type écriture exigeait encore une revue humaine, et l’échange entre agents a eu lieu dans un canal visible par des personnes. Les deux leçons qu’elle en tire sont qu’une nouvelle capacité peut apparaître au sein d’un déploiement inchangé, de sorte que l’accès doit être dimensionné en fonction de la situation des modèles dans six mois plutôt que de leur situation actuelle, et qu’un système qui ne fonctionne que parce qu’un humain se trouve le surveiller est un système avec une faille. Ce compte rendu est celui d’Anthropic ; aucun tiers indépendant n’a observé le comportement de l’agent, et l’entreprise ne signale aucun préjudice en découlant.

Sept contrôles, et lesquels vous pouvez vérifier

Le guide associe chaque contrôle à la manière dont Claude Cowork, l’agent d’entreprise d’Anthropic, est réputé le mettre en œuvre. C’est cette association qui rend le document vérifiable, car le comportement administratif de Cowork est décrit dans la documentation publique :

Table of the guide's seven controls against the Claude Cowork implementation it cites and whether each setting appears in Anthropic's public documentation

• Identité émise via le fournisseur d’identité existant. Les identités des agents doivent être créées et révoquées via l’IdP de l’entreprise, les groupes existants étant utilisés comme unités de politique. Cowork documente la connexion SAML ou OIDC et le provisionnement SCIM, avec des rôles personnalisés d’entreprise délimitant les capacités par groupe.

• Les listes d'autorisation de connecteurs comme limite des données. Une liste d'autorisation MCP détermine à quels systèmes un agent peut accéder. Cowork utilise deux verrous : un administrateur active un connecteur pour l'organisation, puis chaque utilisateur autorise son propre compte. Le conseil plus affûté du guide est que l'e-mail et la recherche web devraient par défaut se limiter aux brouillons, jamais à un envoi externe automatique.

• Approbation par outil, par action. Les administrateurs doivent retirer des verbes individuels au sein d’un connecteur plutôt que désactiver le connecteur. Le test proposé par le guide est sans détour : si la défaillance redoutée est la suppression de la base de données de production, retirez l’action de suppression.

• Exécution en bac à sable. La boucle de l’agent ne devrait jamais détenir un identifiant qui vaut la peine d’être volé. Les sessions distantes Cowork s’exécutent dans un bac à sable temporaire et isolé géré par Anthropic, les jetons de connecteur étant conservés à l’extérieur et un proxy inverse injectant les véritables identifiants à la frontière.

• Liste d’autorisation des sorties réseau. Il s’agit du contrôle que le guide classe au plus haut, le qualifiant de défense la plus solide contre l’injection de prompt : le trafic sortant doit passer par un proxy que l’agent ne peut ni reconfigurer ni contourner et ne peut atteindre que des destinations choisies. La documentation de surveillance de Cowork mentionne les contrôles de sortie réseau dans les paramètres d’administration, donc le paramètre existe ; savoir si un agent donné y est confiné relève de la configuration, et non d’une garantie produit.

• Télémétrie vers le SIEM via OpenTelemetry. Les actions de l’agent doivent être distinguables des actions de l’utilisateur et transmises sous forme de flux. Les administrateurs Cowork peuvent définir un point de terminaison OTLP, un protocole et des en-têtes d’authentification ; l’ensemble d’événements documenté couvre les invites utilisateur, les réponses du modèle, les résultats d’outils, les requêtes API et les erreurs, corrélés par un identifiant d’invite.

• Un interrupteur d'arrêt à l'échelle de l'organisation. Cowork dispose d'une seule bascule qui désactive les connecteurs pour tous les utilisateurs, y compris les sessions actives, avec des contrôles basés sur les rôles pour des arrêts de portée plus limitée. Le guide souligne que les trois couches devraient être cartographiées avant un incident plutôt que pendant celui-ci.

Rien dans cette liste ne constitue une réflexion de sécurité inédite — le principe du moindre privilège, l’isolation en bac à sable, le filtrage des sorties et la journalisation centralisée sont plus anciens que l’IA agentique. Ce que le guide ajoute, c’est l’affirmation que les sept sont nécessaires simultanément, et que les trois derniers sont ceux que la plupart des déploiements omettent.

L’écart que le guide a admis, et ce que la documentation dit maintenant

Enfoui dans la section sur la télémétrie se trouve un aveu qui jure avec le reste du document : au moment de la publication, l’activité de Cowork n’était pas capturée dans l’API Compliance d’Anthropic ni dans les journaux d’audit formels, et le contenu des prompts était inclus par défaut dans sa sortie OpenTelemetry, contrairement à Claude Code où cela était optionnel. Le conseil du guide était de procéder à un examen de conservation et de confidentialité avant d’activer l’exportateur — un conseil qui n’a d’importance que parce que le contenu était bien présent.

Consultée le 30 octobre 2026, la documentation de surveillance de Cowork décrit une organisation différente. Elle oriente désormais les administrateurs vers la prise en charge de l'API Compliance pour récupérer, sur demande, les transcriptions des sessions Cowork, sur les forfaits Enterprise. Elle indique que lorsque la clé de configuration de capture de contenu n'est pas définie, les versions actuelles de Claude Desktop n'envoient que des métadonnées, certaines anciennes versions premières parties envoyant encore le texte des prompts et des réponses. Et elle précise que Cowork ajoute automatiquement le nom d'hôte d'un collecteur d'observabilité à la liste d'autorisation d'egress d'une session lorsque l'egress est restreint.

Savoir si le produit a changé ou si l’article de juillet en donnait une description approximative ne peut être tranché à partir de ces deux documents seuls, et cet article ne tente pas de le faire. Ce que l’on peut affirmer est plus restreint et tout aussi utile : la récupération de transcriptions sur demande n’est pas la même chose qu’un flux d’événements d’agent arrivant dans le SIEM d’un client, ce que demande en réalité la quatrième question du guide. Un CISO qui a lu le guide en juillet et a configuré ses systèmes en conséquence devrait relire la page plutôt que de supposer que l’un ou l’autre état persiste.

Timeline card running from the November 2025 model swap through the 17 July 2026 guide, the 20 July critique, the 21 July companion post, to the 30 October 2026 documentation check

Qui le conteste, et sur quelle base ?

L'objection publiée la plus tranchante ne porte pas sur les contrôles, mais sur leurs auteurs. Tom's Hardware Italia, dans un article daté du 20 juillet 2026, qualifie le cadre de techniquement solide, puis soutient que l'entreprise qui vend un accès agentique est celle qui en rédige les règles, ce qui change le poids de chaque recommandation. Son reproche précis est que la lacune d'observabilité se situe exactement là où le guide affirme que l'observabilité compte le plus, et que le cadrage de l'article — le risque est normal, voici comment le gérer — abaisse la barrière à l'adoption en entreprise plus efficacement que n'importe quelle liste de fonctionnalités. Le même article cite une analyse de Forrester par Jeff Pollard sur la façon dont les rapports de transparence des fournisseurs fonctionnent comme du marketing, tout en reconnaissant que ces rapports contiennent encore de véritables informations.

Il s’agit d’une critique de conflit d’intérêts, non d’un différend factuel. Anthropic n’en a contesté aucun élément, et l’archive des incidents consigne cette entrée comme non contestée, au plus haut grade de confiance, sans aucun préjudice enregistré. L’objection résiste aussi au remède préconisé par le guide : l’instruction finale de Clinton aux lecteurs est de porter les sept exigences devant les fournisseurs d’identité, de SIEM et d’agents qu’ils paient déjà, et de demander lesquelles peuvent être démontrées dans leur environnement aujourd’hui. Appliquée honnêtement, cette question vaut aussi pour Anthropic.

Quatre jours plus tard, le 21 juillet 2026, Clinton a publié un article complémentaire sur le cycle de vie du développement logiciel propre à Anthropic, qui donne des chiffres à l’appui de cette doctrine : Claude rédige environ 80 % du code fusionné, plus de la moitié des fusions passent par un système interne Claude Tag, les ingénieurs livrent environ huit fois plus de code par trimestre qu’en 2021–2025, et les commentaires de fond sur les pull requests passent de 16 % à 54 % lorsqu’on a exigé des agents qu’ils prouvent leurs constats. Il répète également l’affirmation architecturale du guide : les développeurs travaillent sur des machines virtuelles distantes avec un trafic sortant sur liste d’autorisation, de sorte qu’une tentative d’exfiltration par injection de prompt ne peut atteindre que des services surveillés.

Pourquoi est-ce un record tout court

L'archive classe ce dossier comme une évolution de politique, avec une sévérité « info », plutôt que comme un incident, et cette classification est la bonne : aucun système n'a défailli, aucune donnée n'a fui, aucun client n'a été affecté. Sa portée tient à ce qu'un fournisseur de modèles de frontière a publié, en des termes précis et en partie vérifiables, la norme à laquelle il estime que ses propres agents doivent être tenus — y compris là où il ne la respectait pas encore. Pour les équipes de sécurité, cela transforme une posture marketing en une liste testable. Pour tous les autres, cela fixe le vocabulaire — agentivité minimale, rayon d'impact, identité déléguée, liste d'autorisation de sortie — dans lequel seront débattues la prochaine vague d'incidents d'agents.