88 % des organisations utilisent régulièrement l'IA dans au moins une fonction (McKinsey, The State of AI, 2025). Une sur cinq seulement (21 % des entreprises interrogées) dit avoir un modèle de gouvernance mature pour ses agents (Deloitte, State of AI in the Enterprise, 2026). L'écart compte, parce qu'un agent ne se contente pas de répondre : il agit sur des systèmes réels.
Ce guide part donc de l'usage réel : savoir quels agents, quels assistants et quelles licences servent vraiment, à qui et pour quoi, avant d'écrire la moindre règle. C'est la méthode que nous suivons pour mesurer l'usage réel de l'IA : croiser les journaux de vos plateformes et des entretiens avec vos équipes. Vous trouverez ici ce qu'est la gouvernance de l'IA, comment gouverner des agents qui décident seuls, les contrôles à poser avant de les déployer, les cadres qui s'appliquent, cinq étapes de mise en place et cinq piliers.
Qu'est-ce que la gouvernance de l'IA ?
La définition et le périmètre de la gouvernance IA
La gouvernance de l'IA désigne l'ensemble des règles, responsabilités et processus qui structurent la mise en place, la supervision et un usage responsable des systèmes IA dans une organisation, tout au long de leur cycle de vie. Elle définit qui peut faire quoi, dans quel cadre clair de gouvernance responsable et selon quels critères d'utilisation responsable. Pour chaque niveau de risque, la supervision humaine requise est précisément calibrée. De cette manière, chaque système est piloté de manière fiable et transparente. Son périmètre couvre tous les systèmes IA : modèles de langage, agents autonomes et systèmes d'automatisation.
Gouvernance IA classique vs gouvernance IA agentique : pourquoi la distinction compte
La gouvernance de l'intelligence artificielle traditionnelle supervise les outputs d'un modèle : biais, précision, conformité des réponses. C'est une gouvernance passive, orientée données et résultats. Pour une entreprise utilisant uniquement des modèles LLM non agentiques, ce niveau de supervision peut suffire.
La gouvernance IA agentique est d'une nature radicalement différente. Un agent IA autonome n'analyse pas : il agit. Il exécute des workflows, accède à des systèmes internes, prend des décisions sans supervision humaine directe. Gouverner un agent, c'est contrôler ses actions en temps réel - pas seulement auditer ses outputs.
Cela nécessite des outils spécifiques : un agent registry pour inventorier chaque agent en production, un policy engine pour appliquer des règles à la volée et un kill switch pour stopper immédiatement tout comportement non conforme. Les mécanismes de contrôle agentiques opèrent à une granularité que les outils de gouvernance classique ne couvrent pas.
Comment gouverner des agents IA qui prennent des décisions autonomes ?
En gouvernant leurs actions, pas seulement leurs réponses. Un agent qui décide seul doit répondre à cinq règles, posées avant sa mise en service :
- Un propriétaire nommé et une entrée au registre : ce que l'agent fait, sur quels systèmes, avec quels droits.
- Des droits limités à sa tâche : un agent qui prépare des relances n'a pas besoin d'émettre des virements.
- Une validation humaine au-delà d'un seuil : un paiement, un envoi hors de l'entreprise, une décision qui touche une personne. Le seuil se fixe par niveau de risque, pas une fois pour toutes.
- Une trace de chaque décision : quoi, quand, sur quelles sources, avec quel résultat.
- Un arrêt immédiat, vérifié sur un exercice réel et pas seulement écrit dans une procédure.
Ces règles se vérifient ensuite dans l'usage réel. Un agent que personne n'utilise, ou que les équipes contournent pour revenir à l'ancienne méthode, en dit plus sur la gouvernance que le document qui l'encadre.
Qu'est-ce qui change en 2026 pour la gouvernance IA ?
La double pression réglementaire et concurrentielle rend 2026 incontournable.
Du côté réglementaire, le calendrier européen s'est déplacé. Les obligations de transparence de l'article 50 du règlement UE 2024/1689 s'appliquent depuis le 2 août 2026, tandis que la mise en conformité des systèmes à haut risque de l'annexe III a été reportée au 2 décembre 2027 par le règlement omnibus numérique entré en vigueur le 27 juillet 2026. Ce report donne du temps, il ne change pas les obligations elles-mêmes : elles restent écrites. Notre guide de la conformité IA les détaille, article par article.
Du côté marché, les organisations qui structurent leur gouvernance IA dès maintenant prennent une avance compétitive durable. Elles sécurisent leur innovation IA tout en maintenant la vitesse d'exécution. Innovation responsable et conformité réglementaire deviennent leur avantage concurrentiel.
Quand une entreprise doit-elle formaliser la gouvernance de ses agents IA ?
Dès qu'un agent agit sur un système au lieu de seulement répondre. Quatre moments rendent la formalisation urgente :
- Le passage en production : un agent sort du pilote, ou reçoit un droit d'écriture (envoyer, valider, modifier un dossier).
- Les données et les décisions sensibles : dès que l'agent traite des données personnelles, le RGPD s'applique déjà. S'il intervient dans une décision que l'annexe III de l'AI Act classe à haut risque, comme le tri de candidatures ou l'évaluation de la solvabilité d'une personne, les obligations du haut risque s'y ajoutent au 2 décembre 2027.
- Un renouvellement, une revue budgétaire ou une extension du parc : c'est là que la direction demande ce que l'IA rapporte, et que l'absence d'inventaire se voit.
- Des agents apparus sans passer par la DSI : le besoin métier est réel, le cadre doit le rattraper.
Une mise en conformité prend plusieurs mois pour une entreprise de taille intermédiaire. Elle commence toujours par la même chose : l'inventaire de ce qui tourne vraiment.
Les trois niveaux de gouvernance IA : individuel, organisationnel, réglementaire
Un cadre de gouvernance de l'IA efficace opère simultanément sur trois niveaux complémentaires :
- Niveau individuel - formation des utilisateurs, responsabilisation des équipes sur les bonnes pratiques d'usage des agents IA - par exemple, les règles d'utilisation des agents RH ou commerciaux
- Niveau organisationnel - comité IA, politique interne, processus de validation et instances de supervision pour chaque déploiement
- Niveau réglementaire - conformité réglementaire (AI Act, RGPD) et normes sectorielles applicables
Ces trois cadres de gouvernance fonctionnent en cascade : un cadre réglementaire robuste impose des règles organisationnelles, qui elles-mêmes se déclinent en pratiques individuelles.
Qui pilote la gouvernance IA : CISO, CAIO, CFO, DSI
La gouvernance IA est un sujet transversal qui implique plusieurs fonctions dirigeantes. Quatre rôles clés portent la responsabilité opérationnelle :
- CISO - supervision de la sécurité des agents, protection des données, application du référentiel OWASP des applications agentiques
- CAIO / CIO - stratégie IA, sélection des cas d'usage, arbitrage des risques vs bénéfices
- CFO - attribution financière des coûts IA par agent et par équipe, validation du ROI
- DSI - intégration des agents dans le SI existant et mise en oeuvre des outils de gouvernance
L'instance de gouvernance centrale - généralement un comité IA - coordonne ces quatre fonctions sur une base mensuelle. Elle valide les nouveaux déploiements et arbitre les anomalies.
Quels indicateurs disent qu'une gouvernance fonctionne ?
Une gouvernance qui tient se vérifie sur des faits, pas sur une intention affichée. Quatre indicateurs suffisent à révéler les zones de risque résiduel :
- La part des agents réellement inventoriés dans le registre central, rapportée à ceux que l'on découvre ensuite par hasard
- Le délai d'arrêt effectif d'un agent défaillant, mesuré sur un exercice réel et non sur une procédure écrite
- La part des anomalies documentées avec analyse de cause, plutôt que closes sans explication
- La traçabilité des décisions prises par un agent autonome : quoi, quand, sur quelles sources
Aucun de ces quatre indicateurs ne se déduit d'un questionnaire interne. Ils se relèvent sur les journaux d'exécution.
Les enjeux critiques de la gouvernance IA agentique
Pourquoi la gouvernance IA traditionnelle ne suffit-elle plus face aux agents autonomes ?
Les outils conçus pour gouverner des modèles LLM ne sont pas adaptés aux agents IA autonomes. Le périmètre de contrôle est fondamentalement différent.
L'écart entre les deux approches est structurel. Un agent IA peut accéder à votre CRM, envoyer des emails, valider des commandes et modifier des fichiers - sans qu'aucun humain valide chaque action. Gouverner cela nécessite un kill switch opérationnel, un agent registry à jour et un policy engine qui applique les règles en temps réel. La supervision humaine ne peut plus être manuelle à cette échelle : elle doit être outillée.
Risques de sécurité et exposition des données sensibles
Un agent IA mal gouverné représente un vecteur d'attaque significatif, lié à son niveau d'accès aux systèmes critiques. Sans guardrails, il peut accéder à des bases de données internes sans restriction, contourner les accès SSO, exfiltrer des données sensibles via le Model Context Protocol (MCP) ou compromettre la confidentialité des données clients.
Le Top 10 OWASP des applications agentiques, publié en décembre 2025, recense les dix risques prioritaires propres aux agents autonomes. Une stratégie de sécurité adaptée aux agents autonomes passe par ce référentiel. Voici quelques exemples de risques prioritaires : l'escalade de privilèges via les outils d'un agent, l'injection de prompts malveillants et le contournement des guardrails par des séquences d'actions combinées.
La gestion des risques de sécurité commence par l'évaluation des risques de chaque agent selon son niveau d'accès aux systèmes et aux données. Un agent avec accès administrateur au SI requiert des guardrails bien plus stricts qu'un agent de reporting en lecture seule.
Comment les entreprises réglementées gouvernent-elles des agents IA qui agissent sur leurs systèmes ?
Comme elles gouvernent un administrateur informatique : un agent qui agit sur un système reçoit les mêmes exigences d'habilitation, de traçabilité et de journalisation. Dans la banque, l'assurance ou la santé, ces exigences existent déjà pour les accès humains ; la gouvernance des agents les étend, elle ne les invente pas.
- Des droits nominatifs, attachés à l'agent et à son propriétaire, revus à intervalle fixe comme ceux d'un compte à privilèges.
- La séparation des tâches : l'agent qui prépare une opération n'est pas celui qui la valide.
- Une validation humaine avant toute action irréversible, et une trace de qui a validé.
- Un journal d'exécution conservé, que l'audit interne et l'autorité de contrôle peuvent consulter.
- Un plan d'arrêt et de reprise, testé, pour revenir au traitement manuel sans perte.
- L'information des collaborateurs quand la journalisation des outils d'IA est activée.
Biais algorithmiques et responsabilité légale de l'entreprise
Quand un agent IA prend des décisions qui affectent des personnes - recrutement, octroi de crédit, ciblage commercial - l'entreprise engage sa responsabilité légale en cas de biais algorithmiques avérés.
L'AI Act Art. 14 impose une supervision humaine effective pour les systèmes IA à haut risque. En matière de documentation, les biais identifiés et les mesures correctrices doivent être traçables et auditables. Un audit régulier des datasets et des modèles utilisés par vos agents fait partie des bonnes pratiques de gouvernance responsable.
Toute utilisation d'agent IA autonome dans votre entreprise relève d'une obligation éthique autant que légale. De cette manière, votre organisation reste maîtresse de ses processus automatisés - et responsable de leurs impacts.
Visibilité et reprise de contrôle des usages IA
Des agents déployés par des équipes métier sans passer par la direction des systèmes d'information, cela existe dans la plupart des organisations. Ce n'est pas un problème de discipline : c'est le signe que le besoin métier était réel et que le circuit officiel était trop lent. Le problème commence quand personne ne sait combien il y en a.
Le saviez-vous ? Sur les parcs que nous analysons, 20 à 40 % des licences IA payées ne sont pas utilisées. Les usages qui comptent le plus sont rarement ceux que la direction avait anticipés. C'est un constat de mission, pas une statistique de marché.
La gouvernance IA transforme ce risque en actif. Plutôt que d'interdire les initiatives IA métier, elle crée un cadre qui les encadre : une politique d'usage claire, un processus de validation léger et des outils de contrôle automatiques permettent de sécuriser l'innovation sans la bloquer.
Quelles obligations concrètes l'AI Act impose-t-il aux systèmes à haut risque ?
Le règlement UE 2024/1689 impose cinq obligations aux systèmes à haut risque de l'annexe III, dont la mise en conformité est désormais fixée au 2 décembre 2027 :
- Système de gestion des risques documenté (Art. 9) - évaluation continue des risques tout au long du cycle de vie
- Documentation technique exhaustive (Art. 11) - spécifications, architecture, capacités et limites du système
- Supervision humaine effective (Art. 14) - mécanismes de supervision humaine sur les actions à impact élevé
- Marquage CE et enregistrement dans la base de données de l'Union européenne prévue à l'article 71, avant la mise sur le marché ou la mise en service
- Signalement des incidents graves aux autorités de surveillance du marché (Art. 73), au plus tard 15 jours après en avoir eu connaissance, et dans des délais plus courts pour les cas les plus graves
Le report de l'échéance ne dispense de rien : il déplace la date, pas le contenu. Pour les organisations qui déploient des agents dans des processus de ressources humaines, financiers ou médicaux, ces cinq obligations sont à traiter comme un chantier documentaire, pas comme une case à cocher la veille.
Perte de supervision humaine et déficit de traçabilité
Quand les agents IA prennent des décisions sans supervision humaine et sans logs auditables, l'entreprise perd la maîtrise de ses propres processus. Et en cas de défaillance, elle est incapable de retracer la séquence d'actions.
La traçabilité des actions d'un agent passe par trois mécanismes : les logs auditables (enregistrement de chaque appel outil et chaque décision), le versioning des prompts (historique des instructions données à l'agent) et les traces OpenTelemetry exportées vers un système d'observabilité centralisé.
Le suivi des processus IA n'est pas seulement un enjeu de conformité : c'est ce qui permet de détecter une dérive comportementale avant qu'elle n'ait d'impact métier.
Dérive financière : des coûts IA sans attribution ni pilotage
Sans suivi, les appels aux modèles s'accumulent dans un budget informatique opaque. Un agent RH appelé des dizaines de milliers de fois par mois produit une facture que personne ne rattache à un usage, tant qu'aucun système d'attribution financière ne la ventile.
La qualité de gestion des agents IA repose sur la capacité à attribuer chaque appel API à un agent précis, une équipe précise et un cas d'usage précis. Sa conception doit être pensée dès le départ - cette qualité de pilotage est le critère distinctif d'une gouvernance mature. Cette granularité permet au CFO d'arbitrer, au DSI de dimensionner l'infrastructure et aux équipes de mesurer le ROI réel de chaque agent déployé.
Les indicateurs de performance financiers de la gouvernance IA complètent naturellement les métriques de sécurité et de conformité pour donner une vision 360° de vos agents en production.
Enjeux de souveraineté des données et conformité RGPD
Les agents IA traitent massivement des données à caractère personnel : emails, contrats, dossiers RH, données clients. Chaque traitement engage votre responsabilité au titre du RGPD (Art. 83 : sanctions jusqu'à 4% du CA mondial pour traitement non conforme).
La protection de la vie privée de vos utilisateurs et clients s'articule autour de trois exigences : minimisation des données collectées par les agents, limitation des durées de rétention et sécurisation des flux entre l'agent et les systèmes tiers.
La souveraineté des données sensibles passe par le choix de l'infrastructure : déploiement on-premise ou cloud européen certifié pour les agents qui traitent des données à haut risque. Les règles et politiques de traitement doivent être documentées dans le registre des activités de traitement de votre DPO.
Mettre en place une gouvernance IA en 5 étapes
Étape 1 - Cartographier et classifier tous vos systèmes IA
L'inventaire IA est le point de départ non négociable. Toute entreprise qui ne connaît pas ses systèmes d'intelligence artificielle ne peut pas les gouverner.
Deux catégories à recenser : l'inventaire déclaré, c'est-à-dire les outils validés par la direction des systèmes d'information et les usages non recensés, c'est-à-dire les agents mis en service par des équipes métier sans passer par ce circuit. La seconde se repère en croisant les journaux et les exports des outils administrés avec des entretiens d'équipe, jamais par l'une des deux sources seule. Les comptes personnels, eux, échappent aux journaux de l'entreprise : seuls les entretiens les font apparaître.
Pour chaque système identifié, appliquez la classification des risques AI Act :
- Risque inacceptable - systèmes interdits (scoring social, manipulation comportementale)
- Haut risque - usages de l'annexe III (recrutement, crédit, assurance vie et santé, infrastructures critiques), et IA qui constitue un produit de l'annexe I, ou un composant de sécurité d'un tel produit, soumis à une évaluation de conformité par un tiers (article 6, paragraphe 1), comme certains dispositifs médicaux - obligations réglementaires maximales
- Risque limité - chatbots, assistants avec obligation de transparence
- Risque minimal - outils de productivité, recommandations sans impact opérationnel
Cette classification des risques détermine le niveau de gouvernance et les obligations réglementaires applicables à chaque agent.
Étape 2 - Définir les rôles et instances de gouvernance
Une gouvernance sans responsables clairement désignés reste théorique. La deuxième étape pour mettre en place un cadre opérationnel consiste à nommer les acteurs et à définir leurs mandats.
Désignez un AI Officer - ou confiez ce rôle au CISO ou au DSI selon votre taille. Créez un comité IA transversal regroupant IT, Sécurité, Juridique, Éthique IA et représentants métier. Cette intelligence collective garantit que chaque décision de gouvernance intègre les enjeux métier, techniques et éthiques. Ce comité se réunit mensuellement pour valider les nouveaux déploiements et traiter les incidents.
Le RBAC (Role-Based Access Control) structure les accès par 4 rôles de gouvernance :
- Owner - responsable du cycle de vie de l'agent, dispose du kill switch
- Admin - configure les politiques et les guardrails
- Contributor - déploie et met à jour les agents dans son périmètre
- Reader - consulte les métriques et les logs sans modifier les configurations
Cette instance de gouvernance formalisée est la colonne vertébrale de votre cadre. Elle garantit une gouvernance responsable dans la durée.
Étape 3 - Formaliser la politique IA et les règles d'usage
La politique IA est le document fondateur de votre gouvernance. Elle doit être validée par le COMEX, communiquée à toutes les équipes et révisée au minimum une fois par an.
Quatre éléments obligatoires constituent une charte IA robuste :
- Cas d'usage autorisés et interdits - liste des domaines où les agents IA peuvent opérer et ceux qui sont exclus (décisions médicales autonomes, discrimination dans le recrutement)
- Données que les agents peuvent traiter - classification des données accessibles selon le niveau de sensibilité
- Exigences de supervision humaine - pour chaque type d'agent, quel niveau de validation humaine est requis avant action
- Procédure de signalement d'incident - canal, délai, responsable et traçabilité de chaque incident
Ces règles et politiques formalisent les bonnes pratiques éthiques en procédures reproductibles et vérifiables.
Étape 4 - Déployer les outils de contrôle et d'observabilité
Les outils rendent votre gouvernance IA opérationnelle en temps réel. Sans infrastructure technique, la politique reste un document sans effet.
Trois catégories d'outils structurent votre supervision humaine augmentée :
- Agent registry - catalogue centralisé de tous vos agents en production : version, propriétaire, niveau de risque, politiques appliquées. C'est votre système de record unique pour la conformité AI Act.
- Policy engine - moteur d'application des règles en temps réel. Il intercepte chaque action d'un agent avant exécution pour vérifier sa conformité aux politiques définies, sans ralentir le travail des équipes. Son application garantit que chaque agent opère dans les limites définies.
- Observabilité - traces, logs et métriques exportés via OpenTelemetry vers vos outils de monitoring (Langfuse ou Arize Phoenix, par exemple). Le suivi des processus IA devient continu et automatisé.
Étape 5 - Auditer, mesurer et améliorer en continu
La gouvernance IA n'est pas un projet avec une date de fin : c'est une oeuvre collective et un processus organisationnel vivant. L'audit de la gouvernance trimestriel identifie les dérives avant qu'elles ne deviennent des anomalies.
Les quatre indicateurs décrits plus haut (agents inventoriés, délai d'arrêt, anomalies documentées, traçabilité des décisions) se relèvent sur les journaux d'exécution, à intervalle régulier.
La boucle d'amélioration continue fonctionne en trois temps : anomalies recensées → analyse des causes → mise à jour de la politique et des guardrails. Ce cycle fait de votre gouvernance efficace un avantage éthique et compétitif durable.
Quels contrôles des contenus mettre en place avant de déployer des agents IA autonomes ?
Sept contrôles, posés et testés avant la mise en service. Ils portent sur ce que l'agent lit, ce qu'il produit et ce qu'il envoie :
- Les sources autorisées : quelles bases, quels dossiers, quel niveau de sensibilité l'agent peut lire.
- Les sorties autorisées : ce qu'il peut produire, et à qui il peut l'envoyer (une équipe, un client, le public).
- La détection des données personnelles et confidentielles avant tout envoi.
- La défense contre l'injection d'instructions : un document ou un mail lu par l'agent peut contenir des consignes cachées.
- Les sujets exclus, dont les engagements contractuels, les conseils juridiques ou médicaux et les prix.
- La relecture humaine des contenus à impact, au moins tant que le taux d'erreur de l'agent n'est pas connu.
- La conservation de ce que l'agent produit, pour pouvoir retracer une réponse contestée.
Ces contrôles se testent sur des cas réels avant le déploiement, puis se vérifient dans les journaux : ils montrent ce que l'agent a vraiment lu et produit, pas ce qu'on attendait de lui.
À quoi ressemble une gouvernance qui a pris ?
Quatre jalons signalent qu'un programme a quitté le stade de l'intention :
- Les agents en service sont inventoriés et classés selon le référentiel réglementaire. Un agent de présélection de candidatures relève du haut risque au sens de l'annexe III, un assistant de rédaction interne non
- La politique d'usage est validée au niveau exécutif et connue des équipes, pas seulement publiée
- Les quatre indicateurs d'exécution sont relevés sur les journaux, pas déclarés
- Les anomalies sont documentées avec leur cause et la politique évolue en conséquence
Ces jalons ne sont pas que des indicateurs de conformité. Ils témoignent de la confiance des parties prenantes - clients, partenaires, investisseurs et régulateurs - dans votre capacité à déployer l'IA de manière responsable. La gouvernance de l'IA devient alors un argument commercial à part entière.
Les erreurs fréquentes à éviter dans la mise en place
Quatre erreurs sabotent les programmes de gouvernance IA les plus ambitieux :
- Gouverner uniquement les agents maison - et oublier que les agents fournis par les éditeurs, de Copilot aux assistants intégrés au CRM ou à l'outil de tickets, sont aussi des agents tiers qui demandent la même supervision
- Confondre sécurité ≠ gouvernance - la sécurité protège le périmètre ; la gouvernance pilote ce qui se passe à l'intérieur
- Créer un comité IA sans mandat exécutif - sans autorité budgétaire et décisionnelle, le comité est consultatif mais impuissant
- Négliger la documentation des incidents - chaque événement non documenté est une opportunité d'amélioration perdue et un risque réglementaire en cas de contrôle
Les 5 piliers d'un cadre de gouvernance IA robuste
Quel cadre de gouvernance pour des workflows d'agents IA autonomes ?
Un workflow enchaîne plusieurs étapes, parfois plusieurs agents, sans validation humaine entre chacune. Le cadre doit donc suivre la chaîne entière, pas chaque agent isolément :
- un propriétaire pour le workflow, en plus du propriétaire de chaque agent ;
- une validation humaine aux étapes à impact, repérées à l'avance ;
- une trace continue d'un agent à l'autre, pour reconstituer une décision de bout en bout ;
- un arrêt possible à chaque étape, et une reprise manuelle prévue ;
- un coût attribué au workflow, pour le comparer à ce qu'il remplace.
Les cinq piliers qui suivent donnent la structure de ce cadre.
Pilier 1 - Éthique : transparence, explicabilité et maîtrise des biais
L'éthique est le premier pilier parce qu'elle définit les valeurs qui guident les quatre autres. Sans socle éthique explicite, les décisions de gouvernance deviennent arbitraires.
Trois dimensions structurent ce pilier :
- Transparence - les décisions prises par vos agents IA sont documentées et compréhensibles par les parties prenantes concernées. Pas de boîte noire décisionnelle sans documentation.
- Explicabilité des décisions IA - chaque output à impact significatif peut être justifié par une chaîne causale traçable. Critique pour les secteurs réglementés (banque, assurance, RH).
- Maîtrise des biais - audit régulier des datasets d'entraînement et des outputs produits par vos agents. Détection proactive des biais de genre, d'origine ou de tranche d'âge dans les décisions automatisées.
La gouvernance responsable implique que votre organisation assume publiquement ces trois engagements - pas seulement en interne.
Pilier 2 - Réglementaire : AI Act, RGPD et conformité européenne
Trois textes de référence s'appliquent ensemble aux systèmes IA agentiques : deux règlements européens et un référentiel de sécurité.
| Texte ou référentiel | Périmètre | Exigence principale |
|---|---|---|
| AI Act | Systèmes IA à haut risque (annexe III) | Documentation, supervision humaine, marquage CE - échéance 2 décembre 2027 |
| RGPD | Tout traitement de données personnelles | Minimisation, durée de rétention, droit à la non-décision automatisée (Art. 22) |
| Top 10 OWASP des applications agentiques | Agents autonomes avec accès systèmes | Guardrails anti-injection, contrôle des privilèges, sécurité des outils MCP |
La conformité réglementaire n'est pas une case à cocher annuelle. C'est un état continu maintenu par vos processus de gouvernance, vos outils de contrôle et votre documentation.
Pilier 3 - Organisationnel : comité IA, RBAC et instances de décision
Un cadre organisationnel solide transforme la politique en pratique. Trois structures concrètes constituent ce pilier :
Le comité IA réunit mensuellement les parties prenantes clés (CISO, DSI, représentants métier, juriste). Il valide les déploiements à risque élevé, gère les événements significatifs et fait évoluer la politique IA.
Le RBAC (Role-Based Access Control) applique le principe de moindre privilège à chaque agent et à chaque utilisateur. Les quatre rôles - owner, admin, contributor, reader - garantissent que personne n'accède à plus de droits que nécessaire pour son rôle.
L'instance de gouvernance est l'organe de décision central. Elle dispose d'un mandat exécutif explicite : budget dédié, capacité à bloquer des déploiements non conformes et reporting direct au COMEX.
Pilier 4 - Technique : observabilité, arrêt d'urgence et garde-fous d'exécution
Le pilier technique rend la gouvernance opérationnelle en temps réel. Trois composantes sont non négociables :
- Kill switch - mécanisme d'arrêt immédiat d'un agent en production, activable en moins d'une minute par le propriétaire ou l'administrateur. Essentiel pour contenir une anomalie avant propagation.
- Garde-fous d'exécution - ils interceptent chaque action d'un agent avant qu'elle ne parte : détection de données personnelles, défense contre l'injection d'instructions, restrictions thématiques, listes d'autorisation et d'interdiction. La contrainte réelle est la latence : un garde-fou qui ralentit le métier finit désactivé.
- Observabilité - instrumentation complète via OpenTelemetry, avec export vers un outil d'observabilité comme Langfuse ou Arize Phoenix. Chaque trace, chaque décision et chaque appel outil est enregistré et interrogeable.
Le contrôle effectif des agents autonomes n'est possible qu'avec ces trois composantes déployées en production, pas en environnement de test.
Pilier 5 - Financier : attribution des coûts par agent et ROI mesurable
L'attribution financière (financial attribution) est le pilier le moins visible mais l'un des plus stratégiques. Sans elle, votre organisation investit dans l'IA sans savoir ce que chaque agent coûte réellement.
L'attribution financière permet de calculer pour chaque agent déployé : coût des appels aux modèles, coût d'infrastructure, temps de maintenance - ventilés par équipe et par cas d'usage. Chaque entreprise peut ainsi arbitrer ses investissements IA sur des données réelles, sans approximation.
Le ROI IA se calcule ensuite à partir de l'usage réel : les heures récupérables sur les usages reliés à un objectif de l'entreprise, traduites en coût sur un taux construit avec vos profils, puis comparées au coût complet de l'agent. La méthode est détaillée dans notre guide du ROI de l'IA.
Quels cadres et quels outils pour gouverner des agents IA ?
Quels cadres existent pour la gouvernance des agents IA ?
Trois cadres de gouvernance internationaux font consensus dans les équipes de direction :
- ISO/IEC 42001:2023 - premier standard international dédié au système de management de l'intelligence artificielle. Il définit les exigences pour établir, mettre en oeuvre, maintenir et améliorer un système de management de l'IA dans une entreprise, quelle que soit sa taille. Il est certifiable et s'applique à toute organisation qui déploie des agents IA.
- NIST AI Risk Management Framework - référentiel américain adopté globalement pour évaluer et gérer les risques IA. Articule quatre fonctions : gouverner, cartographier, mesurer et gérer.
- Principes de l'OCDE sur l'IA - adoptés en 2019 et mis à jour en 2024, cinq principes pour une gouvernance responsable : croissance inclusive et bien-être, respect des droits humains et de la vie privée, transparence et explicabilité, robustesse et sécurité, responsabilité.
Pour les agents en particulier, deux textes complètent ces cadres : l'AI Act, qui fixe les obligations selon le niveau de risque, et le Top 10 OWASP des applications agentiques, qui recense les risques propres aux systèmes qui agissent.
Plusieurs éditeurs publient par ailleurs des trousses de modèles sous licence ouverte pour structurer un cadre de gouvernance interne. Elles font gagner du temps sur la forme documentaire, pas sur l'inventaire du parc, qui reste le travail à faire.
Quels cadres de gouvernance IA s'appliquent aux agents autonomes dans les services financiers ?
Les mêmes cadres de management, plus trois textes qui pèsent davantage dans la banque et l'assurance :
| Texte | Ce qu'il vise | Ce qu'il change pour un agent |
|---|---|---|
| AI Act, annexe III | L'évaluation de la solvabilité et la note de crédit des personnes physiques, l'évaluation des risques et la tarification en assurance vie et santé | Ces usages sont à haut risque : documentation, supervision humaine et enregistrement, au 2 décembre 2027 |
| DORA (règlement UE 2022/2554) | La résilience opérationnelle numérique des entités financières, applicable depuis le 17 janvier 2025 | Le fournisseur du modèle qu'appelle un agent relève en général des prestataires tiers de services informatiques : contrat, registre, stratégie de sortie |
| RGPD, article 22 | Les décisions fondées exclusivement sur un traitement automatisé | Une décision de crédit ou d'indemnisation prise par un agent seul n'est permise que dans les cas prévus (contrat, loi, consentement), et doit alors permettre une intervention humaine et une contestation |
Dans la banque et l'assurance, ces textes s'ajoutent aux règles de contrôle interne et d'externalisation que le superviseur suit déjà. Ce qu'ils ont en commun : ils demandent de prouver, pas de déclarer. Un registre à jour, des journaux d'exécution et une mesure de l'usage réel sont les pièces que réclame un contrôle.
L'écosystème d'outils au service de la gouvernance IA
L'écosystème d'outils de gouvernance IA s'organise en trois couches complémentaires :
- MLOps et registres de modèles - MLflow pour versionner les modèles IA utilisés par vos agents, DVC pour la traçabilité des datasets, Weights & Biases pour le monitoring d'entraînement
- Observabilité LLM - Langfuse pour tracer chaque appel aux modèles, OpenTelemetry pour l'instrumentation standard, Arize Phoenix pour la détection de dérives
- Gouvernance, risque et conformité adaptés à l'IA - outils d'explicabilité et de détection de biais, suivi des agents autonomes, registre des politiques appliquées
Le choix dépend des agents déjà en service. Et c'est bien là le point de départ : la liste des outils ne sert à rien tant que le parc n'est pas connu.
Comment comparer les outils d'agents IA open source et les solutions payantes ?
Sur les mêmes critères de gouvernance, pas sur le prix de la licence. Six questions départagent les deux :
- Où tournent l'outil et les données, et qui les exploite au quotidien ?
- Que journalise-t-il, et ces journaux s'exportent-ils vers vos propres outils ?
- Comment gère-t-il les droits : authentification de l'entreprise, rôles, revue des accès ?
- Qui corrige une faille, et dans quel délai ?
- Quel est le coût complet : exploitation, maintenance et compétences internes, pas seulement la licence ?
- Que dit la licence ? Ses obligations se lisent avec le juridique avant toute redistribution.
Un outil ouvert se lit et s'héberge chez soi, mais son exploitation reste à votre charge. Une solution payante vend un service, et vos journaux restent chez l'éditeur si le contrat ne prévoit pas leur export. Dans les deux cas, la question qui décide est la même : que vous laisse-t-il voir de l'usage réel ?
Pour comparer les frameworks eux-mêmes, voir notre comparatif des agents IA open source.
Qui construit des agents LangGraph pour la production ?
Trois profils : les équipes de développement internes, un intégrateur, ou un partenaire spécialisé. LangGraph est un framework qui sert à construire des agents en plusieurs étapes, avec un état conservé et des points de reprise ; il demande des développeurs capables d'exploiter un service en production. Notre guide de LangGraph en entreprise détaille ce qu'il faut ajouter pour y arriver.
Pour la gouvernance, la question n'est pas qui code, mais qui possède l'agent une fois en service. Un agent construit par un prestataire reste votre agent : il lui faut un propriétaire nommé chez vous, une entrée au registre, un journal d'exécution et un arrêt possible. Idun Group ne vend pas la création d'agents : nous mesurons l'usage pour dire lesquels méritent d'être construits ou étendus, et nous aidons à choisir qui le fera.
Pourquoi l'inventaire du parc passe-t-il avant l'outillage ?
Un cadre de gouvernance se construit sur un inventaire. Tant que la liste des agents en service, des assistants créés et des abonnements pris reste incomplète, chaque règle écrite ne s'applique qu'à la partie visible du parc. C'est l'angle mort le plus coûteux : on gouverne sérieusement ce qu'on a recensé et pas du tout le reste.
Par où commencer : mesurer le parc avant de le gouverner
Ce que les tableaux de bord des éditeurs ne disent pas
Chaque éditeur fournit un tableau de bord sur son propre périmètre. C'est utile et c'est insuffisant : ce qui échappe, par construction, c'est ce que les équipes font ailleurs et la comparaison d'un même usage d'un outil à l'autre. Or c'est précisément cette vue, tous outils confondus, qui permet de décider quoi encadrer en premier.
Ce que nous mesurons et comment
Nous analysons l'usage réel de l'IA sur le parc, à partir des journaux et des exports que vos plateformes produisent déjà, sur les outils que vous administrez, sans développement chez vous. Remise d'exports ou connexion en lecture seule, la modalité exacte s'arbitre en réunion de cadrage.
Les entretiens et la donnée, jamais l'une à la place de l'autre. Les journaux donnent le factuel : qui utilise quoi, à quelle fréquence, avec quel taux d'erreur. Les entretiens donnent l'intention et la contrainte métier. Les résultats sont agrégés par équipe et par outil, jamais par personne ; le statut exact du traitement se valide avec votre délégué à la protection des données. Nous analysons des usages, jamais des personnes.
Pas de scan des postes de travail. Pas d'analyse du code source. L'analyse porte sur les usages, à partir des journaux.
Les trois livrables
| Livrable | Ce qu'il contient |
|---|---|
| La carte | Ce que les équipes font vraiment avec l'IA : cas d'usage détectés, adoption réelle par pôle, assistants et compétences créés, y compris ce que vous ne cherchiez pas |
| Le compte | Ce que chaque cas d'usage coûte et ce qu'il rapporte, licences payées rapportées à l'usage constaté |
| Le cap | Quoi industrialiser en premier, quoi couper, qui former sur quoi |
Le rapport porte son annexe des non-dits : le périmètre réellement couvert, ce que nous n'avons pas pu voir et les chiffres que nous refusons d'avancer. Un travail qui ne dit pas ses angles morts demande qu'on le croie sur parole.
Ce qu'on met en place après la mesure
Mesurer ne gouverne rien tout seul. Trois leviers d'outillage déplacent l'usage, du moins coûteux au plus engageant : les intégrations qui amènent l'agent là où le travail se fait déjà, les actifs partagés qui transforment une trouvaille individuelle en capacité d'équipe et les agents communs qui portent les tâches récurrentes. De l'outillage, pas de la discipline : on ne corrige pas un usage en demandant aux équipes de mieux s'y prendre.
Les étapes de validation que ce travail impose, information des représentants du personnel, consultation du délégué à la protection des données, lecture seule et aucun développement chez vous, ne sont pas un frein. Ce sont elles qui rendent le résultat opposable en interne.
Visé et mesuré chez vous : 30 à 50 % de coût en moins sur les usages ciblés, des erreurs divisées par 2 à 4. Ce sont des objectifs de mission, pas des résultats garantis d'avance.
Idun Group intervient depuis fin 2023 sur ces sujets. Chez LVMH, pour toutes les marques parfum et cosmétique, une mission Idun sur leur plateforme d'IA générative en production. Chez SNCF Immobilier, l'audit mené chez sa filiale de logement social a découvert 50 cas d'usage critiques.




