Gouvernance de l'IA27 juillet 202615 min de lecture

Gouvernance de l'IA d'exécution : avant, à et après

La gouvernance de l'IA d'exécution contrôle les actions des agents pendant l'exécution des systèmes. Découvrez en quoi cela diffère de l'observabilité, des garde-fous et de la gouvernance officielle.

Antonella Serine

Antonella Serine

Fondateur, KLA

Fondateur de KLA, créant le plan de contrôle de gouvernance d'exécution indépendant pour les agents d'IA réglementés en vertu de la loi européenne sur l'IA.

Avant l'exécution

Définir l'identité, l'autorité déléguée, les politiques, les tranches de risque, les propriétaires responsables et les exigences en matière de preuves.

Au moment de la décision

Évaluez chaque action gouvernée et renvoyez allow, warn, require_approval ou block avant que l'effet secondaire ne soit commis.

Après l'exécution

Conservez la décision, la version de la politique, l'action humaine, le résultat de l'exécution, la lignée et les preuves d'intégrité.

Unité de gouvernance

Une action consécutive : un paiement, une modification d'enregistrement, un message sortant, une modification de droit, une libération ou un appel d'outil.

La gouvernance de l'IA d'exécution est la couche opérationnelle qui évalue les actions d'IA conséquentes pendant l'exécution du système. Il lie l'identité de l'agent, l'autorité déléguée, la politique, le contexte d'action, la décision humaine, le résultat de l'exécution et les preuves en un seul point de contrôle. Pour un paiement, une modification d'enregistrement, un message sortant, une modification de droit, une version ou un appel d'outil, la gouvernance d'exécution décide si l'action proposée peut se dérouler conformément à la politique, doit procéder avec un avertissement, doit s'arrêter pour une personne responsable ou doit s'arrêter.

La catégorie couvre une boucle d’exploitation complète. Les équipes établissent les mandats, les politiques, les propriétaires et les exigences en matière de preuves avant l'exécution. Un point de contrôle évalue l'action proposée au moment de la décision. Le système enregistre la décision et le résultat après l'exécution, puis utilise ces enregistrements à des fins d'assurance, d'enquête et d'amélioration du contrôle. C’est le modèle avant, après et après.

Une définition précise de la gouvernance de l'IA d'exécution

La gouvernance de l'IA d'exécution est la couche continue d'application et de preuves qui décide si une action d'IA proposée est autorisée, conforme à la politique et peut être exécutée en toute sécurité dans son contexte actuel. Elle applique des contrôles pendant que le système fonctionne et préserve un enregistrement durable de la décision et de son résultat.

L'unité de gouvernance est l'action conséquente. Une réponse modèle peut être informative, tandis qu'un appel d'outil peut déplacer de l'argent, mettre à jour un dossier client, publier du contenu, modifier un droit, soumettre un dossier réglementaire ou déclencher un autre système. L'action entraîne des conséquences commerciales, elle reçoit donc la décision politique, l'autorité humaine et les preuves.

La gouvernance d'exécution couvre également le contexte opérationnel autour de cette action : quel agent et principal l'a initiée, à quel locataire et environnement il appartient, quel outil et quelle destination il cible, quelle politique et version s'appliquent, quels seuils ont été évalués et quel rôle humain possède une exception. Ce contexte transforme une règle générale en une décision exécutoire.

Pourquoi la catégorie prend forme maintenant

Les systèmes agentiques combinent la sortie du modèle avec des outils, de la mémoire, des autorisations et une exécution répétée. Les guides OWASP Excessive Agency identifient les fonctionnalités, autorisations et autonomie excessives comme causes profondes des actions dommageables des agents. Ses mesures d'atténuation incluent des outils restreints, des autorisations restreintes et une approbation indépendante pour les actions à fort impact.

Les fournisseurs nomment également directement la couche d'exécution. L'IA holistique a introduit l'application agentique d'exécution pour les appels d'outils, l'accès et le contrôle des coûts en avril 2026. Ces sources utilisent différents vocabulaires de produits et de frameworks. Ils pointent vers la même limite technique : le moment où une action proposée atteint un système qui peut créer un réel effet secondaire.

Des cadres de gouvernance plus larges prévoient déjà un travail continu sur le cycle de vie. Le NIST AI RMF Core traite la gouvernance comme une approche transversale et appelle à une surveillance et à une amélioration régulières des systèmes déployés. La gouvernance d'exécution fournit un mécanisme technique pour mettre en œuvre cette intention au niveau de la limite de l'action.

Avant l'exécution : définissez l'autorité et l'intention de contrôle

Une décision d'exécution ne peut être aussi claire que le modèle de contrôle qui lui est fourni. Avant qu'un agent ne soit opérationnel, l'organisation définit à qui appartient le système, ce que l'agent peut faire, quels outils et données il peut atteindre, où commence l'autorité humaine et quelles preuves chaque décision doit produire.

C'est là que les systèmes de gouvernance des dossiers et les cadres de gestion effectuent un travail essentiel. ISO/IEC 42001 définit un système de gestion de l'IA pour établir des politiques, des objectifs, des processus, une gestion des risques et une amélioration continue. Les contrôles d'exécution consomment cette intention institutionnelle en tant que politique exécutable et configuration opérationnelle.

  • Identité et propriété. Donnez à chaque agent et mandant une identité stable, un propriétaire responsable, un objectif et un environnement approuvé.
  • Autorité déléguée. Définissez les actions autorisées, les destinations, les valeurs, les tarifs, les limites des données, les fenêtres horaires et la profondeur de la délégation.
  • Politique et tranches de risque. Convertissez l'intention de contrôle en conditions explicites, décisions, codes de motif, groupes d'approbation et délais de remontée d'informations.
  • Portée des outils et des données. Accordez les fonctions et enregistrements minimum requis pour le travail, avec des droits de lecture et d'écriture distincts.
  • Conception de décision humaine. Nommez le rôle responsable, la règle de création-vérification, le package de contexte, la fenêtre de réponse et le comportement de délai d'attente.
  • Contrat de preuves. Spécifiez les identifiants, la version de la politique, les entrées d'action, la base de décision, l'activité humaine, le résultat de l'exécution, la conservation et la preuve d'intégrité à préserver.

Au moment de la décision : appliquer la politique sur l'action proposée.

Le point de contrôle d'exécution reçoit une action proposée avant que son effet secondaire ne soit validé. Il résout les identités de l'agent et du principal, charge l'autorité et la politique actuelles, évalue le contexte de l'action et renvoie un résultat contraignant.

Quatre résultats donnent aux équipes suffisamment de latitude pour maintenir le flux du travail de routine et réserver l'attention humaine aux exceptions consécutives. La préséance est importante lorsque plusieurs règles correspondent : une décision plus forte doit survivre à l’agrégation.

Un modèle de décision d'exécution à quatre résultats
RésultatComportement d'exécutionUtilisation opérationnelle
autoriserL'action s'exécute dans le cadre de son autorité et de ses limites de politique actuelles.Travail de routine, réversible et à faible risque avec un contexte complet.
warnL'action s'exécute et entre dans un chemin d'assurance ou de révision défini.Une action autorisée avec un signal qui mérite un suivi ou un échantillonnage.
require_approvalL'action est suspendue jusqu'à ce qu'un humain autorisé l'approuve ou la rejette.Décisions importantes, irréversibles, inhabituelles ou sensibles aux politiques.
bloquerL'action s'arrête avant l'effet secondaire gouverné.Actions interdites, non autorisées, mal formées, dangereuses ou invérifiables.

Un point de contrôle d'exécution nécessite un comportement de fermeture en cas d'échec.

Une décision politique n'a de valeur que lorsque le chemin d'action y obéit. Le point de contrôle doit se situer sur la route menant à l'outil ou au système en aval, et le chemin d'exécution doit s'arrêter lorsque le moteur de stratégie, le magasin de preuves, la source d'identité ou l'autorité d'approbation n'est pas disponible.

Une conception à haute intégrité scelle la base de décision avant l'effet secondaire, utilise une clé d'idempotence afin que les nouvelles tentatives ne dupliquent pas l'action et lie une approbation ultérieure aux mêmes arguments d'action. Les contrôles de sortie peuvent également contenir un résultat avant la publication lorsque l'outil est déjà exécuté. Ces contrôles concernent le contournement de stratégie, la réexécution d’approbation, la substitution d’arguments et l’exécution en double.

  • Un chemin médiateur depuis l'exécution de l'agent vers les outils conséquents
  • Identité, autorité, politique et contexte de destination actuels à chaque évaluation
  • Un refus ou une mise en sécurité lorsque les dépendances requises ne peuvent pas produire une décision digne de confiance
  • Des attentes humaines durables avec une identité d'approbation explicite et une liaison d'action
  • Exécution idempotente à travers tentatives et workflows pouvant être repris
  • Preuve de décision écrite avant l'engagement et preuve de résultat écrite après

Après l'exécution : préserver la preuve et améliorer les contrôles

La gouvernance d'exécution se poursuit après la décision. Le dossier d'exploitation doit relier l'action proposée, l'évaluation de la politique, les règles correspondantes, la décision humaine, le résultat en aval, les horodatages, les versions et les preuves d'intégrité sous des identifiants d'exécution et de décision stables.

Cet enregistrement prend en charge plusieurs tâches. Les opérateurs enquêtent sur un individu exécuté à travers la lignée d’exécution. Les équipes de gestion des risques mesurent les actions bloquées, les avertissements, la charge d'approbation, les remplacements, la latence et l'efficacité des politiques. Les auditeurs échantillonnent les décisions et vérifient les preuves. Les propriétaires de contrôle mettent à jour la politique lorsque les résultats révèlent des dérives, des exceptions récurrentes ou des lacunes dans la couverture.

La EU AI Act donne à cette boucle une pertinence réglementaire pour les systèmes à haut risque. L'article 9 requires un système de gestion des risques continu et itératif. Article 12 requires capacités de journalisation technique. L'article 14 requiressource une surveillance humaine efficace pendant l'utilisation. Les preuves d'exécution peuvent prendre en charge ces tâches lorsque la portée du système, le rôle de fournisseur ou de déployeur et les obligations applicables sont établis pour le cas d'utilisation spécifique.

Observabilité, garde-fous, gouvernance des enregistrements et gouvernance d'exécution

Ces quatre couches résolvent différents problèmes et partagent souvent des données. Les équipes ont besoin de distinction, car un seul fournisseur peut proposer plusieurs couches sous un même nom de produit.

OpenTelemetry définit les signaux d'observabilité tels que les traces, les métriques, les journaux et les bagages. Ces signaux décrivent l’activité et la santé du système. La gouvernance d'exécution peut les consommer en tant que contexte et renvoyer les décisions politiques dans le même pipeline de télémétrie.

Quatre couches dans une pile de contrôle IA
CoucheUnité principaleQuand il agitDécision ou sortieLimite caractéristique
ObservabilitéRequête, span, métrique, journal d'événementPendant et après l'activitéTélémétrie, alerte, trace, contexte de diagnosticUne trace peut arriver après un effet secondaire et ne peut entraîner aucune décision d'autorisation.
Garde-corpsInvite, entrée ou sortie de modèle, condition spécifique de l'outilAvant ou pendant l'activité du modèle et de l'outilFiltrer, réécrire, marquer, autoriser ou bloquerUne réponse sécurisée par le contenu peut toujours proposer une action au-delà du mandat de l'agent.
Gouvernance de l'enregistrementSystème d'IA, cas d'utilisation, risque, contrôle, propriétaire, évaluationAvant le déploiement et lors des cycles de révisionInventaire, politique, évaluation, exception, historique d'approbationUn enregistrement de stratégie actuel ne peut pas appliquer chaque action en direct par lui-même.
Gouvernance d'exécutionAction consécutive proposéeAvant l'engagement, au moment de la décision et après le résultatAutoriser, avertir, exiger une approbation, un blocage et des preuvesDes lacunes de couverture, une politique obsolète ou un contournement autour du point de contrôle laissent les actions non gouvernées.

Où chaque couche atteint sa limite

Les limites des couches deviennent claires lorsqu'un système tombe en panne. Chaque couche a une question caractéristique à laquelle elle peut répondre et une lacune qu’une autre couche doit combler.

  • L'observabilité atteint sa limite au niveau de l'autorité. Elle peut montrer qu'un agent a appelé une API de paiement, quelle route a traité la demande et combien de temps cela a pris. Une décision politique distincte établit si cet agent avait le pouvoir d'effectuer ce paiement pour ce principal dans les limites actuelles.
  • Les garde-fous atteignent leur limite dans le contexte institutionnel. Un filtre de toxicité peut classer un message sortant. Une stratégie d'exécution nécessite également le consentement du client, la juridiction, le rôle de l'agent, le canal de communication, l'état du cas et l'autorité d'approbation.
  • La gouvernance des dossiers atteint ses limites lors de l'application. Une évaluation des risques et une cartographie des contrôles établissent la règle attendue. Le chemin d'exécution nécessite une version lisible par machine de cette règle au moment de l'action.
  • La gouvernance d'exécution atteint ses limites en termes de couverture et de contrôle de qualité. La couche régit uniquement les actions qui y sont acheminées, en utilisant les identités, les politiques et les contrats de preuves qui lui sont fournis. L’inventaire, les tests d’intégration, l’examen des politiques et l’assurance restent essentiels.

L'architecture minimale pour la gouvernance de l'IA d'exécution

Une implémentation au niveau de la catégorie nécessite six fonctionnalités connectées. L'emballage du produit peut varier ; les responsabilités de contrôle restent stables.

Un plan de contrôle IA fournit ces fonctionnalités dans les environnements d'exécution, les outils et les flux de travail des agents. Il centralise les contrats de politique, d’approbation et de preuve tandis que chaque point de contrôle d’application reste sur le chemin de l’action.

  • Identité de l'agent et du principal. Résolvez l'agent agissant, l'humain ou le principal de service derrière lui, le locataire, l'environnement et les rôles actuels.
  • Autorité et moindre privilège. Liez les actions à des outils, ressources, destinations, valeurs, tarifs et limites de temps explicites.
  • Évaluation contextuelle de la politique. Évaluez la politique par rapport à l'action proposée et à l'état actuel de l'entreprise avec des règles versionnées et des codes de raison.
  • Routage par décision humaine. Suspendez les actions sélectionnées, acheminez-les vers le réviseur responsable, appliquez les règles du créateur-vérificateur et liez le résultat à la demande d'origine.
  • Médiation d'exécution. Placez la décision sur le chemin réel vers l'outil, préservez l'idempotence et appliquez le résultat renvoyé.
  • Lignée et preuves. Enregistrez les données de décision et de résultats avec des contrôles d'intégrité, la conservation, l'exportation et des chemins de vérification indépendants.

Comment KLA applique la catégorie

La KLA Control Plane applique ce modèle aux actions gouvernées dans les processus réglementés. KLA Runtime est la couche d'exécution. La couche d'application KLA Policy Engine évalue l'action gouvernée et renvoie allow, warn, require_approval ou block. Un résultat require_approval crée un Decision Request pour le réviseur responsable dans Decision Desk. Sources : source

Le dossier d'exploitation reste connecté après la décision. Lineage Explorer présente la chronologie d'exécution. Evidence Room contient des artefacts de révision et des Sealed Evidence Bundles. Les pages conceptuelles policy-as-code checkpoint, human monitoring, live intercept et execution lineage affichent chaque partie du modèle KLA Runtime.

Cette architecture prend en charge l'intégration de gouvernance sur place. Les cadres d'agents et moteurs de workflow existants peuvent envoyer des actions gouvernées via le point de contrôle tout en conservant leurs responsabilités d'exécution. Les contrats de politique, d’approbation et de preuve restent stables tout au long du parcours intégré.

Une liste de contrôle d'évaluation pratique

Utilisez ces questions lors de l'évaluation d'une conception, d'un produit ou d'une revendication de contrôle de gouvernance d'exécution.

  • Quelles actions exactes sont médiatisées et quels chemins peuvent atteindre un outil conséquent en dehors du point de contrôle ?
  • Comment l'agent, le mandant, le locataire, l'environnement, la destination et l'autorité déléguée sont-ils résolus ?
  • Quels sont les résultats complets de la décision, leur priorité et leur comportement en cas d'échec ?
  • Une approbation humaine peut-elle être rejouée pour différents arguments, outils, principes ou versions de politique ?
  • Que se passe-t-il lorsque les dépendances en matière de stratégie, d'identité, de preuve ou d'approbation ne sont pas disponibles ?
  • Comment le système évite-t-il les effets secondaires en double lors des tentatives et des reprises de flux de travail ?
  • Quels champs de décision sont scellés avant l'exécution et quels champs de résultat sont ajoutés après ?
  • Un examinateur indépendant peut-il vérifier les preuves et les relier à la politique et à l'autorité humaine ?
  • Comment les avertissements, les blocages, les dérogations, la charge d'approbation, la dérive et l'efficacité du contrôle sont-ils examinés ?
  • Quelles normes ou obligations légales s'appliquent à ce système, cas d'utilisation, juridiction et rôle organisationnel ?

Foire aux questions

Qu'est-ce que la gouvernance de l'IA à l'exécution ?

La gouvernance de l'IA d'exécution est la couche continue d'application et de preuves qui décide si une action d'IA proposée est autorisée, conforme aux politiques et peut être exécutée en toute sécurité dans son contexte actuel. Il évalue l'action pendant l'exécution du système et conserve la décision et le résultat à des fins d'assurance et d'examen.

Comment la gouvernance de l'IA se compare-t-elle à l'observabilité ?

L'observabilité produit des traces, des métriques, des journaux et un contexte de diagnostic sur l'activité du système. La gouvernance d'exécution utilise l'identité, l'autorité, la politique et le contexte d'action pour produire une décision d'exécution contraignante. Les couches peuvent partager la télémétrie tout en répondant à des questions opérationnelles distinctes.

Quel est le lien entre les garde-corps et la gouvernance d'exécution ?

Les garde-corps évaluent les invites, le contenu, les sorties du modèle ou les conditions des outils sélectionnés. La gouvernance d'exécution lie une action conséquente à l'autorité institutionnelle, à la politique actuelle, à un examen humain responsable, au contrôle de l'exécution et aux preuves. Les résultats de Guardrail peuvent devenir des éléments d’entrée dans la décision politique d’exécution.

Qu'est-ce que la gouvernance officielle ?

La gouvernance d'enregistrement est la couche de programme qui inventorie les systèmes d'IA et les cas d'utilisation, attribue les propriétaires, stocke les politiques et les évaluations, enregistre les exceptions et gère l'historique des examens. Il fournit une intention de contrôle institutionnel que la gouvernance d'exécution peut appliquer en tant que politique exécutable.

Quelles décisions une couche de gouvernance d'exécution doit-elle prendre en charge ?

Un modèle complet de déclenchement d'action prend en charge allow, warn, require_approval et block. Autoriser les exécutions dans le cadre de la stratégie. Warn exécute et entre dans un chemin de révision défini. Exiger des pauses d’approbation pour un humain autorisé. Le blocage arrête l’effet secondaire gouverné.

La gouvernance de l'IA d'exécution satisfait-elle à la loi européenne sur l'IA ?

Les contrôles d'exécution et les preuves peuvent prendre en charge les tâches de gestion des risques, de journalisation et de surveillance humaine en vertu des articles 9, 12 et 14 pour systèmes à haut risque. La conformité dépend de la classification du système, du rôle organisationnel, de l'objectif prévu, de la juridiction, de l'environnement de contrôle complet et des obligations qui s'appliquent au déploiement spécifique.

Points clés à retenir

La gouvernance de l'IA au moment de l'exécution relie l'intention de contrôle institutionnel à chaque action consécutive et préserve les preuves du résultat. Le goulot d'étranglement de la gouvernance de l'IA explique la capacité opérationnelle que cela libère. Autonomie responsable couvre le modèle d'autorité humaine. Le KLA Control Plane affiche la politique, Decision Desk, le lignage, l'assurance et les preuves en tant que système d'exécution unique.

Voir en action

Prêt à automatiser vos preuves conformité ?

Réservez une démo de 20 minutes pour voir comment KLA vous aide à prouver la surveillance humaine et exporter la documentation Annex IV prête à l'audit.

Gouvernance de l'IA d'exécution : avant, à et après | KLA Blog