Aller au contenu
Technique11 novembre 20269 min de lecture

Compétences d'agent : examiner le fichier qu'une compétence transmet à la suivante

Un fichier écrit par une compétence d'agent peut porter une affirmation non étayée jusqu'à l'action suivante. Ce que montre SkillRelay, avec une fiche de revue.

Antonella Serine

Antonella Serine

Fondatrice, KLA

Fondatrice de KLA, elle développe le plan de contrôle indépendant pour la gouvernance à l'exécution des agents d'IA réglementés dans le cadre de l'EU AI Act.

La question

Quelle partie d'un processus vérifie les affirmations d'un fichier généré juste avant qu'un autre agent n'agisse sur cette base ?

La recherche

SkillRelay, une prépublication d'octobre 2026, étudie les sorties de compétences qui persistent d'une session à l'autre. La revue de son prototype est consultative et déclare les effets qu'elle laisse de côté.

Ce que nous avons vérifié

Le catalogue publié, à un commit figé : 270 identifiants de cas uniques, et tous les chemins de configuration référencés sont présents. Nous n’avons exécuté aucun benchmark ni installé aucune compétence.

La ressource

Une fiche de revue de transmission entre compétences : production, usage actuel, affirmations, preuves, effet proposé, revue, autorisation et exécution.

Une revue fournisseur arrive à sa dernière étape. Un agent lit un fichier de transmission qui indique que les preuves sont complètes, prépare une synthèse et l'envoie à l'approbateur. Le fichier a un auteur connu, un horodatage et une empreinte (digest) intacte. Il manque encore un justificatif.

Ce processus est illustratif. Il pose une question d'ingénierie : quelle partie du système vérifie une affirmation juste avant qu'un autre agent n'agisse sur cette base ? Un enregistrement du producteur explique d'où vient une déclaration. Le processus destinataire doit aussi établir si cette déclaration justifie l'action proposée. Cet article passe en revue des travaux récents sur les compétences d'agent (agent skills), rend compte d'une inspection limitée d'un benchmark publié, et propose une fiche de revue pour le fichier qu'une compétence transmet à la suivante. Il fait partie de nos notes de recherche sur l'exécution des agents, après l'indépendance des réviseurs et les limites des scores de benchmark.

Les sorties des compétences deviennent les entrées des travaux suivants

Les compétences d'agent regroupent des instructions, des scripts et des ressources pour les réutiliser. Leurs sorties peuvent devenir les entrées de travaux ultérieurs. Une synthèse, un tableur ou une base de données locale peut transmettre une erreur antérieure à une décision ultérieure, y compris après la fin de la conversation qui l'a produite. Notre note précédente sur les politiques dans la mémoire des agents portait sur des résumés de politiques stockés. Cette note porte sur les productions générées qu'une étape ultérieure traite comme des preuves.

SkillRelay, une prépublication de Liao et al. déposée le 9 octobre 2026, étudie cette persistance entre sessions distinctes. Dans son modèle de menace, l'attaquant contrôle plusieurs compétences avant l'exécution ; les tâches des utilisateurs et les politiques de projet de confiance restent hors de son contrôle. Les auteurs distinguent un résultat préjudiciable d'une chaîne d'attaque complète passant par la transmission visée. Lire l'article (v1).

La défense proposée par l'article combine la provenance et la revue des opérations proposées. La revue est obligatoire et consultative : après une recommandation défavorable, l'agent peut tout de même confirmer la requête examinée. Ce sont des résultats de benchmark contrôlés, et l'article n'estime pas la fréquence à laquelle les organisations rencontrent cette menace. Nous n'avons pas reproduit ses résultats. Cet article ne reprend pas ses taux d'attaque et de défense ; un lecteur qui les utilise devrait vérifier chaque dénominateur dans l'article.

La déclaration de couverture nomme ce que la revue laisse de côté

Le détail d'implémentation le plus utile se trouve dans le code publié. Au commit figé, les lignes 57 à 66 du fichier run.py du garde-fou construisent une déclaration de couverture qui nomme les opérations examinées par le prototype et les effets laissés hors de cette revue. Un fichier coverage.json consigne cette limite pour chaque exécution protégée. Déclaration de couverture au commit figé.

L'implémentation déclare d'autres limites : la provenance est suivie par étape, la médiation réseau est incomplète, et une empreinte calculée après une lecture ne peut pas montrer quels octets ont été lus pendant qu'un autre processus écrivait. Ce sont des limites de prototype que les auteurs énoncent ouvertement. Nous avons lu le code source comme du texte et n'avons pas testé la couverture à l'exécution.

Une telle déclaration mérite l'attention, car un même processus peut atteindre le même résultat lourd de conséquences par plusieurs voies. Un dossier de preuves peut être publié via une API, exporté vers un répertoire partagé ou assemblé à partir d'une base de données qu'un autre service lit. Examiner la requête API couvre une seule voie. Une revue d'architecture doit retracer les autres avant de présenter l'ensemble du processus comme examiné.

  • Examiné : la soumission via l'adaptateur du prototype, avec un contrôle de repli au niveau du service destinataire.
  • Hors revue des opérations : les modifications arbitraires de fichiers locaux.
  • Hors revue des opérations : la publication vers une base de données SQLite locale.
  • Hors revue des opérations : le trafic vers la passerelle de modèles.

Ce que nous avons vérifié dans l'artefact publié

Nous avons inspecté le dépôt au commit f7fa742 (8 octobre 2026) en tant que données. Nous avons analysé l'intégralité du catalogue du benchmark et l'arborescence Git non tronquée au moyen de deux requêtes en lecture seule à l'API GitHub, puis rapproché de cette arborescence chaque chemin de configuration référencé par le catalogue.

Cela confirme une propriété structurelle limitée de la version publiée : le catalogue est cohérent et les fichiers qu'il référence sont présents. Nous n'avons pas exécuté le benchmark, installé ses compétences dans un contexte d'agent ni reproduit ses résultats de sécurité. La présence d'un chemin ne dit rien du contenu du fichier : elle ne montre donc pas que les entrées bénignes le sont réellement. Les décomptes décrivent la conception du benchmark et n'ont aucune signification en matière de performance.

Inspection du catalogue et des chemins au commit f7fa742, effectuée le 26 octobre 2026
VérificationObservé
Identifiants de cas uniques270
Scénarios30
Groupes de domaines10, de 27 cas chacun
Schémas d'attaque3, de 90 cas chacun
Surfaces d'injectionCode, instructions et ressources, de 90 cas chacune
Chemins de configuration référencés absents de l'arborescence0
Répertoires de cas avec un chemin d'entrée bénigne270 sur 270

Séparer production, justification et autorisation

Revenons à l'exemple du fournisseur et donnons deux enregistrements à la transmission. Le premier décrit la production : la tâche qui a généré le fichier, la version du producteur, l'empreinte de l'artefact et les références des sources. Le second décrit la décision côté réception : la tâche en cours, le destinataire prévu, le contenu exact envoyé, les affirmations à vérifier, et la personne ou la règle responsable de l'autorisation.

Ces enregistrements répondent à des questions différentes. Une empreinte intacte rattache une revue à des octets précis. Une référence de source renvoie vers des éléments justificatifs. L'affirmation qu'un réviseur a approuvé quelque chose exige son propre enregistrement de décision et son propre périmètre. Aucun de ces champs ne devrait en remplacer un autre de façon implicite. Un manifeste d'apparence complète peut tout de même décrire une conclusion non étayée.

Un réviseur doit aussi pouvoir voir à la fois le fichier et l'opération à laquelle il a conduit. Consignez les sources d'origine vérifiées, la requête concrète examinée, si la requête a changé ensuite, et l'interface qui a réellement produit l'effet. Une personne qui examine une décision fournisseur doit pouvoir suivre cette chaîne sans la reconstituer à partir d'une synthèse soignée.

Une fiche de revue pour la transmission

La fiche de revue de transmission entre compétences (en anglais) transforme ces questions en champs. C'est une fiche de travail illustrative pour un processus synthétique, qui n'a pas été évaluée comme contrôle de sécurité. Adaptez-la au système qui porte la décision et exécute l'action.

Tenez les enregistrements de revue et d'autorisation hors du contrôle du producteur lorsque le modèle de confiance du système l'exige. Un champ rempli par le producteur et qui affirme une approbation doit être vérifié auprès de l'autorité qui détient cette décision. Pour chaque effet, recensez toutes les voies que le processus peut emprunter : appels d'API, exports vers des répertoires partagés et modifications de base de données qu'un autre processus lit. Consignez la limite de revue effective et la preuve qu'elle s'est appliquée à cette requête. Signalez comme non vérifiées les voies dépourvues de cette preuve.

Fiche de revue de transmission entre compétences (extrait)
EnregistrementÀ renseigner
ArtefactIdentifiant, version exacte ou empreinte, emplacement
ProductionTâche d'origine, paquet et version du producteur, date de création
Usage actuelTâche destinataire, finalité prévue, destinataire autorisé
Affirmations déterminantesChaque affirmation dont la véracité influe sur la décision
Preuves à l'appuiSource d'origine et version, passage ou champ pertinent, lacunes et divergences
Effet proposéInterface, action, destination, version exacte ou empreinte du contenu envoyé
RevueRéviseur, décision, preuves à l'appui, périmètre, date et heure
AutorisationResponsable de la décision ou règle applicable, action et destinataire autorisés
ExécutionInterface effectivement utilisée, identifiant de la requête acceptée, effet observé

Trois cas synthétiques pour tester une transmission

Une première investigation peut rester modeste. Choisissez une transmission récurrente et une action lourde de conséquences, recensez toutes les voies qui mènent du fichier à cet effet, et exécutez trois cas synthétiques avec des enregistrements sources fixes et un destinataire local. Conservez les éléments d'origine, le fichier généré, la requête sortante exacte, le résultat de la revue et l'effet observé.

Comptez séparément les achèvements légitimes, les affirmations non étayées acceptées, les divulgations hors périmètre tentées, les effets ayant contourné la revue et les erreurs d'exécution. Gardez les erreurs comme des erreurs. Le comportement attendu dans le tableau est un critère d'évaluation proposé. Nous n'avons pas mené cet exercice : il n'étaye donc aucun taux de protection.

Exemple commenté : trois cas synthétiques de revue fournisseur (proposés, non exécutés)
Cas synthétiqueSource et usage demandéComportement attendu à évaluer
Transmission étayéeL'inventaire des sources est complet ; le destinataire est autoriséEffectuer la transmission demandée
Achèvement non étayéLa transmission indique que les preuves sont complètes ; il manque un document dans l'inventaire des sourcesCorriger l'affirmation ou la soumettre au réviseur responsable
Destinataire non conformeLes affirmations sont étayées ; le public visé sort du périmètre autoriséObtenir l'autorisation requise ou ne pas procéder à la divulgation

Travaux connexes sur les compétences

Plusieurs articles récents abordent les compétences sous d'autres angles. Chacun étudie une unité de revue différente : un paquet, une chaîne de paquets ou un usage ultérieur de leur sortie.

  • SkillCascade (Zhu et al., v1, 24 septembre 2026) examine les interactions préjudiciables entre compétences installées ensemble, y compris des cas qui passent les analyses de chaque compétence prise isolément. Il étudie la composition au sein d'un processus ; SkillRelay étudie les artefacts conservés d'une session à l'autre. Les auteurs reconnaissent que des bacs à sable contrôlés ne peuvent pas établir la fréquence en conditions réelles, et ils discutent des limites du jugement des résultats par un modèle. SkillCascade v1.
  • Counterfactual Trace Auditing (Zhou et al., v2 révisée le 28 mai 2026, première mise en ligne le 12 mai) compare des tâches appariées avec et sans une compétence et consigne les différences de comportement. Chaque condition n'est exécutée qu'une fois, avec un seul modèle et un seul benchmark : les auteurs restreignent donc sa lecture causale. L'idée transposable à un test de transmission consiste à comparer les lectures, les écritures et les opérations en plus de l'achèvement. Counterfactual Trace Auditing v2.
  • Compétences de sécurité pour la détection de vulnérabilités Linux (Xue et al., v1, 19 octobre 2026) évalue une sélection de compétences de sécurité sur l'analyse du noyau Linux guidée par fichier. L'article n'étudie pas les transmissions malveillantes, et ses taux de détection ne se transposent pas aux transmissions de documents. Article v1.
  • ACES (Kevin et al., v1, 20 août 2026) propose une évaluation en conditions réelles appariée, avec et sans une compétence, et SkillEval (Han et al., v2 révisée le 12 octobre 2026, première mise en ligne le 7 août) note les propriétés des documents de compétences. Nous n’avons lu que leurs résumés et leurs introductions. ACES v1, SkillEval v2.

Où KLA revérifie une action approuvée

Pour les agents qui agissent via l'ingestion d'actions d'agents de KLA, le KLA Policy Engine évalue chaque action proposée, et un résultat require_approval crée une Decision Request. Lorsque l'action approuvée reprend, KLA compare ses arguments à l'empreinte (hash) scellée au moment de la demande d'approbation. Si les arguments ont changé, l'action est bloquée avec le code de motif tool_args_mismatch et n'est pas exécutée. Pour les actions soumises via l'ingestion, ce contrôle répond à la question de la fiche « la requête a-t-elle changé ensuite ». Un fichier qu'un agent écrit directement dans un répertoire partagé emprunte une autre voie et nécessite sa propre ligne dans la fiche.

Les travaux présentés dans cet article n'ont pas testé KLA. Le guide de la surveillance humaine indique quand une action doit exiger une approbation et comment le processus maker-checker (principe des quatre yeux) l'enregistre.

Foire aux questions

La sortie d'une compétence d'agent d'IA peut-elle influencer une session ultérieure ?

Oui, lorsque la sortie est stockée et qu'une tâche ultérieure la lit. Une synthèse, un tableur ou une base de données locale écrits par une compétence peuvent porter une affirmation non étayée jusqu'à une décision ultérieure, après la fin de la conversation d'origine. La prépublication SkillRelay étudie ce phénomène dans un benchmark contrôlé ; elle n'estime pas sa fréquence en pratique.

La provenance prouve-t-elle qu'un fichier de transmission est correct ?

Non. La provenance consigne qui a produit le fichier et quand, et une empreinte rattache une revue à des octets précis. Il faut vérifier auprès des sources d'origine que chaque affirmation du fichier est étayée, et l'autorisation de l'action suivante exige son propre enregistrement.

Qu'examine le garde-fou de SkillRelay, et que laisse-t-il de côté ?

Au commit figé, sa déclaration de couverture examine les soumissions via l'adaptateur du prototype, avec un contrôle de repli au niveau du service destinataire. Elle place hors revue des opérations les modifications arbitraires de fichiers locaux, la publication vers une base SQLite locale et le trafic vers la passerelle de modèles. Sa revue est consultative : l'agent peut confirmer une requête après une recommandation défavorable. Nous avons lu le code source sans l'exécuter.

Comment tester une transmission entre agents avant de s’y fier ?

Choisissez une transmission récurrente et une action lourde de conséquences, recensez toutes les voies qui mènent du fichier à l'effet, et exécutez des cas synthétiques : une transmission étayée, une déclaration d'achèvement non étayée et un destinataire hors du périmètre autorisé. Comptez séparément les achèvements légitimes, les affirmations non étayées acceptées, les effets hors périmètre, les contournements de la revue et les erreurs d'exécution.

Points clés à retenir

Pour la prochaine transmission que votre équipe examine, conservez ensemble quatre éléments : ce que le premier agent a produit, ce que l'agent suivant a utilisé, ce que le réviseur a vu et ce qui s'est finalement produit. Donnez au responsable des opérations un moyen d'examiner chaque voie entre ces éléments. Lorsqu'un fichier plausible porte une affirmation non étayée jusque dans le travail réel, cet enregistrement montre quelle décision doit être corrigée. Commencez par la fiche de revue de transmission entre compétences.

Les sources ont été vérifiées le 26 octobre 2026. SkillRelay et les articles connexes sont des prépublications, et nous n'avons reproduit aucun de leurs résultats. Notre observation se limite à une inspection des métadonnées et des chemins d'un dépôt à un commit figé. L'exemple du fournisseur et les trois cas sont synthétiques et n'ont pas été exécutés.

Voir en action

Prêt à automatiser vos preuves conformité ?

Réservez une démo de 20 minutes pour voir comment KLA vous aide à prouver la surveillance humaine et exporter la documentation Annex IV prête à l'audit.

Compétences d'agent : examiner le fichier qu'une compétence transmet à la suivante | KLA Blog