Adaptive Stichprobenprüfung
Menschliche Prüfung, die sich anpasst, während der Agent sich bewährt.
Eine neue Agentenversion startet mit der Prüfung jeder Entscheidung. Danach läuft die Prüfung mit der von Ihnen festgelegten Validierungsrate, bis der Agent sein Konfidenzziel erreicht. Im stabilen Betrieb folgt die Prüfquote der Breite des Konfidenzintervalls. Ein neues Release, eine Modelländerung, ein Drift-Alarm oder ein Vorfall erhöht sie wieder.
Jede Agentenversion erhält ihre eigene Prüfquote
Die Prüfung beginnt bei „Neue Version“, läuft mit der Validierungsrate, während Stichprobenurteile Vertrauen aufbauen, und stabilisiert sich anschließend bei einer abgeleiteten Prüfquote.
Neue Version
Jede Entscheidung wird geprüft
Jede Ausführung einer neuen Version wird geprüft, bis die konfigurierte Anzahl der Anlaufprüfungen erreicht ist.
Vertrauen aufbauen
Validierungsrate
Die Prüfung läuft mit der konfigurierten Validierungsrate. Die Stichprobenurteile bilden die Genauigkeitsschätzung, bis ihr Konfidenzintervall das Ziel erreicht.
Stabil
Abgeleitete Prüfquote
KLA leitet die Prüfquote aus der Breite des Konfidenzintervalls ab und begrenzt sie auf die Validierungsrate. Stichprobenprüfungen laufen weiter, damit die Konfidenz aktuell bleibt.
02Steuerung erhöhter Prüfquoten
Änderungen erhöhen die Prüfquote
Solange ein aktivierter Auslöser greift, erhöht KLA die menschliche Prüfquote mindestens auf die konfigurierte erhöhte Prüfquote. Nach Ende des Auslösers gilt wieder die phasenabhängige Prüfquote.
Neues Release. Eine neue Agentenversion oder ein neues Manifest wird bereitgestellt. Modelländerung. Das zugrunde liegende Modell oder der Anbieter wird gewechselt. Drift-Alarm. Assurance erkennt eine Änderung in den Ausgaben oder in der Zusammensetzung der Entscheidungen. Vorfall. Ein aktueller Vorfall beim Agenten oder in seinem Prozess ist offen.
Eine Prüfquote mit klarer Grundlage
Die Prüfquote verbindet beobachtete Genauigkeit, konfigurierte Grenzen und mit der Ausführung verknüpfte Risikofaktoren.
Stichprobenprüfungen. Geprüfte Stichproben werden im Decision Desk als Prüffälle angezeigt. Jedes Urteil erfasst Prüfer, Zeitpunkt, Ergebnis und Begründung und fließt in die Genauigkeitsschätzung ein.
Konfidenzintervall. Im stabilen Betrieb folgt die Prüfquote der Breite des Konfidenzintervalls der beobachteten Genauigkeit. Ein breites Intervall erhöht sie, ein schmales senkt sie.
Konfigurierte Grenzen. Anzahl der Anlaufprüfungen, Validierungsrate, Konfidenzziel und erhöhte Prüfquote werden je Agent festgelegt. Die abgeleitete Prüfquote im stabilen Betrieb überschreitet die Validierungsrate nie.
Risikogewichtung. Konfigurierte Risikofaktoren multiplizieren die Basisquote bis zur Prüfung jeder Entscheidung. Deshalb wird eine Zahlungsfreigabe bei gleicher Konfidenz häufiger geprüft als eine Dokumentklassifizierung.
Nachweisbare Aufsicht
Jede Ausführung erfasst ihre Stichprobenphase, finale Prüfquote, Begründungscodes und Risikofaktoren. Jede abgeschlossene Prüfung erfasst Prüfer, Zeitpunkt, Ergebnis und Begründung. Beides wird mit den Ausführungsnachweisen exportiert.
Ausführung 8F31B2 · Agentenversion 3.2 · 09:47:12 UTC
phase Vertrauen aufbauen · finale Prüfquote 40 %
begründungscodes validation, deterministic_sampled
risikofaktoren keine
Prüfung RV-2048 · 09:53:40 UTC
A. Martin · Risk Operations
Begründung: Entscheidung entspricht der freigegebenen Richtlinie und den Quelldaten
Sehen Sie, wie es mit Ihren eigenen Agenten funktioniert.
Bringen Sie einen Agenten und einen Prozess mit. Wir zeigen Ihnen die Prüfquote, mit der er startet, und was nötig ist, um sie zu senken.