Campionamento adattivo
La revisione umana si adatta mentre l’agente dimostra la propria affidabilità.
Una nuova versione dell’agente inizia con la revisione di ogni decisione. La revisione procede poi al tasso di convalida che avete impostato finché l’agente raggiunge l’obiettivo di fiducia; in fase stabile, il tasso segue l’ampiezza dell’intervallo di confidenza. Un nuovo rilascio, un cambio di modello, un alert di deriva o un incidente lo rialzano.
Ogni versione dell’agente raggiunge il proprio tasso di revisione
La revisione inizia in Nuova versione, procede al tasso di convalida mentre i verdetti campionati aumentano la fiducia, poi si stabilizza su un tasso derivato.
Nuova versione
Ogni decisione viene sottoposta a revisione
Ogni esecuzione di una nuova versione viene campionata fino al raggiungimento del numero di campioni iniziali configurato.
Costruzione della fiducia
Tasso di convalida
La revisione procede al tasso di convalida configurato. I verdetti campionati costruiscono la stima di accuratezza finché il relativo intervallo di confidenza raggiunge l’obiettivo.
Stabile
Tasso derivato
KLA ricava il tasso dall’ampiezza dell’intervallo di confidenza, con un limite pari al tasso di convalida. I controlli a campione proseguono per mantenere aggiornata la fiducia.
02Controlli di incremento
Un cambiamento aumenta il tasso di revisione
Quando una condizione abilitata è attiva, KLA porta la revisione umana almeno al tasso di incremento configurato. Quando la condizione si disattiva, riprende il tasso derivato dalla fase.
Nuovo rilascio. Viene distribuita una nuova versione dell’agente o un nuovo manifest. Cambio di modello. Il modello o il provider sottostante viene sostituito. Alert di deriva. Assurance rileva un cambiamento negli output o nella composizione delle decisioni. Incidente. È aperto un incidente recente sull’agente o sul relativo processo.
Un tasso con basi chiare
Il tasso combina l’accuratezza osservata, i limiti configurati e i fattori di rischio associati all’esecuzione.
Revisioni campionate. Le esecuzioni campionate arrivano in Decision Desk come elementi da revisionare. Ogni verdetto registra il revisore, l’ora, l’esito e la motivazione, e alimenta la stima di accuratezza.
Intervallo di confidenza. In fase stabile, il tasso di revisione segue l’ampiezza dell’intervallo di confidenza sull’accuratezza osservata. Un intervallo ampio lo aumenta. Un intervallo ristretto lo riduce.
Limiti configurati. Il numero di campioni iniziali, il tasso di convalida, l’obiettivo di fiducia e il tasso di incremento sono impostati per ogni agente. Il tasso stabile derivato non supera mai il tasso di convalida.
Ponderazione del rischio. I fattori di rischio configurati moltiplicano il tasso di base, fino a sottoporre a revisione ogni decisione, così un rilascio di pagamento viene campionato più spesso della classificazione di un documento a parità di fiducia.
Una supervisione dimostrabile
Ogni esecuzione registra la fase di campionamento, il tasso finale, i codici motivo e i fattori di rischio. Ogni revisione completata registra il revisore, l’ora, l’esito e la motivazione. Entrambi i record vengono esportati con le evidenze dell’esecuzione.
esecuzione 8F31B2 · versione dell’agente 3.2 · 09:47:12 UTC
fase Costruzione della fiducia · tasso finale 40%
codici motivo validation, deterministic_sampled
fattori di rischio nessuno
revisione RV-2048 · 09:53:40 UTC
A. Martin · Operazioni di rischio
Motivazione: decisione conforme alla policy approvata e ai dati sorgente
Vedetelo sui vostri agenti.
Portate un agente e un processo. Vi mostreremo il tasso di revisione iniziale e cosa serve per ridurlo.