Muestreo adaptativo

Una revisión humana que se adapta a medida que el agente demuestra su fiabilidad.

Una nueva versión del agente comienza con todas las decisiones revisadas. Después, la revisión se ejecuta con la tasa de validación que usted define hasta que el agente alcanza su objetivo de confianza. En estado estable, la tasa sigue la amplitud del intervalo de confianza. Un nuevo lanzamiento, un cambio de modelo, una alerta de deriva o un incidente vuelven a elevarla.

Versión del agente 3.2Nueva versiónGenerando confianzaEstableCobertura de revisión humanaConfianza
Ejemplo ilustrativo. Las tasas reales siguen el número de ejecuciones de arranque, la tasa de validación, el objetivo de confianza y la tasa de refuerzo configurados para el agente.

Cada versión del agente obtiene su propia tasa de revisión

La revisión comienza en Nueva versión, se ejecuta con la tasa de validación mientras los veredictos muestreados generan confianza y después se establece en una tasa derivada.

  1. Nueva versión

    Se revisa cada decisión

    Cada ejecución de una nueva versión se muestrea hasta alcanzar el número de ejecuciones de arranque que usted haya configurado.

  2. Generando confianza

    Tasa de validación

    La revisión se ejecuta con la tasa de validación configurada. Los veredictos muestreados generan la estimación de precisión hasta que su intervalo de confianza alcanza el objetivo.

  3. Estable

    Tasa derivada

    KLA deriva la tasa a partir de la amplitud del intervalo de confianza, con un límite igual a la tasa de validación. Las comprobaciones puntuales continúan para mantener actualizada la confianza.

02Controles de refuerzo

Los cambios elevan la tasa de revisión

Mientras un disparador habilitado esté activo, KLA eleva la revisión humana al menos hasta la tasa de refuerzo que usted haya configurado. Cuando el disparador deja de estar activo, se reanuda la tasa derivada de la fase.

Nuevo lanzamiento. Se despliega una nueva versión del agente o un manifiesto. Cambio de modelo. Se cambia el modelo subyacente o el proveedor. Alerta de deriva. Assurance detecta un cambio en los resultados o en la combinación de decisiones. Incidente. Hay un incidente reciente abierto en el agente o en su proceso.

Una tasa con una base clara

La tasa combina la precisión observada, los límites configurados y los factores de riesgo asociados a la ejecución.

Revisiones muestreadas. Las ejecuciones muestreadas llegan a Decision Desk como elementos de revisión. Cada veredicto registra el revisor, la hora, el resultado y la justificación, y alimenta la estimación de precisión.

Intervalo de confianza. En estado estable, la tasa de revisión sigue la amplitud del intervalo de confianza de la precisión observada. Un intervalo amplio la eleva. Uno estrecho la reduce.

Límites configurados. El número de ejecuciones de arranque, la tasa de validación, el objetivo de confianza y la tasa de refuerzo se configuran para cada agente. La tasa estable derivada nunca supera la tasa de validación.

Ponderación del riesgo. Los factores de riesgo configurados multiplican la tasa base hasta revisar cada decisión. Por eso, una liberación de pago se muestrea con más frecuencia que una clasificación de documentos con la misma confianza.

Supervisión que puede demostrar

Cada ejecución registra su fase de muestreo, tasa final, códigos de motivo y factores de riesgo. Cada revisión completada registra el revisor, la hora, el resultado y la justificación. Ambos se exportan con la evidencia de la ejecución.

Registro de muestreo ilustrativo

ejecución 8F31B2 · versión del agente 3.2 · 09:47:12 UTC

fase Generando confianza · tasa final 40 %

códigos de motivo validation, deterministic_sampled

factores de riesgo ninguno

Veredicto de revisión ilustrativocorrecto

revisión RV-2048 · 09:53:40 UTC

A. Martin · Operaciones de riesgo

Justificación: decisión acorde con la política aprobada y los datos de origen

Véalo en sus propios agentes.

Traiga un agente y un proceso. Le mostraremos la tasa de revisión con la que comenzaría y qué hace falta para reducirla.

Muestreo adaptativo: revisión humana y confianza | KLA