Umbrales de rendimiento
Cada modelo declara métricas mínimas por caso de uso: exactitud, latencia en el percentil 95 y tasa de falsos positivos. Un modelo por debajo del umbral no pasa a producción; la desviación se registra con su causa.
Markdex · Observatorio técnico
Compendio operativo de requisitos, umbrales de tolerancia y evidencias verificables para sistemas de IA en producción. Cada norma se traduce en un punto de medición, un responsable y un registro consultable.
Bloque 01
Cada modelo declara métricas mínimas por caso de uso: exactitud, latencia en el percentil 95 y tasa de falsos positivos. Un modelo por debajo del umbral no pasa a producción; la desviación se registra con su causa.
El conjunto de entrenamiento se versiona y se vincula a su origen, fecha de captura y transformaciones aplicadas. Cualquier salida del modelo se puede reconstruir hasta el registro de origen que la produjo.
Toda inferencia en producción genera un evento inmutable con identificador, entrada anonimizada, versión del modelo y decisión. La retención mínima se fija por normativa sectorial y se audita por muestreo.
Bloque 02
Los controles se ordenan por capa de ejecución: datos, modelo, inferencia y observación. Cada capa tiene un punto de corte propio, y un fallo en una capa detiene el flujo antes de alcanzar la siguiente. Esta secuencia reduce la propagación de errores y limita el coste de reversión.
La verificación se ejecuta en ciclos cerrados con muestreo estadístico y umbrales de aceptación predefinidos. El detalle de las pruebas de superficie de ataque se documenta en el apartado de ciberseguridad en machine learning, y la asignación de responsabilidades en gobernanza algorítmica.
Capa 1 — Datos
Validación de esquema, control de duplicados y cuota máxima de valores nulos antes del entrenamiento.
Capa 2 — Modelo
Pruebas de robustez ante perturbación de entrada y congelación de pesos con hash verificable.
Capa 3 — Inferencia
Límite de peticiones por cliente, validación de conformidad de entrada y rechazo automático fuera de dominio.
Capa 4 — Observación
Monitorización de deriva, alertas por desviación de distribución y revisión periódica de falsos negativos.
Bloque 03
La norma ISO/IEC 42001 exige un sistema de gestión documentado con política, evaluación de riesgos y revisión por la dirección. Nuestra matriz mapea cada control técnico a un requisito concreto de la norma, de forma que una auditoría externa no requiera reconstruir evidencias.
El mapeo completo, con cláusulas, evidencias esperadas y criterios de aceptación, está disponible en ISO/IEC 42001: requisitos y controles. El procedimiento de auditoría se describe en auditoría y cumplimiento de sistemas de IA.
Bloque 04
PASO 01
Registro de modelos activos, propietarios y criticidad. Sin inventario completo no se inicia la evaluación.
PASO 02
Pruebas contra umbrales definidos y clasificación de hallazgos por severidad.
PASO 03
Corrección con plazo asignado y nueva pasada de verificación sobre el mismo conjunto de pruebas.
PASO 04
Revisión periódica del control y actualización del expediente de evidencias.
El ciclo se repite cada trimestre o ante cualquier cambio de modelo, proveedor o fuente de datos. La metodología completa se detalla en metodología de evaluación.
Bloque 05
Criterios de uso aceptable y límites operativos por tipo de sistema.
Leer apartadoNotas de implementación, mediciones y casos documentados.
Leer apartadoCómo se recopilan, validan y publican los estándares.
Leer apartado