Benchmarking de si el comportamiento de IA sobrevive a variación controlada.

La mayoría de filas de benchmark prueban si un modelo puede responder a una representación de una tarea. Los despliegues reales no funcionan así. Los usuarios reformulan, agregan contexto, aplican presión, insertan instrucciones en documentos recuperados, enrutan solicitudes por herramientas y hacen preguntas benignas que se parecen a preguntas restringidas. Un modelo que supera el prompt limpio puede fallar cuando la misma decisión subyacente cambia de forma.

La corrección pregunta si el modelo hizo lo que el protocolo esperaba: permitir, rechazar, abstenerse o escalar. La estabilidad pregunta si el modelo mantuvo la misma postura conductual a través de realizaciones vinculadas de la misma unidad semántica. Un modelo puede ser estable y estar equivocado, por lo que la estabilidad no se trata como éxito a menos que también haya corrección.

La publicación pública de IPB empieza con Enterprise Copilot Safety v0.2. Los demás dominios siguen dentro del alcance del programa, pero no deben aparecer como pestañas de informes hasta que sus paquetes de evidencia pública estén listos.

Antes de publicar un informe IPB de modelos frontier, Invarra prepara un paquete privado de vista previa para cada laboratorio auditado. El paquete incluye el informe de un modelo del laboratorio, resumen metodológico, definiciones métricas, referencias de integridad de evidencia, ejemplos seleccionados seguros para revisión y un protocolo de impugnación. Los laboratorios reciben 21 días calendario para presentar impugnaciones específicas del artefacto. Las impugnaciones aceptadas se registran como enmiendas versionadas, no como ediciones silenciosas.

Los informes open-weight siguen la misma disciplina de evidencia y publicación pública, pero no requieren vista previa privada de proveedor salvo que una compuerta de publicación lo exija explícitamente.

IPB es un benchmark porque produce mediciones comparables. No es un producto centrado en rankings porque su salida principal es evidencia acotada, geometría del fallo, salvedades y artefactos de auditoría revisables.

• IPB no es un ranking universal de inteligencia.
• IPB no afirma que un modelo sea globalmente seguro.
• IPB no es certificación.
• IPB no sustituye revisión legal, regulatoria, de seguridad, médica, financiera ni de cumplimiento.
• Los resultados IPB están acotados al dominio declarado, versión de protocolo, versión de corpus, identidad de modelo/sistema y ajustes de runtime.
• El comportamiento estable no es automáticamente buen comportamiento; el comportamiento estable-pero-incorrecto es un fallo.
• Las muestras públicas no revelan material de pruebas futuras.