Regresión de Solicitud

Cómo detectar y corregir regresiones de prompts con líneas base de evaluación, monitoreo y disparadores de reversión.
Publicado:
Admin User
Updated:
published

Regresión de Prompts

Las regresiones de prompts ocurren cuando un cambio en un prompt reduce la calidad, aumenta el costo o rompe las expectativas de seguridad.

Manejo empresarial: detectar mediante evaluación, confirmar mediante monitoreo, revertir rápidamente y documentar la evidencia.

Ver también

Arnés de Evaluación Monitoreo (Calidad, Deriva) Estrategia de Reversión Manual de Reversión de IA

Preguntas Frecuentes

¿Qué es la regresión de prompts?
Un cambio en un prompt provoca una caída en la calidad, seguridad o rendimiento de costos en comparación con la línea base.

¿Cómo la detectamos?
Arnés de evaluación + monitoreo de métricas de resultados y señales de deriva.

¿Cuál es la primera respuesta?
Congelar cambios, reproducir en el conjunto de pruebas, revertir si se confirma.

¿Cómo evitamos que se repita?
Control de versiones, compuertas y rúbricas/conjuntos de pruebas más robustos.

¿Cuál es la primera mejora?
Ejecutar un pequeño conjunto de evaluación para cada cambio de prompt.