Casos de prueba
Arma casos de prueba con documentos de ejemplo y el resultado esperado para validar cambios en el pipeline de una plantilla de IDP: campos, ejecución de todos los casos, monitor y regla de aprobación.
Casos de prueba
Los casos de prueba guardan documentos de ejemplo con el resultado esperado, para validar cambios en el pipeline. Cada caso indica qué debe hacer la plantilla con un documento — terminar y aprobar las validaciones, o fallar —, y Ejecutar todos comprueba todos los casos a la vez contra el borrador actual.
Usa los casos de prueba antes de publicar una versión: muestran si un cambio en un filtro, en la extracción o en una etapa de posprocesamiento rompió documentos que ya funcionaban.
Casos
Haz clic en Crear caso para añadir un caso. Cada caso tiene:
| Campo | Descripción |
|---|---|
| Nombre | Obligatorio, hasta 80 caracteres. Qué verifica este caso, por ejemplo "Factura con descuento" o "Comprobante de otro tipo". |
| Resultado esperado | Éxito esperado: el pipeline debe terminar y aprobar sus validaciones. Falla esperada: el pipeline debe fallar en alguna etapa o validación. |
| Documento de ejemplo | El documento procesado en la prueba: pdf, png, jpg, jpeg, webp, tiff, tif o bmp, de hasta 15 MB. |
| Salida esperada | Opcional. Activa Definir salida esperada y escribe la salida final que debe devolver el pipeline, como texto o como JSON. En blanco, el caso verifica solo las validaciones. |
La lista muestra, para cada caso, el resultado esperado, el nombre del documento, el tipo de salida esperada, cuándo se ejecutó el caso por última vez (o Nunca ejecutado) y el estado de su última ejecución.
Al eliminar un caso, sus ejecuciones pasadas siguen en el historial de Ejecuciones.
Ejecutar todos
Ejecutar todos abre el Monitor de pruebas y pide confirmación antes de empezar, porque cada caso se convierte en una ejecución real del pipeline.
Cada caso se procesa:
- con la configuración actual del borrador, no con la versión activa;
- en el entorno Pruebas, en Ejecuciones;
- con las páginas del alcance del análisis de la plantilla y sin parámetros;
- un caso tras otro, en la misma ronda.
Cada caso cuenta en la cuota de solicitudes de IDP del workspace y consume OCR e IA según las etapas, como cualquier otra ejecución. Las validaciones por robot ejecutan el robot de verdad en cada caso.
Un caso sin documento de ejemplo termina como Falló.
Monitor de pruebas
El monitor sigue la ronda mientras ocurre:
- el progreso, por ejemplo "3 de 5", con una barra; al terminar con algún rechazo, muestra el marcador, por ejemplo "3 aprobados, 2 reprobados";
- cada caso con el estado de la ejecución — En cola, Ejecutando, Concluida o Falló —, el tiempo transcurrido, el mensaje de error cuando lo hay, y el veredicto Aprobó o Reprobó.
Haz clic en un caso para abrir los detalles de la ejecución, con el rastreo de cada etapa. Consulta Ejecuciones.
Regla de aprobación
Primero se evalúa la ejecución del caso. Se considera exitosa cuando:
- la identificación, si está activa, aceptó el documento — una identificación no superada cuenta como fallo, tanto con Rechazar como con Marcar;
- todas las validaciones activas se aprobaron;
- la salida esperada, si está definida, es igual a la salida final del pipeline — la salida de la última etapa de posprocesamiento o, sin ellas, el texto extraído.
Después, el caso Aprobó cuando el resultado coincide con lo esperado: una ejecución exitosa en un caso Éxito esperado, o una ejecución no exitosa en un caso Falla esperada. Si no, Reprobó.
La comparación de la salida esperada depende del tipo:
| Tipo | Cómo compara |
|---|---|
| JSON | Interpreta los dos lados como JSON y compara los valores: el orden de las claves de un objeto no importa, el orden de los elementos de una lista sí. Un JSON esperado no válido nunca coincide. |
| Texto | Compara el texto sin los espacios del inicio y del final y con los saltos de línea normalizados. |
Una ejecución que termina con error — un documento ausente, un fallo del modelo o un error en un script, por ejemplo — queda como Falló y no recibe veredicto, aunque el caso sea Falla esperada. Para probar rechazos, usa la identificación o las validaciones, que rechazan el resultado sin hacer caer la ejecución.