Evaluadores de experimentos
La ejecución de evaluadores no está habilitada en la versión actual de experimentos. Los conjuntos de datos ya pueden almacenarexpected_output, pero Fetch Hive aún no ejecuta puntuación automática ni verificaciones de aprobado/reprobado a partir de él.
Comportamiento actual
Cuando subes un conjunto de datos,expected_output se almacena con cada fila.
Úsalo durante la revisión manual y la comparación de filas.
Actualmente, ningún evaluador de coincidencia exacta se ejecuta automáticamente.
Tipos de evaluadores planeados
El soporte futuro para evaluadores puede incluir:¿Cómo debo preparar los conjuntos de datos para los evaluadores?
Agregaexpected_output cuando tengas una respuesta conocida.
Usa columnas metadata.* para agrupar filas por tema, prioridad, origen, idioma o ID de caso.
Mantén las salidas esperadas concisas cuando esperes verificaciones de coincidencia exacta o “contiene”.
Usa JSON estructurado en expected_output cuando las verificaciones a nivel de campo futuras sean útiles.
Ejemplo: