Saltar al contenido principal

Candidatos de experimentos

Los candidatos son los prompts o agentes que quieres comparar en un experimento. Cuando agregas un candidato, Fetch Hive captura la configuración de origen en ese momento. Las ediciones posteriores al prompt o agente de origen no cambian el candidato ya agregado al experimento.

Tipos de candidatos

Tipo de candidatoQué usaCuándo usarlo
Dashboard PromptEl prompt actual del editor del panelÚsalo cuando estás iterando sobre un prompt antes de publicarlo.
Deployed PromptUn despliegue de prompt, variante y versiónÚsalo cuando quieras probar la versión exacta que tus llamadores de app o API usan.
AgentLa configuración actual del agenteÚsalo cuando quieras probar el comportamiento del agente sobre muchas filas.

¿Cómo agrego un prompt del panel?

Abre el experimento. Haz clic en Add candidate. Elige Dashboard Prompt como tipo. Selecciona el prompt. Haz clic en Add candidate. Úsalo cuando quieras comparar el estado actual del editor de prompts.

¿Cómo agrego un prompt desplegado?

Abre el experimento. Haz clic en Add candidate. Elige Deployed Prompt como tipo. Selecciona el prompt. Selecciona el prompt desplegado. Selecciona la variante. Selecciona la versión. Haz clic en Add candidate. Úsalo cuando quieras pruebas repetibles contra una versión específica de despliegue de producción o staging.

¿Cómo agrego un agente?

Abre el experimento. Haz clic en Add candidate. Elige Agent como tipo. Selecciona el agente. Haz clic en Add candidate. Úsalo cuando quieras probar un agente contra un conjunto de datos estructurado.

Ajustes del candidato

Los ajustes del candidato son de solo lectura en los experimentos actualmente. Edita el modelo, la temperatura, las herramientas, las instrucciones y otros ajustes en el editor de prompts o de agentes antes de agregar el candidato. Las sobrescrituras locales del experimento están planeadas para una versión futura.

Actualizar la instantánea de un candidato

Usa Refresh snapshot cuando el prompt de origen, el prompt desplegado o el agente haya cambiado y quieras que las ejecuciones futuras usen la configuración de origen más reciente. Al actualizar se actualiza la instantánea capturada del candidato existente. No cambia los resultados de ejecuciones históricas. Úsalo cuando quieras mantener la misma fila de candidato en un experimento en lugar de archivarlo y volver a agregarlo. Para prompts desplegados, la actualización usa la misma referencia de despliegue, variante y versión seleccionada. Si quieres probar una versión desplegada diferente, agrega un nuevo candidato para esa versión.

Candidatos archivados

Si archivas un candidato, se elimina de la configuración futura del experimento y de las selecciones de ejecución. Los resultados de ejecuciones existentes siguen disponibles para que las comparaciones previas sigan teniendo sentido. Archivar requiere confirmación. Consulta también: Prompts, Publicación y versionado y Agentes