Análisis de ejecuciones
Usa el análisis de ejecuciones en la página de detalle de una ejecución de experimento para comparar el desempeño de los candidatos dentro de esa ejecución específica. El análisis de ejecuciones se calcula a partir de las celdas de resultado almacenadas del experimento. No vuelve a ejecutar prompts ni lee la configuración actual del prompt de origen.Alcance
El análisis de ejecuciones tiene como alcance una sola ejecución de experimento. Úsalo cuando quieras comparar candidatos en la misma versión del conjunto de datos y bajo las mismas condiciones de ejecución.Métricas
Las celdas de resultado fallidas aún cuentan en los totales por estado. Si una celda fallida registró costo o tokens antes de fallar, esos valores siguen incluidos en los totales de costo y tokens.
Los promedios y percentiles de duración solo usan celdas de resultado completadas.
Gráficos por candidato
Los gráficos por candidato agrupan los resultados por candidato del experimento. Usa estos gráficos para comparar:- el candidato más económico
- el candidato más rápido
- el candidato más lento
- candidatos con alto uso de tokens
- candidatos con más fallos
Filtros por metadatos
Los análisis pueden filtrarse por metadatos de fila del conjunto de datos. Por ejemplo, si tu CSV incluyemetadata.topic, puedes filtrar los análisis a un tema específico y comparar candidatos solo para esas filas.
Los filtros de metadatos usan los metadatos de fila del conjunto de datos de la ejecución del experimento, no los metadatos de la solicitud.