Estación 06 / 06
CrecerLAB · UNIBE

Escanea para ver la explicación

Medir y mejorar

Analítica y operación

¿Cómo se sabe si Aurora lo hace bien?

Principio

Las trazas registran tiempos, tokens y herramientas. Se revisan percentiles p50/p95, muestras de conversaciones y temas por significado. La calidad se evalúa con un juez y pruebas A/B.

Muestreo y agrupaciónEvaluación de calidad

Latencias: p50 y p95

Experimento 1

Respuestas medidas

0

p50 (la mitad)

0 ms

p95 (los peores)

0 ms

Cada barra es un grupo de respuestas según su tiempo. La cola de la derecha, en rojo, es el p95: pocas respuestas, pero son las que generan queja.

Temas que más se preguntan

Experimento 2

Los mensajes se convierten en vectores y se agrupan por cercanía de significado. Nadie escribió las categorías: aparecen solas.

Juez automático A/B

Experimento 3

Guía en vivo

Pregúntale a Aurora

Estoy viendo lo que haces en este experimento. Pregúntame lo que quieras: puedo explicarte qué está pasando en pantalla, paso por paso.