For the complete documentation index, see llms.txt. This page is also available as Markdown.

Mejoras automáticas para tus asistentes

Cada asistente responde bien en la mayoría de las conversaciones, pero siempre hay situaciones puntuales donde falla o se equivoca. Detectar esos puntos débiles y corregirlos a mano puede tomar tiempo. Con las mejoras automáticas, Vambe revisa el desempeño de tus asistentes, prueba cambios concretos para corregir sus errores y te muestra el resultado antes de que apliques nada.

Para entrar: en el menú de la izquierda, ve a PandAI y luego a la pestaña Sugerencias, en la sección Mejoras.


Qué es una mejora

Una mejora es un cambio que se propone sobre un asistente para que responda mejor en situaciones donde hoy tiene un desempeño bajo. Por ahora, esos puntos débiles se detectan a partir de los resultados de las Evaluaciones del asistente, pero esta es solo la primera fuente: próximamente se sumarán otras, como la tasa de alucinaciones y los resultados de Guardrails y Jueces.


Cómo se generan las mejoras

Cada noche, se revisan hasta 5 asistentes de la vertical Ecommerce —por ahora la única cubierta— cuyas evaluaciones estén bajo el 80% de respuestas correctas.

Para cada uno de esos asistentes, se prueban cambios inspirados en buenas prácticas de otros asistentes que rindieron mejor en las mismas evaluaciones. Estos cambios nunca se aplican directamente: se prueban sobre una copia del asistente, y esa copia se enfrenta a las mismas evaluaciones que el asistente original. Solo si la copia obtiene mejores resultados, la mejora aparece como sugerencia en tu cuenta.

Mientras no aceptes una mejora, tu asistente sigue respondiendo exactamente igual. Los cambios se prueban en una copia, nunca en el asistente real.


Revisa el detalle antes de decidir

En la sección Mejoras de Sugerencias verás una tarjeta por cada asistente con una mejora disponible, con el porcentaje de aumento en respuestas correctas y el resultado antes y después (por ejemplo, de 78% a 80%).

Al hacer clic en Ver mejora se abre el detalle completo, organizado en dos pestañas:

  • Evaluación: cuántas pruebas superó el asistente antes y después del cambio, en qué situaciones mejoró, en cuáles empeoró y cuántas se mantuvieron igual.

  • Mejoras: los cambios concretos que se aplicarían, por ejemplo un paso nuevo agregado a los Pasos a seguir o un reemplazo dentro del bloque de No hacer.

Revisar ambas pestañas te permite entender exactamente qué va a cambiar en el comportamiento del asistente antes de tomar una decisión.


Aplicar o descartar

Desde el detalle de la mejora puedes elegir Aplicar cambios o Cerrar para descartarla.

Si aplicas los cambios, el asistente real queda actualizado de inmediato con los nuevos pasos a seguir y bloques de no hacer. Si decides no aplicarla, el asistente sigue funcionando sin modificaciones.

Una vez que tomas una decisión sobre una mejora, ese asistente espera 14 días antes de recibir una nueva propuesta, para no saturarte con sugerencias seguidas.


En resumen

Las mejoras automáticas te permiten llevar a tus asistentes a un mejor desempeño sin tener que detectar tú mismo dónde están fallando ni redactar los ajustes: Vambe encuentra el punto débil, prueba una solución en una copia y te la entrega lista para revisar. Tú decides, con datos concretos de antes y después, si vale la pena aplicarla.

Last updated

Was this helpful?