Usa este artículo para agregar una Tarjeta de puntuación a una Evaluación, crear una nueva Tarjeta de puntuación, añadir criterios y establecer el peso y la configuración Crítica de cada criterio.
Cómo agregar una Tarjeta de puntuación a una Evaluación
Una Tarjeta de puntuación añade puntuación de calidad a una Evaluación, como Clarificación o Eficiencia, además de sus verificaciones de aprobado/reprobado. Hasta que una Evaluación tenga una Tarjeta de puntuación, solo muestra resultados de Simulación y no evaluación de Calidad. Una Tarjeta de puntuación se aplica a cada Simulación en la Evaluación, con los mismos criterios para cada una.
Ve a Test > Evals y abre la Evaluación.
Haz clic en Añadir tarjeta de puntuación en la parte superior derecha de la Evaluación, junto a Nueva simulación.
Después de agregar una Tarjeta de puntuación, aparece una sección de Evaluación de calidad en la parte superior de la Evaluación, junto a Resultados de simulación. Los criterios mostrados provienen de la Tarjeta de puntuación que agregaste, por lo que la sección lista los criterios que esa Tarjeta contiene. Muestra la Puntuación de revisión general y el promedio de cada uno de esos criterios. La lista de conversaciones simuladas también obtiene una columna de Puntuación de revisión y una columna para cada criterio.
También puedes agregar una Tarjeta de puntuación desde Configuración de la Evaluación. Para abrir Configuración de la Evaluación en una Evaluación existente, haz clic en el menú de opciones (...) junto a Nueva simulación, luego haz clic en Editar evaluación. En Configuración de la Evaluación, abre el desplegable de Evaluación de calidad, luego elige una Tarjeta de puntuación existente o haz clic en Crear nueva tarjeta de puntuación. El valor predeterminado es Sin tarjeta de puntuación.
Nota: Las Tarjetas de puntuación se comparten con los Monitores, por lo que los cambios en una Tarjeta de puntuación se aplican en todos los lugares donde se usa. Para escribir criterios que puntúen de manera confiable, consulta el artículo Cómo escribir criterios efectivos para Monitor y Tarjeta de puntuación.
Cómo crear una Tarjeta de puntuación para una Evaluación
Para crear una Tarjeta de puntuación para una Evaluación, nómbrala y añade los criterios en los que se puntúa a Fin. Las Tarjetas de puntuación de Evaluación siempre evalúan a Fin, por lo que la configuración Quién es evaluado está fija en Fin AI Agent, y Compañeros humanos asignados no está disponible.
En Configuración de la Evaluación, abre el desplegable de Evaluación de calidad y haz clic en Crear nueva tarjeta de puntuación. El desplegable mostrará entonces Nueva tarjeta de puntuación, y aparecerá el formulario de Nueva tarjeta de puntuación debajo.
En Nombre de la tarjeta de puntuación, ingresa un nombre.
En Criterios de evaluación, haz clic en + Criterios. Se abrirá el panel Editar tarjeta de puntuación > Nuevos criterios. Para completarlo, consulta "Cómo agregar criterios a una Tarjeta de puntuación" abajo.
Después de añadir criterios puntuados, la sección Puntuación de revisión (%) muestra un promedio ponderado de ellos. Se calcula multiplicando la puntuación (%) de cada criterio por su peso, sumando los resultados y dividiendo por el peso total. Hasta entonces, muestra No puntuado.
El interruptor de Auto-revisión de tarjeta de puntuación está disponible solo cuando cada criterio usa evaluación por IA.
Cómo agregar criterios a una Tarjeta de puntuación
En el panel Editar tarjeta de puntuación > Nuevos criterios, en Nombre del criterio, ingresa un nombre claro para referencia, por ejemplo Sentimiento.
En Descripción, describe qué debe evaluarse, en hasta 255 caracteres. El revisor de IA usa esta descripción para decidir qué calificación aplicar.
En Opciones de calificación, haz clic en Añadir opción hasta que el criterio tenga al menos 2 opciones de calificación. La opción No aplicable siempre está presente y no cuenta.
Opcionalmente, activa Razones de calificación.
Haz clic en Guardar para guardar el criterio, luego haz clic en Guardar cambios en Configuración de la Evaluación para adjuntar la Tarjeta de puntuación a la Evaluación.
Las Evaluaciones puntúan automáticamente cada criterio con IA, usando la descripción del criterio y la transcripción de la Simulación (todos los mensajes, excluyendo eventos). Puntuación manual no está disponible, porque las Simulaciones no tienen revisor humano. El contenido de Fin, Procedimientos y guías aún no están disponibles para el revisor de IA como contexto.
Cómo establecer el peso de la puntuación y la configuración Crítica para un criterio
En la tabla de Criterios de evaluación, cada criterio tiene un Peso de puntuación y una configuración Crítica:
Peso de puntuación: cuánto cuenta el criterio para la Puntuación de revisión (%). Los criterios que muestran No puntuado no tienen peso.
Crítica: si un criterio Crítico falla, toda la tarjeta de puntuación falla, sin importar la puntuación de revisión. La casilla Crítica no está disponible para criterios que muestran No puntuado.
Cómo leer los resultados de la Tarjeta de puntuación para una Simulación
Para ver cómo Fin puntuó en una sola conversación, abre una Simulación de una Evaluación que tenga una Tarjeta de puntuación. Junto a su verificación de Transferencia y verificaciones de Simulación, la Simulación muestra su Puntuación de revisión y, para cada criterio, la calificación que el juez LLM (modelo de lenguaje grande) dio. Si Razones de calificación está activado para un criterio, también verás la razón del juez, para que puedas entender por qué una respuesta obtuvo esa puntuación y convertir eso en una corrección.