Os relatórios do Monitor ajudam você a acompanhar e medir a qualidade das conversas do Fin AI Agent. Você pode usar essas métricas para criar relatórios que destacam tendências de qualidade e identificam áreas para melhoria.
Pontuação do Scorecard e Taxa de aprovação do Scorecard oferecem uma visão rápida da qualidade geral do Fin. A pontuação mostra o desempenho médio, enquanto a taxa de aprovação indica com que frequência os scorecards avaliados atingem seu limite de qualidade. Usados com as falhas do Scorecard, ajudam a entender se uma queda no desempenho é um problema isolado ou mais amplo.
As métricas de avaliação do Scorecard ajudam a acompanhar o desempenho ao longo do tempo e identificar mudanças que podem estar afetando o Fin, como uma atualização do Knowledge Hub ou lançamento de produto. Isso facilita identificar tendências e ajustar as respostas do Fin antes que a qualidade caia ainda mais.
Para uma análise mais profunda, os critérios avaliados do Scorecard e as pontuações dos critérios do Scorecard mostram quais partes da conversa estão funcionando e quais não. Eles detalham o desempenho por critérios específicos, como precisão técnica ou tom, para que você veja exatamente onde o Fin precisa melhorar.
Como criar um relatório do Monitor
Todas as métricas do Monitor estão disponíveis no construtor de relatórios personalizados, para que você possa combiná-las com outros dados do Intercom e criar visões personalizadas da qualidade da conversa.
Para criar um relatório personalizado usando as métricas do Monitor, vá para Analisar > Relatórios Personalizados > + Gráfico e selecione as métricas que você precisa na categoria Monitores. Você pode filtrar por scorecard, período ou qualquer outro atributo para focar nos segmentos mais relevantes para sua equipe.
Avaliação do Scorecard
Nome da Métrica | Descrição |
Scorecards avaliados | Número de avaliações de scorecard. |
Taxa de falha do Scorecard | Percentual de avaliações de scorecard que falharam. |
Falhas do Scorecard | Número de avaliações de scorecard que falharam. |
Taxa de aprovação do Scorecard | Percentual de avaliações de scorecard que foram aprovadas. |
Aprovações do Scorecard | Número de avaliações de scorecard que foram aprovadas. |
Pontuação do Scorecard | A pontuação de revisão atribuída às avaliações do scorecard. |
Avaliação de atributo do Scorecard
A avaliação de atributo do Scorecard são dados qualitativos usados para categorizar ou filtrar suas métricas.
Nome da Métrica | Descrição |
Critérios avaliados do Scorecard | Número de avaliações dos critérios do scorecard. |
Falhas dos critérios do Scorecard | Número de avaliações dos critérios do scorecard que falharam. |
Aprovações dos critérios do Scorecard | Número de avaliações dos critérios do scorecard que foram aprovadas. |
Pontuação dos critérios do Scorecard | A pontuação de revisão atribuída às avaliações dos critérios do scorecard. |