Passar para o conteúdo principal

Criando e configurando Scorecards

Aprenda a criar e personalizar scorecards para avaliar conversas e manter altos padrões de qualidade.

Um scorecard personalizado define o que é bom para sua equipe, estabelecendo explicitamente os critérios que você valoriza - como precisão, tom ou conformidade com políticas. Scorecards funcionam junto com Monitors: um Monitor define quais conversas serão revisadas, e um scorecard define como cada uma é avaliada.

Você pode ter múltiplos scorecards para diferentes Monitors. Escolha qual scorecard associar a um Monitor na tela de configuração do Monitor:

Nota: Scorecards estão disponíveis como parte do add-on Pro.


Para criar um scorecard

Vá para Analisar > Monitors e clique em Scorecards. Você pode usar o scorecard padrão Fin Quality Scorecard ou criar o seu clicando em + Novo scorecard:


Criar um novo critério para scorecard

Comece adicionando critérios ao scorecard. Primeiro, clique em Novo scorecard > + Critérios > Criar novo.

Ao criar um novo atributo, siga os passos abaixo:

1. Nomeie o Critério

Dê ao critério um nome curto e claro (por exemplo, Sentimento ou Precisão da resposta). Esse nome aparece nos relatórios e será usado como referência.

2. Descreva o que está sendo avaliado

Adicione uma descrição clara explicando o que o critério verifica e como deve ser pontuado. A descrição é o prompt que a AI usa para pontuar esse critério, e quanto mais precisa for, mais precisamente a AI avaliará as conversas. Também ajuda os revisores humanos a aplicar o mesmo critério de forma consistente.

Dica: Para ajuda na redação de descrições eficazes, veja como escrever critérios eficazes para Monitor e Scorecard.

3. Escolha como o critério será pontuado

Decida se o critério deve ser pontuado automaticamente pela AI ou manualmente pelos revisores humanos. Você pode misturar atributos pontuados pela AI e por humanos no mesmo scorecard.

Nota: Títulos e descrições dos critérios do scorecard são reutilizáveis. Depois de criar um atributo, você pode adicioná-lo a vários scorecards. As pontuações anteriores não podem ser reutilizadas e precisarão ser definidas do zero em cada scorecard.

4. Defina as opções de avaliação

Adicione os valores possíveis de avaliação que um revisor ou a AI podem selecionar (por exemplo: Bom, Regular, Ruim). Cada atributo deve ter pelo menos duas opções de avaliação. Para cada opção, você irá:

  • Nomear a avaliação (curto e claro)

  • Descrever quando deve ser selecionada

  • Atribuir uma pontuação (por exemplo, 100%, 50%, 0%) ou marcá-la como Não pontuada

A pontuação que você atribui determina como essa avaliação contribui para a pontuação geral da revisão.

4b. Definir motivos da avaliação (opcional)

Para cada opção de avaliação, você pode definir uma lista de motivos da avaliação, que são rótulos predefinidos que explicam por que uma determinada pontuação foi dada. Os motivos ajudam revisores e AI a categorizar as pontuações de forma consistente, facilitando a identificação de padrões nas conversas.

Quando a AI pontua um critério, ela seleciona automaticamente o motivo predefinido mais relevante, quando aplicável. Se nenhum motivo predefinido se encaixar, a AI gera uma explicação clara para que cada pontuação tenha um contexto significativo.

5. Ativar Autoavaliação (opcional)

Você pode automatizar todo o processo de QA para um scorecard ativando o Autoavaliação do scorecard.

Quando ativado:

  • Se a AI pontuar todos os critérios do scorecard, a etapa de revisão manual é totalmente ignorada.

  • Os colegas ainda podem substituir manualmente qualquer pontuação da AI se encontrarem alguma discrepância.

Dica: Autoavaliação funciona melhor em scorecards onde todos os critérios são pontuados pela AI. Se algum critério exigir um humano, essas conversas ainda aparecerão na fila Não revisada.


Configure seu scorecard

Depois de adicionar critérios ao scorecard, configure como eles afetam o resultado geral da revisão.

Marcar um critério do scorecard como crítico

Você pode marcar um critério como Crítico. Se um critério crítico receber uma avaliação reprovada, toda a revisão é reprovada:

  • A pontuação geral da revisão se torna 0%

  • Isso substitui todos os pesos

  • Avaliações não pontuadas excluem o critério da pontuação geral e não acionam reprovação

Critérios críticos são úteis para padrões inegociáveis, como requisitos de conformidade, segurança ou aderência a políticas, e tratamento de escalonamentos.

Peso dos critérios do scorecard

Cada critério pode receber um peso para definir sua importância relativa.

  • O peso deve ser um número inteiro entre 0 e 100

  • Pesos maiores aumentam o impacto desse critério na pontuação geral da revisão

Use pesos para refletir o que importa mais — por exemplo, um peso maior em Precisão do que em Eficiência se a correção for mais importante que a velocidade.

Nota:

  • Os pesos são relativos entre si, não fixos a uma escala de 100. O total pode somar qualquer número, o que importa é a proporção que cada critério contribui. Um critério com peso 25 de um total de 50 contribui tanto quanto um com peso 50 de 100.

  • A opção 'Incluir na pontuação da revisão' foi removida da interface do scorecard.

Adicionando um limite de aprovação

Você pode definir um limite de aprovação — a pontuação mínima geral necessária para que uma revisão seja considerada aprovada. Por exemplo, se o limite for 80%, qualquer revisão com pontuação abaixo de 80% será marcada como reprovada.

Isso é avaliado após a pontuação ponderada, desde que nenhum critério crítico tenha reprovado a revisão.


Como funciona a pontuação geral da revisão

  1. Cada critério é avaliado usando suas opções de avaliação definidas.

  2. As avaliações contribuem com a pontuação atribuída (ou são excluídas se marcadas como Não pontuadas).

  3. Todos os critérios são combinados usando seus pesos atribuídos.

  4. Se algum critério crítico receber uma avaliação reprovada, a pontuação geral da revisão se torna 0%.

  5. A pontuação final é comparada com o limite de aprovação para determinar se a revisão é aprovada ou reprovada.

Aqui está um exemplo de como três critérios se combinam em uma pontuação final:

Critério

Avaliação selecionada

Pontuação da avaliação

Peso

Precisão

Bom

100%

60

Tom

Regular

50%

30

Eficiência

Bom

100%

10

Pontuação geral = (100x60 + 50x30 + 100x10) / (60+30+10) = 85%


Onde visualizar as pontuações

Após a conclusão das revisões, as pontuações ficam visíveis tanto na lista de conversas quanto dentro de cada conversa.

No Monitor, a lista de conversas mostra a pontuação geral da revisão (porcentagem ou Reprovado) junto com as avaliações individuais dos critérios como colunas. Isso facilita a análise do desempenho nas conversas e a identificação de reprovações ou pontuações baixas.

Quando você abre uma conversa e vai para a aba Pontuação, pode ver o scorecard atribuído, o status da revisão, a pontuação geral e a avaliação selecionada para cada critério. Essa visualização mostra exatamente como a pontuação final foi determinada. Quando Fin pontua um critério usando AI, você pode passar o mouse sobre a avaliação na aba Pontuação para ver uma dica mostrando a avaliação selecionada, a descrição do critério e o raciocínio do Fin para essa pontuação — tudo em um só lugar.


Perguntas frequentes

Posso reutilizar critérios de scorecard em vários scorecards?

Sim, títulos e descrições dos critérios são reutilizáveis. Depois de criar um critério, você pode adicioná-lo a vários scorecards. Note que pontuações anteriores não podem ser reutilizadas e precisarão ser definidas do zero em cada scorecard.

O que acontece se eu não anexar um scorecard a um monitor?

O monitor ainda sinalizará conversas que correspondam aos seus critérios, mas nenhuma pontuação será feita. Os revisores verão conversas sinalizadas sem critérios de scorecard para preencher. Para habilitar a avaliação, anexe um scorecard durante a configuração do monitor.

Posso misturar critérios pontuados por AI e manualmente no mesmo scorecard?

Sim. Você pode escolher, critério a critério, se a pontuação será feita pela AI ou por um revisor humano. Note que se o Autoavaliação estiver ativado e algum critério exigir pontuação manual, essas conversas ainda aparecerão na fila Não revisada.

O que um critério crítico faz?

Se um critério crítico receber uma avaliação reprovada, a pontuação geral da revisão cai para 0%, independentemente de como os outros critérios foram pontuados. Isso é útil para padrões inegociáveis — conformidade, segurança ou tratamento de escalonamento — onde uma única falha deve sobrepor tudo o mais.

Respondeu à sua pergunta?