メインコンテンツにスキップ

モニターの説明

MonitorsがFinの会話品質を大規模に評価する方法と、Custom Scorecardsと連携する仕組みを理解しましょう。

モニターとは何ですか?

この文章は、モニターの仕組みと使用タイミングを理解するためのものです。サポートマネージャー、QAリーダー、または会話品質に責任を持つ方に役立ちます。モニターはFinの会話品質を大規模に継続的に評価・改善するのに役立ちます。モニターは、レビューすべき会話を体系的に定義し、基準品質のためのランダムサンプルやリスクや影響が大きい信号に基づくターゲットセットを指定できます。これにより、アドホックなサンプリングやスプレッドシートによる品質保証(QA)を繰り返し可能なシステムに置き換え、ボリューム増加に対応します。


チームがモニターを使う方法

チームはモニターを使って品質の継続的な可視化を維持し、重要な部分に注力します。

モニターダッシュボードのスクリーンショット。アクティブなモニターの名前、タイプ、関連スコアカードのリストを表示。

一般的な使用例には以下が含まれます:

  • 全体的な品質傾向を理解するためのランダムサンプルのレビュー。

  • 以下のようなリスクや影響が大きい会話に注目:

    • 低いCXスコア(会話品質の指標)

    • ポリシー違反

    • 法的脅威

    • その他のビジネス固有の指標

  • 機能リリース、価格変更、製品アップデートなど特定の施策に関連する会話の追跡。

モニターはパターン検出、問題の早期発見、製品、サポート、リーダーシップチームと共有可能な洞察の生成を容易にします。


モニターとCustom Scorecardsの連携方法

モニターとスコアカードは二部構成のシステムとして連携します:

  • モニターはレビュー対象を定義します

  • スコアカードは各会話の評価方法を定義します

Scorecardsには以下の基準が含まれます:

  • 手動でレビューされる

  • AIを使って評価される

    スコアカードのスクリーンショット。AI評価基準と手動レビュー基準が並んで表示されている。

スコアカードをモニターに関連付けることで、マッチしたすべての会話を定義された基準で自動評価できます。選択後、会話がモニターに追加されるとスコアカードが実行され、結果はモニターに表示され報告・レビューに使えます。

これにより品質評価の一貫性が保たれつつ、レビュー方法の柔軟性も確保されます。

ヒント:自動レビューはモニター設定の一つで、すべてのAI評価スコアカード基準を満たした会話を自動的に合格とマークします。AIスコアが品質基準を満たす場合、手動チェックを完全に省略でき、チームは失敗や例外ケースのみ対応すればよいです。

モニター設定の自動レビュー切り替えのスクリーンショット。すべてのAIスコアカード基準を満たした場合に自動レビューを有効にするオプションを表示。


大規模なレビュー管理

複数のモニターを運用するとレビューリストが急増します。モニターページ上部のフィルターを使い、特定のモニタータイプや注目すべき会話に絞り込みましょう。

モニタータイプでフィルター

モニターのフィルター画面のスクリーンショット。Finレビュー、チームメイトレビュー、その他のモニターで絞り込むオプションを表示。

これらのフィルターはモニターリストを特定のカテゴリに絞り込みます:

  • Finレビュー — Finが対応した会話を評価するモニター。AI主導の品質に注目する際に使用。

  • チームメイトレビュー — 人間のチームメイトが対応した会話を評価するモニター。コーチングやパフォーマンス追跡に有用。

  • その他のモニター — 上記2つのカテゴリに該当しないモニター。

重要:チームメイトがモニターの会話をレビューするには、フルシートが必要です(ライトシートは不可)かつレポート権限が必要です。

レビュー状況でフィルター

モニターを表示中は、これらのフィルターで割り当てやレビュー所有者に基づきレビューキューをナビゲートできます:

レビュー状況フィルターのスクリーンショット。すべてのレビュー、自分に割り当てられたレビュー、受け取ったレビューのオプションを表示。
  • すべてのレビュー — 割り当てや状況に関係なく、モニター内のすべての会話を表示。全体像を把握するのに最適。

  • 自分に割り当てられたレビュー — 自分に割り当てられた会話のみ表示。個人のレビューキューを集中して処理可能。

  • 受け取ったレビュー — 自分の作業が他者にレビューされた会話を表示。フィードバック確認に便利。


モニターの今後の改善予定

以下の機能はまだモニターにありませんが、将来のリリースで予定されています:

  • リアルタイムアラート:モニター内の会話が定義された閾値を超えたりスコアカードに失敗した際に通知を受け取る。

  • knowledge baseに対する評価:サポートコンテンツやポリシーに基づき会話を評価し、承認済みソースとの整合性を確保。


始めましょう

始める準備ができたら、モニターの作成方法にアクセスし、最初のモニターとスコアカードの作成手順を確認してください。

注意:モニターはProアドオンが必要です。最初のモニターを設定する前に、ワークスペースにこれがあることを確認してください。

こちらの回答で解決しましたか?