メインコンテンツにスキップ

モニターの説明

MonitorsがFinの会話品質を大規模に評価する方法と、Custom Scorecardsと連携する仕組みを理解しましょう。

モニターとは何ですか?

この文章では、モニターの仕組みと使用タイミングを説明します。サポートマネージャー、QAリード、または会話品質に責任を持つ方に最適です。MonitorsはFinの会話品質を大規模に継続的に評価・改善するのに役立ちます。どの会話をレビューすべきかを体系的に定義でき、基準品質のためのランダムサンプルやリスク・影響の高い信号に基づくターゲットセットを指定可能です。これにより、アドホックなサンプリングやスプレッドシートによる品質保証(QA)を繰り返し可能なシステムに置き換え、ボリューム増加に対応します。


チームがモニターを使う方法

チームはモニターを使って品質の継続的な可視化を維持し、最も重要な部分に注力します。

モニターダッシュボードのスクリーンショット。アクティブなモニターの名前、種類、関連スコアカードのリストを表示。

一般的な使用例は以下の通りです:

  • 全体的な品質傾向を理解するためのランダムサンプルのレビュー。

  • リスクや影響の高い会話に注目する例:

    • 低いCXスコア(会話品質の指標)

    • ポリシー違反

    • 法的脅威

    • その他のビジネス固有の指標

  • 機能リリース、価格変更、製品アップデートなど特定の施策に関連する会話の追跡。

Monitorsはパターン検出、問題の早期発見、製品・サポート・リーダーシップチームと共有可能な洞察の生成を容易にします。


MonitorsとCustom Scorecardsの連携方法

MonitorsとScorecardsは2部構成のシステムとして機能します:

  • Monitorsはレビュー対象を定義します

  • Scorecardsは各会話の評価方法を定義します

Scorecardsには以下の基準が含まれます:

  • 手動でレビューされるもの

  • AIを使って評価されるもの

    スコアカードのスクリーンショット。AI評価基準と手動レビュー基準が並んで表示されている。

スコアカードをモニターに関連付けることで、マッチした会話を定義された基準で自動評価できます。選択後、会話がモニターに追加されるとスコアカードが実行され、結果がモニターに表示されて報告・レビューに使えます。

これにより品質評価の一貫性が保たれつつ、レビュー方法の柔軟性も確保されます。

ヒント:Auto-reviewはモニター設定の一つで、すべてのAI評価スコアカード基準を満たした会話を自動的に合格とマークします。AIスコアが品質基準を満たす場合、手動チェックを完全に省略可能で、チームは失敗や例外ケースのみ対応すればよいです。

モニター設定のAuto-reviewトグルのスクリーンショット。すべてのAIスコアカード基準を満たした場合に自動レビューを有効にするオプションを表示。


大規模なレビュー管理

複数のモニターが稼働している場合、レビューリストは急速に増加します。モニターページ上部のフィルターを使い、特定のモニタータイプや注目すべき会話に絞り込みましょう。

モニタータイプでフィルター

モニターのフィルター画面のスクリーンショット。Finレビュー、Teammateレビュー、その他のモニターで絞り込むオプションを表示。

これらのフィルターはモニターリストを特定のカテゴリに絞り込みます:

  • Fin reviews — Finが対応した会話を評価するモニター。AI主導の品質に注目する際に使用。

  • Teammate reviews — 人間のチームメンバーが対応した会話を評価するモニター。コーチングやパフォーマンス追跡に有用。

  • Other monitors — 上記2つのカテゴリに該当しないモニター。

重要:チームメンバーがMonitorsの会話をレビューするには、フルシートが必要です(ライトシートは不可)およびレポート権限が必要です。

レビュー状況でフィルター

モニターを表示中は、割り当てやレビュー所有者に基づいてレビューキューをナビゲートするためにこれらのフィルターを使います:

レビュー状況フィルターのスクリーンショット。すべてのレビュー、自分に割り当てられたレビュー、受け取ったレビューのオプションを表示。
  • All reviews — 割り当てや状況に関係なく、モニター内のすべての会話を表示。全体像を把握したいときに最適。

  • Assigned to me — 自分に割り当てられた会話のみを表示。個人のレビューキューを集中して処理するのに便利。

  • Reviews received — 自分の作業が他者にレビューされた会話を表示。フィードバック確認に役立つ。


Monitorsの今後の改善予定

以下の機能はまだMonitorsにありませんが、将来のリリースで予定されています:

  • リアルタイムアラート:モニター内の会話が定義された閾値を超えたりスコアカードに失敗した際に通知を受け取る。

  • knowledge baseに対する評価:サポートコンテンツやポリシーに基づき会話を評価し、承認済みソースとの整合性を確保。


始めましょう

始める準備ができたら、モニターの作成方法にアクセスし、最初のモニターとスコアカードの作成手順を確認してください。

注意:MonitorsはPro add-onが必要です。最初のモニターを設定する前に、ワークスペースにこれがあることを確認してください。

こちらの回答で解決しましたか?