MonitorレポートはFin AI Agentの会話品質を追跡・測定するのに役立ちます。これらの指標を使って品質傾向を示し、改善点を特定するレポートを作成できます。
Scorecard scoreとScorecard pass rateはFinの全体的な品質を素早く把握できます。スコアは平均パフォーマンスを示し、合格率は評価されたスコアカードが品質基準を満たす頻度を示します。Scorecard failsと併用すると、パフォーマンス低下が一時的な問題か広範な問題かを判断できます。
Scorecard評価指標は時間経過によるパフォーマンスを追跡し、Knowledge Hubの更新や製品発売などFinに影響を与える変化を見つけるのに役立ちます。これにより傾向を特定し、品質低下を防ぐためにFinの応答を調整しやすくなります。
より詳細な分析には、Evaluated scorecard criteriaとScorecard criteria scoresが会話のどの部分が機能しているか、どの部分が機能していないかを示します。技術的正確さやトーンなどの特定の基準ごとにパフォーマンスを分解し、Finの改善が必要な箇所を正確に把握できます。
モニターレポートの作成方法
すべてのMonitor指標はカスタムレポートビルダーで利用可能で、他のIntercomデータと組み合わせて会話品質のカスタマイズビューを作成できます。
Monitor指標を使ってカスタムレポートを作成するには、Analyze > Custom Reports > + Chart に移動し、Monitorsカテゴリから必要な指標を選択します。スコアカード、期間、その他の属性でフィルタリングして、チームに最も関連するセグメントに絞り込めます。
Scorecard評価
指標名 | 説明 |
評価済みスコアカード | スコアカード評価の数。 |
Scorecard fail rate | 失敗したスコアカード評価の割合。 |
Scorecard fails | 失敗したスコアカード評価の数。 |
Scorecard pass rate | 合格したスコアカード評価の割合。 |
Scorecard passes | 合格したスコアカード評価の数。 |
Scorecard score | スコアカード評価に割り当てられたレビューのスコア。 |
Scorecard属性評価
Scorecard属性評価は、指標を分類またはフィルタリングするための定性的データポイントです。
指標名 | 説明 |
評価済みスコアカード基準 | スコアカード基準評価の数。 |
Scorecard criteria fails | 失敗したスコアカード基準評価の数。 |
Scorecard criteria passes | 合格したスコアカード基準評価の数。 |
Scorecard criteria score | スコアカード基準評価に割り当てられたレビューのスコア。 |

