バッチテストでは、Finが実際の顧客の質問にどのように応答するかをシミュレートできます。これにより、コンテンツの網羅性を確認し、予期しない結果をデバッグし、Finのユーザー間での動作を洗練できます。
主な利点／ユースケース:
複数のユーザープロファイルにわたるFinの回答を検証し、公開前に確認します。
各回答のソース、パーソナリティ、ガイダンスを検査してコンテンツのギャップを診断・修正します。
テスト実行を再利用可能なグループに整理し、時間経過による変化を追跡します。
自動化の発動状況を確認できます。Finのタスク、アクション、カスタム回答を含みます。
言語設定を管理し、リアルタイム翻訳が期待通りに機能することを確認します。
バッチテストの使い方
1. バッチテストにアクセス
メインナビゲーションからTestに移動し、質問の追加方法を選択します。
会話から生成 - 過去の会話に基づいて最大50件の質問を生成します。
トピック別に生成 - AIトピックに基づいて最大50件の質問を生成します。
CSVファイルをアップロード - CSVファイルをアップロードして最大50件の質問を一括インポートします。
質問を手動で追加 - 質問リストをコピー＆ペーストするか、1つずつ手動で追加します。
注意：
1つのテストグループにつき最大50件の質問をアップロードできます。
会話から生成オプションを表示するには、過去90日以内に最低1件の会話が必要です。
2. テストの設定
テスト質問は、すべてのコンテンツにアクセスし、ターゲット指定なしで自動化をトリガーするために、汎用プレビューユーザーを使って自動的に実行されます。これらのテスト設定を変更するには、ページ上部のManageドロップダウンをクリックし、Settingsを選択してください。
テスト対象として
ユーザーやオーディエンスをシミュレートしてFinをテストする方法を選択できます。以下のいずれかを選択可能です。
User or Lead - ユーザーまたはleadとしてFinをテストします。利用可能なコンテンツ、ガイダンス、自動化（タスク、データコネクター、カスタム回答）を含みます。言語、場所、プランなどのユーザー属性に基づいてFinが回答を調整する様子を確認できます。公開前のセットアップ検証や公開後のトラブルシューティングに最適です。ワークスペース内の連絡先のドロップダウンリストからユーザーを選択し、そのユーザーとしてシミュレートできます。テストユーザーが既に設定されている場合に特に便利です。また、ワークスペース内の実際のusers/leadsを検索して選択することも可能です。
Audience - オーディエンスとしてFinをテストします。オーディエンス固有のコンテンツとガイダンスが適用されます。自動化は実行されません。
Preview User - すべてのライブコンテンツ、ガイダンス、自動化を含めてFinをテストします。
3. テストを実行し、回答を確認
テストを実行すると、各質問に対するFinの生成回答を確認できます。
「回答を評価」パネルで以下を確認できます:
パーソナリティ設定（例：話し方のトーン）
ガイダンス（設定済みの場合）
Finが参照したコンテンツソース
自動化（例：Finタスク、データコネクター、カスタム回答のトリガー）
テストでトリガーされた自動化は直接編集できませんが、関連設定画面へのリンクがあり、確認や迅速な調整が可能です。
4. 新しい質問を追加
メインナビゲーションからTestに移動し、Add questionsボタンをクリックすると、質問の追加方法を選択できるドロップダウンメニューが表示されます。
5. 言語設定と翻訳の調整
正確な言語での回答を得るために、バッチテストではテスト中に言語サポートとリアルタイム翻訳の設定を簡単に確認・更新できます。
例えば、ロシア語の質問に英語で回答が返ってくるなど、期待した言語と異なる回答が表示された場合、黄色のメッセージで原因と対処法が明確に示されます。
適切な設定を有効にして回答を更新すると、Finの回答が正しい言語で表示されます。
現在の設定によっては、どちらか一方または両方の設定を有効にする必要があります。心配せずに両方同時にオンにして、この画面に戻ってください。
6. 回答を評価し改善
回答を良い、許容、悪いとして評価し、評価に対する追加の説明を提供できます。すべてのフィードバックはダウンロード可能なレポートに記録され、効果的な更新の優先順位付けに役立ちます。
悪いを選択した場合は理由を選び、この回答を改善をクリックして修正のための動的な推奨事項を確認してください。
評価はFinを直接トレーニングしません。この回答を改善をクリックして、既存の記事の更新やFinへのガイダンス追加などの推奨事項を確認し、回答を改善してください。
7. テストをフィルターし一括更新
回答ステータス:でテストをフィルター
すべて - テストグループに追加されたすべての質問。
回答済みの質問 - Finが直接回答、曖昧さ解消、自動化（例：ワークフロー引き継ぎ、Finタスクなど）を提供した質問のみ。
未回答の質問 - Finが回答やフォローアップアクションを提供できなかった質問のみ。
回答評価:でテストをフィルター
すべて
良い
許容
悪い
質問の左側のチェックボックスを使って一括更新が可能です。これにより、特定の質問のQ+Aペアを一括でダウンロード、削除、または回答を更新できます。
8. テストグループを保存・整理
テストグループを使って、テストエリア内で最大50件の質問と回答を整理・保存できます。これは一度にアップロードできる最大数で、関連する質問をまとめてレビューや再利用を簡単にします。各テストグループは、特定のユーザーをシミュレートするなど、テスト時の設定を保持し、いつでも同じ設定で再テストできます。
ページ上部のManageをクリックしてグループ名の変更やテストグループの削除ができます。
テストグループ名をクリックして追加のグループを作成するか、以前保存した別のグループを選択します。
テストグループはトピック別に質問を整理するのに特に便利です。例えば、保険請求に関する質問のバッチをテスト・レビューした場合、「Insurance Claim Questions」というグループ名で保存できます。これにより、そのコンテンツを後で簡単に再訪、再実行、評価できます。
チームのコラボレーション管理にも最適です。バッチテストはFinのワークスペースレベル機能であり、テストグループを使うことでチームメンバーがテスト実行を分けて管理できます。以前のテストを削除してスペースを空ける代わりに、グループに保存して全員の作業を保持できます。
9. CSVレポートをダウンロード
すべての質問、回答、ユーザーによる評価、各回答に使用されたソースをまとめたCSVファイルを生成できます。ページ上部のManageをクリックし、Get CSV reportを選択してください。
これはチーム全体で結果を共有したり、上級管理者がレビューするのに最適です。
よくある質問
バッチテストでテストできないものは？
Fin Vision（画像認識）はまだバッチテストセクションでサポートされていません。
バッチテストを使うと解決に課金されますか？
いいえ、Testページは無料で利用でき、バッチテストで生成されたAI回答に対して課金されません。👌
テスト質問を自動生成できますか？
はい。ただし、会話から生成オプションを表示するには、過去90日以内に最低1件の会話が必要です。
回答評価はFinのトレーニングになりますか？
いいえ。バッチテストは品質保証専用であり、評価は改善点の特定に役立ちますが、Finの再トレーニングにはなりません。
異なる言語でテストできますか？
はい。バッチテストは不足している言語設定や翻訳設定をチェックし、簡単に解決できるように通知します。
異なるユーザーをシミュレートできますか？
はい。バッチテストではワークスペース内のuser/leadを選択し、その特定のユーザー属性に基づいてFinがどのように応答するかを確認できます。
テストのリセットと再実行の違いは？
テストをリセットすると、会話履歴やアップロードから別のバッチを選択できます。再実行すると、コンテンツの変更や評価に基づいて回答が再生成され、パフォーマンスを継続的に改善できます。