バッチテストでは、Finが実際の顧客の質問にどのように応答するかをシミュレートできます。実際の顧客に届く前に、コンテンツの網羅性を確認し、予期しない結果をデバッグし、Finの動作をusers全体で洗練できます。
主な利点／ユースケース：
Finの回答を複数のuserプロファイルで本番前に検証します。
コンテンツのギャップを診断・修正し、各回答のソース、パーソナリティ、ガイダンスを確認します。
テスト実行を整理し、再利用可能なグループにまとめて変化を追跡します。
自動化の発動状況を確認できます。Finのタスク、アクション、カスタム回答を含みます。
言語設定を管理し、リアルタイム翻訳が期待通りに動作することを確認します。
バッチテストの使い方
1. バッチテストにアクセス
メインナビゲーションからTestに移動し、質問の追加方法を選択します。
過去の会話から生成 - 過去の会話に基づき最大50件の質問を生成します。
トピック別に生成 - AIトピックに基づき最大50件の質問を生成します。
CSVファイルをアップロード - CSVファイルをアップロードして最大50件の質問を一括インポートします。
質問を手動で追加 - 質問リストをコピー＆ペーストするか、1件ずつ手動で追加します。
注意：
1つのテストグループにつき最大50件の質問をアップロードできます。
過去の会話から生成オプションを表示するには、過去90日間に最低1件の会話が必要です。
2. テストの設定
テスト質問は、generic preview userを使って自動的に実行され、すべてのコンテンツにアクセスし、ターゲット指定なしで全自動化をトリガーします。これらのテスト設定を変更するには、ページ上部のManageドロップダウンをクリックし、Settingsを選択します。
テスト対象として
usersやaudiencesをシミュレートしてFinをテストする方法を選択できます。以下のいずれかを選択可能です。
UserまたはLead - userまたはleadとしてFinをテストします。利用可能なコンテンツ、ガイダンス、自動化（タスク、データコネクタ、カスタム回答）を含みます。言語、場所、プランなどのuser属性に基づきFinが回答を調整する様子を確認できます。ローンチ前の設定検証や展開後のトラブルシューティングに最適です。workspace内の連絡先のドロップダウンリストからuserを選択し、そのuserとしてシミュレートできます。workspaceにテストusersが設定されている場合に特に便利です。また、workspace内の実際のusersやleadsを検索して選択することも可能です。
Audience - audienceとしてFinをテストします。audience固有のコンテンツとガイダンスが適用されます。自動化は実行されません。
Preview User - すべてのライブコンテンツ、ガイダンス、自動化を含めてFinをテストします。
3. テストを実行し回答を確認
テストを実行すると、各質問に対するFinの生成回答を確認できます。
「回答を評価」パネルで以下を確認できます：
パーソナリティ設定（例：話し方のトーン）
ガイダンス（設定済みの場合）
コンテンツソース Finが参照した情報源
自動化（例：Fin Tasks、Data connectors、またはトリガーされたCustom Answers）
テストでトリガーされた自動化は直接編集できませんが、関連設定画面へのリンクがあり、確認や迅速な調整が可能です。
4. 新しい質問を追加
メインナビゲーションからTestに移動し、Add questionsボタンをクリックすると、質問の追加方法を選択できるドロップダウンメニューが表示されます。
5. 言語設定と翻訳の調整
正確な言語での回答を得るために、バッチテストではテスト中に言語サポートとリアルタイム翻訳の設定を簡単に確認・更新できます。
質問が期待した言語と異なる回答（例：ロシア語の質問に英語で回答）が表示された場合、黄色のメッセージで原因と対処法が明確に示されます。
適切な設定を有効にして回答を更新すると、Finの回答が正しい言語で表示されます。
現在の設定に応じて、どちらか一方または両方の設定を有効にする必要があります。心配せずに同時に有効にして、この画面に戻ってください。
6. 回答の評価と改善
回答を良い、許容、悪いで評価し、評価に対する追加の説明を提供できます。すべてのフィードバックはダウンロード可能なレポートに記録され、効果的な更新の優先順位付けに役立ちます。
悪いを選択した場合、理由を選び、この回答を改善をクリックして修正のための動的な推奨事項を表示します。
評価はFinの直接的な学習にはなりません。この回答を改善をクリックして、既存の記事の更新やFinへのガイダンス追加などの推奨事項を確認し、回答を改善してください。
7. テストのフィルタリングと一括更新
回答状況：でテストをフィルタリング
すべて - テストグループに追加されたすべての質問。
回答済みの質問 - Finが直接回答、曖昧化、または自動化（例：ワークフロー引き継ぎ、Fin Taskなど）を提供した質問のみ。
未回答の質問 - Finが回答やフォローアップアクションをトリガーできなかった質問のみ。
回答評価：でテストをフィルタリング
すべて
良い
許容
悪い
質問の左側のチェックボックスを使って一括更新が可能です。これにより、特定の質問をダウンロードしたり、削除したり、その質問に関連する回答を更新したりできます。
8. テストグループの保存と整理
テストグループを使って、テストエリア内で最大50件の質問と回答を整理・保存できます。これは一度にアップロードできる最大数で、関連する質問をグループ化してレビューや再利用を容易にします。各テストグループは、特定のuserをシミュレートするなど、テスト時の設定を保持し、いつでも同じ設定で再テストできます。
ページ上部のManageをクリックしてグループ名の変更やテストグループの削除ができます。
テストグループ名をクリックして追加グループを作成するか、以前保存した別のグループを選択します。
テストグループはトピック別の質問整理に特に便利です。例えば、保険請求に関する質問のバッチをテスト・レビューした場合、「保険請求の質問」というグループ名で保存できます。後で簡単に見直し、再実行、評価が可能です。
チームの共同作業管理にも最適です。Batch testはFinのworkspaceレベル機能なので、テストグループを使うことでチームメンバーがテスト実行を分けて管理できます。以前のテストを削除してスペースを空ける代わりに、グループに保存して全員の作業を保持できます。
9. CSVレポートのダウンロード
すべての質問、回答、userが付けた評価、各回答に利用されたソースをまとめたCSVファイルを生成できます。ページ上部のManageをクリックし、Get CSV reportを選択してください。
これはチーム内で結果を共有したり、上層部がレビューする際に便利です。
よくある質問
Batch testでテストできないものは？
Fin Vision（画像認識）はまだBatch testセクションでサポートされていません。
Batch testを使うと解決に課金されますか？
いいえ、Testページは無料で利用でき、Batch testで生成されたAI回答に対して課金されることはありません。👌
テスト質問を自動生成できますか？
はい、ただし過去の会話から生成オプションを表示するには、過去90日間に最低1件の会話が必要です。
回答評価はFinの学習に使われますか？
いいえ。Batch testは品質保証専用で、評価は改善点の特定に役立ちますが、Finの再学習には使われません。
異なる言語でテストできますか？
はい。Batch testは言語や翻訳設定の不足を検出し、簡単に解決できるようにします。
異なるusersをシミュレートできますか？
はい。Batch testではworkspace内のuser/leadを選択し、そのuser属性に基づくFinの応答を確認できます。
テストのリセットと再実行の違いは？
テストのリセットでは、会話履歴やアップロードから別のバッチを選択できます。再実行では、コンテンツの変更や評価に基づき回答を再生成し、パフォーマンスを継続的に改善できます。