メインコンテンツにスキップ

会話デバッグにFin Operatorを使用する

Fin Operatorを使って、Finが会話で特定の動作をした理由を調査し、根本原因を診断し修正案を提案する方法。

Finが会話で特定の動作をした理由とその修正方法を理解します。Fin OperatorはFinの思考、トレース、使用したコンテンツソースを含む全文のトランスクリプトを読み取り、何が起こったかを診断し根本原因の解決を支援します。

調査できること

  • 特定の回答がなぜ出されたのか—どのコンテンツソースが使われ、Finがそれらをどう推論し、正しい情報が利用可能だったか。

  • Finが特定の動作をした理由—特定の応答、エスカレーション、解決に至る意思決定の経路をたどり、どのコンテンツ、ガイドラインルール、手順が結果に影響したかを確認。

  • 手順のステップが特定の方法で実行された理由—どのステップがどの順序でどのデータを使って実行されたか、なぜステップがスキップされたり予期しない分岐を取ったかを正確に確認。


例のプロンプト

  • 「なぜこの会話でFinは間違った回答をしたのか?」(会話のリンクまたはIDを貼り付け)

  • 「この会話はエスカレーションされた—なぜ?」

  • 「なぜこの手順のステップ3がスキップされたのか?」


Fin Operatorの調査と修正方法

Fin Operatorは必要なデータを取得し、Finの設定を照合し、修正案を提案します—すべて一連の流れで行います。

  1. 全文の会話を取得—Finの推論トレース、参照したコンテンツソース、実行したツールコールを含む。

  2. Finの設定を参照—関連するコンテンツ、ガイドラインルール、手順定義を確認し、Finが何を扱っていたかを理解。

  3. 根本原因を特定—問題がコンテンツ、ガイドライン、手順、またはその組み合わせにあるかを明確化。

  4. 修正案を提案—根本原因に応じてknowledge base、手順、ガイドラインルールの変更を提案。レビューと承認は同じ会話内で行います。

手順の問題の場合、Fin Operatorは実行トレースを取得し、どのステップがどの順序でどのデータで実行されたかを正確に示し、手順定義と照合して根本原因を特定。


ヒント

  • 特定の会話リンクやIDを共有してターゲットを絞ったデバッグを。具体的であればあるほど、Fin Operatorは問題を速やかに診断できます。

  • パターン分析には調査内容ではなく症状を記述してください。「返品に関する問い合わせがエスカレーションされている」は「返品関連会話のエスカレーショントリガーを確認する」より良いです。Fin Operatorに適切な調査経路を判断させましょう。

  • 何が問題か分からない場合は単一の会話から始めてください。Fin Operatorがパターンを特定したら、同じ問題が他の会話にもあるか確認を依頼できます。

  • Fin Operatorは実際のデータと照合して主張を検証します。「ステップ3がスキップされた」と言った場合、それが本当に起こったかを確認してから説明を作成します。

こちらの回答で解決しましたか?