Verwenden Sie diesen Artikel, um eine Simulation einzurichten: Definieren Sie den simulierten Kunden, steuern Sie die Daten, die Fin zu Beginn des Gesprächs sieht, wählen Sie die Prüfungen und die Übergabe, die der LLM (Large Language Model) Richter zur Bewertung von Fin verwendet, oder erstellen Sie eine Simulation aus einem echten Gespräch.

So öffnen Sie den Simulationseditor

Um eine Simulation einzurichten, öffnen Sie sie und klicken Sie auf Bearbeiten oder klicken Sie auf Neue Simulation auf einer Bewertungsseite. Der Editor hat drei Abschnitte: den simulierten Kunden, die Daten, die Fin sieht, und wie der LLM-Richter Fin bewertet. Wenn Sie fertig sind, klicken Sie auf Speichern und dann auf Ausführen, um sie zu testen.

Der Simulationseditor mit drei Abschnitten: Simulierten Kunden definieren, Fin-Daten definieren und Verhalten des LLM-Richters definieren, plus Operator-, Menü-, Speichern- und Ausführen-Schaltflächen oben.

So definieren Sie den simulierten Kunden

Der Abschnitt Simulierten Kunden definieren richtet ein, mit wem Fin sprechen wird.

Titel (optional): Wenn Sie keinen hinzufügen, entspricht der Simulationsname der ersten Nachricht des Kunden.
Simulation als: der Kunde, mit dem Fin spricht, zum Beispiel Testkunde, und die Marke, angezeigt als Alle Marken.
Kanal: Chat oder E-Mail.
Simulationszeit: ein festes Datum und eine feste Uhrzeit, die die Simulation verwendet. Es wird die Zeitzone des Kunden verwendet oder GMT (Greenwich Mean Time), wenn keine eingestellt ist. Es beginnt als Nicht festgelegt.
Erste Nachricht des Kunden (erforderlich): das erste, was der simulierte Kunde zu Fin sagt.
Folgeanweisungen: was der Kunde weiß, was er teilt, wenn er gefragt wird, und wie er kommuniziert. Fin verwendet sie, um den Rest der Kundenseite des Gesprächs zu generieren, für eine realistische mehrstufige Simulation.

So wählen Sie aus, wer der simulierte Kunde ist

Standardmäßig läuft jede Simulation als Testkunde. Der Testkunde gehört zu allen Ihren Zielgruppen, sodass Fin alle Ihre Live-Inhalte, Anleitungen und Automatisierungen verwenden kann. Das ist nützlich, um zu prüfen, was Fin weiß, zeigt aber nicht, was ein bestimmter Kunde erleben würde.

Um die Zielgruppenansprache zu testen, simulieren Sie stattdessen einen echten Kunden oder lead aus Ihrem Workspace. Fin sieht dann nur die Inhalte, Anleitungen, Verfahren und Datenverbindungen, für die dieser Kunde qualifiziert ist, genau wie in einem Live-Gespräch.

Gehen Sie im Simulationseditor zu Simulierten Kunden definieren.
Klicken Sie neben Simulation als auf Testkunde und wählen Sie Kunde oder lead.
Um die Liste einzuschränken, wählen Sie eine Zielgruppe aus dem Dropdown-Menü unter dem Suchfeld. Standardmäßig wird Alle angezeigt und die users und leads in dieser Zielgruppe aufgelistet.
Suchen Sie nach Name, E-Mail oder Kunden-ID und wählen Sie die Person aus, mit der Fin sprechen soll.

Wenn die Simulation läuft, verwendet sie die Attribute, das Unternehmen und die Tags dieser Person. Um ein bestimmtes Szenario zu testen, überschreiben Sie diese in Fin-Daten definieren (optional) > Start-Attributwerte. Alles, was Sie nicht festlegen, verwendet die bestehenden Werte des Kunden.

Hinweis:

Zielgruppen, die Gesprächsattribute verwenden oder nach Marke filtern, können nicht ausgewählt werden, da die Mitgliedschaft von einem Gespräch abhängt, das noch nicht stattgefunden hat. Sie können trotzdem einen Kunden mit einer anderen Zielgruppe oder durch Suche in allen auswählen.
Die Zielgruppe wird nur verwendet, um einen Kunden zu finden, und wird nicht mit der Simulation gespeichert. Jeder Durchlauf prüft, zu welchen Zielgruppen der Kunde anhand seiner aktuellen Daten gehört, sodass sich die Ergebnisse ändern können.
Nur users und leads können ausgewählt werden. Besucher sind nicht verfügbar.
Wenn Sie wieder zu Testkunde (Standard) wechseln, wird die Zielgruppenansprache für diese Simulation deaktiviert.

Wie lange kann eine Simulation laufen und wie viele kann eine Bewertung enthalten?

Eine Simulation endet nach bis zu 6 Antworten von Fin oder früher, wenn Fin das Gespräch beendet, übergibt oder der simulierte Kunde das Gespräch beendet. Jede Bewertung unterstützt bis zu 50 Simulationen. Um mehr hinzuzufügen, löschen Sie vorhandene Simulationen oder legen Sie die zusätzlichen Simulationen in einer neuen Bewertung ab.

So definieren Sie die Daten, die Fin in einer Simulation sieht

Der optionale Abschnitt Fin-Daten definieren steuert die Daten, die Fin zu Beginn der Simulation sieht.

Start-Attributwerte: die Attributwerte, die Fin zu Beginn des Gesprächs sieht. Klicken Sie auf Attribut hinzufügen, um einen Wert festzulegen.
Datenantworten: In Simulationen geben Datenverbindungen immer ihre gespeicherte Testantwort zurück, niemals Live-Daten, unabhängig davon, wen Sie simulieren. Klicken Sie auf Antwort eines Connectors anpassen, um die Testantwort nur für diese Simulation zu ändern.

So definieren Sie, wie der LLM-Richter Fin bewertet

Der Abschnitt Verhalten des LLM-Richters definieren legt fest, wie Fins Antworten bewertet werden. Er besteht aus zwei Teilen: Simulationsprüfungen und Übergabe.

So fügen Sie eine Simulationsprüfung hinzu

Simulationsprüfungen beschreiben, was Fin sagen oder tun soll, um zu bestehen, falls überhaupt. Um eine hinzuzufügen, klicken Sie auf Hinzufügen und wählen Sie einen Prüftyp aus:

Fin-Antwort: Beschreiben Sie, was Fin während des Gesprächs sagen soll. Trennen Sie jede erwartete Antwort in ein eigenes Erfolgskriterium.
Verfahren ausgelöst: Fin hat ein bestimmtes Verfahren gestartet.
Verfahren gewechselt: Fin ist während des Gesprächs von einem Verfahren zu einem anderen gewechselt.
Fähigkeit: Fin hat eine bestimmte Fähigkeit verwendet.
Datenverbindung: Fin hat eine bestimmte Datenverbindung aufgerufen.

Das Hinzufügen-Menü unter Simulationsprüfungen geöffnet, listet Fin-Antwort, Verfahren ausgelöst, Verfahren gewechselt, Fähigkeit und Datenverbindung auf.

So legen Sie die erwartete Übergabe fest

Übergabe beschreibt, was am Ende des Gesprächs wahr sein soll. Wählen Sie eine dieser Optionen:

Keine Übergabe: Fin hat nicht an ein Team oder einen Workflow übergeben.
An Team oder Teammitglied übergeben: Fin konnte nicht antworten oder die Übergabeanleitung wurde angewendet.
An einen Workflow übergeben: Das Gespräch wird nach der Übergabe nicht simuliert.

Eine Fin-Antwort-Prüfung, die besagt, dass Fin Schritte oder Anweisungen zum Zurücksetzen eines Passworts gegeben hat, und das Übergabemenü geöffnet zeigt Keine Übergabe, An Team oder Teammitglied übergeben und An einen Workflow übergeben, jeweils mit kurzer Beschreibung.

Wichtig: Wenn eine Simulation keine Übergabeprüfung und keine Simulationsprüfungen hat, wird sie gegen eine Standard-Keine Übergabe-Prüfung bewertet und fällt durch, wenn Fin übergibt. Diese Standardprüfung wird im Editor nicht angezeigt, fügen Sie daher jeder Simulation eine explizite Übergabeprüfung hinzu.

Nachdem Sie eine Simulation eingerichtet haben, lesen Sie den Artikel Wie man Bewertungen durchführt und die Ergebnisse liest.

So erstellen Sie eine Simulation aus einem echten Gespräch

Um eine Simulation aus einem echten Kundengespräch zu erstellen, kopieren Sie einen Link zum Gespräch und bitten Operator, die Simulation zu erstellen. Sie müssen das Szenario nicht selbst eingeben.

Eine aus einem echten Gespräch erstellte Simulation heißt Replay. Ein Replay erfasst das Gespräch bis zu einer Fin-Antwort und friert die vorherigen Nachrichten ein. Jedes Mal, wenn es läuft, generiert Fin nur diese eine Antwort erneut, sodass Sie die Antwort testen, die Ihnen wichtig ist, und nicht ein sich bei jedem Lauf änderndes Gespräch. Das macht Replays zum schnellsten Weg, einen realen Fehler in einen Test zu verwandeln, den Sie behalten können.

So kopieren Sie einen Link zu einem Fin-Gespräch

Um einen Link zu einem Fin-Gespräch zu kopieren, öffnen Sie das Gespräch in der Fin-Gesprächsliste und verwenden Sie das Optionsmenü bei einer Nachricht.

Gehen Sie in Fin zu Analysieren > Gespräche und öffnen Sie das Gespräch, das Sie testen möchten.
Fahren Sie mit der Maus über eine Nachricht im Gespräch und klicken Sie dann auf das Optionsmenü (...), das daneben erscheint.
Klicken Sie auf Link kopieren.

Ein Fin-Gespräch aus der Liste Alle Gespräche geöffnet, mit geöffnetem Optionsmenü neben einer Nachricht. Das Menü listet Suchaktionen, Link kopieren (hervorgehoben) und Löschen auf.

Fügen Sie den Link in einen Chat mit Operator ein, wie im nächsten Abschnitt beschrieben.

So erstellen Sie eine Simulation mit Operator

Um eine Simulation mit Operator zu erstellen, bitten Sie ihn, eine Simulation für das Gespräch zu erstellen. Operator spielt die Eröffnungsnachricht des Kunden ab und schlägt die Simulation in der von Ihnen gewählten Bewertung vor.

Hinweis: Um Simulationen mit Operator zu erstellen, benötigen Sie das Pro-Add-on.

Schreiben Sie in einem Chat mit Operator Erstelle eine Simulation für dieses Gespräch und fügen Sie das Gespräch hinzu.
Beantworten Sie die zwei Fragen, die Operator stellt: In welche Bewertung soll die Simulation? und Wie soll Fin das Gespräch beenden? Wählen Sie zum Beispiel Fin beantwortet es selbst (keine Übergabe), wenn Fin das Gespräch ohne Übergabe lösen soll.
Überprüfen Sie die vorgeschlagene Simulation und klicken Sie dann auf In Fin Main veröffentlichen, um sie zur Bewertung hinzuzufügen.

Ein Chat zur Gesprächssimulation mit Operator. Die Anfrage lautet Erstelle eine Simulation für dieses Gespräch, gefolgt von einem Gesprächslink, und Operator lädt Werkzeuge zum Ausführen von Fin-Test-Szenarien und zur Untersuchung eines Gesprächs.

Bis Sie auf In Fin Main veröffentlichen klicken, bleibt die Simulation eine ausstehende Änderung und kann nicht ausgeführt werden.

Eine Replay-Simulation neben dem Operator-Chat angezeigt. Das Simulationsfenster zeigt das simulierte Gespräch mit der Eröffnungsnachricht des Kunden und einen Platzhalter mit dem Text Fin wird hier eine einzelne Antwort generieren, wenn diese Simulation läuft, eine Schaltfläche Quelle Gespräch anzeigen und eine Konfigurationsliste mit Kanal, Zeit, Benutzer und Marke. Oben erscheint eine Schaltfläche In Fin Main veröffentlichen.

So bearbeiten Sie eine Replay-Simulation mit Operator

Um eine Replay-Simulation zu bearbeiten, bitten Sie Operator, die Änderung im selben Chat vorzunehmen, zum Beispiel aktualisiere sie, um an einen Teamkollegen zu übergeben. Operator schlägt die Änderung der Simulationsprüfungen vor, und Sie klicken auf In Fin Main veröffentlichen, um sie zu speichern.

Eine Replay-Simulation neben dem Operator-Chat nach der Anfrage aktualisiere sie, um an einen Teamkollegen zu übergeben. Das Simulationsfenster zeigt die ausstehenden Änderungen unter Simulationsprüfungen: Die Übergabeprüfung ändert sich von Keine Übergabe zu Fin hat an Standardteam übergeben, und die Fin-Antwort-Prüfungen werden umgeschrieben, um zu erwarten, dass Fin anbietet, den Kunden mit einem Teamkollegen zu verbinden. Eine Leiste mit 1 ausstehender Änderung und eine Schaltfläche In Fin Main veröffentlichen erscheinen im Chat.

Was beinhaltet eine Replay-Simulation?

Nachdem Sie auf In Fin Main veröffentlichen geklickt haben, erscheint die Replay-Simulation in der von Ihnen gewählten Bewertung, benannt nach der Eröffnungsnachricht des Kunden. Öffnen Sie sie aus der Bewertung, um diese Teile zu sehen:

Eine Replay-Simulation, geöffnet aus ihrer Bewertung unter Fin AI Agent > Test > Bewertungen, nachdem sie mit Operator erstellt wurde. Der Abschnitt Simulierten Kunden definieren zeigt Simulation als, die Marke, Kanal ist Chat und Simulationszeit. Darunter listet der Anfangskontext des Gesprächs 3 Nachrichten aus dem Quellgespräch, einen gestrichelten Platzhalter für Fins einzelne Antwort und eine Schaltfläche Quelle Gespräch anzeigen, gefolgt vom Feld Folgeanweisungen. Operator-, Speichern- und Ausführen-Schaltflächen erscheinen oben.

Anfangskontext des Gesprächs: die Nachrichten des Quellgesprächs bis zur Nachricht des Kunden, mit einem Platzhalter, wo Fins einzelne Antwort erscheint, wenn die Simulation läuft.
Quelle Gespräch anzeigen: ein Link zum Originalgespräch.
Simulierten Kunden definieren: Simulation als, die Marke, der Kanal und die Simulationszeit.
Folgeanweisungen: optionale Anweisungen, was der Kunde nach Fins erster Antwort sagt. Das Hinzufügen erfordert mindestens eine Simulationsprüfung, damit es etwas gibt, woran Fin bewertet wird.

Hinweis: Einige Teile einer Replay-Simulation können nicht bearbeitet werden, einschließlich des Abschnitts Simulierten Kunden definieren. Sie stammen aus dem Quellgespräch. Um zu ändern, worauf Fin geprüft wird, bearbeiten Sie die Simulationsprüfungen, zum Beispiel indem Sie Operator bitten, sie zu aktualisieren.

So verwenden Sie ein Replay, um Fins Antwort zu korrigieren

Um eine Fin-Antwort mit einem Replay zu korrigieren, führen Sie es aus, ändern Sie Fins Konfiguration und führen Sie es erneut aus, bis es besteht:

Führen Sie das Replay aus, um zu sehen, wie Fin mit Ihrer aktuellen Konfiguration antwortet.
Nehmen Sie eine Änderung vor am Inhalt, der Anleitung, dem Verfahren oder der Fähigkeit hinter der Antwort. Um die Änderung vor der Veröffentlichung zu testen, machen Sie sie in einer Version.
Führen Sie das Replay erneut aus und vergleichen Sie die neue Antwort mit früheren Durchläufen, mithilfe des Dropdowns zur Durchlaufhistorie in der Simulation.
Fügen Sie Prüfungen hinzu, die definieren, was „korrigiert“ bedeutet, wie eine Fin-Antwort-Prüfung oder eine Übergabeprüfung, damit Sie ein klares Bestehen oder Durchfallen erhalten statt einer subjektiven Bewertung.
Behalten Sie das Replay, sobald es besteht. Es funktioniert jetzt als Regressionstest, führen Sie es nach zukünftigen Änderungen erneut aus, um sicherzustellen, dass die Korrektur hält.

Simulationen für Bewertungen einrichten