Zum Hauptinhalt springen

Die Fin AI Engine™

Erfahren Sie mehr über die Technologie hinter Intercoms AI-Agent – Fin.

Die Fin AI Engine™ ermöglicht es Fin, jede Anfrage zu verfeinern, jede Antwort zu optimieren und die Qualität jeder Antwort zu validieren. Dadurch ist es der einzige AI-Agent, der branchenweit hohe Auflösungen mit branchenweit niedrigen Halluzinationen ausbalancieren kann.

Viele AI-Agenten können entweder auf hohe Auflösungen oder niedrige Halluzinationen optimieren, haben aber Schwierigkeiten, beides zu erreichen. Das liegt daran, dass sie oft einfach eine „Hülle“ um ein generatives Large Language Model (LLM) legen, anstatt darauf aufzubauen, weil es billiger und einfacher ist.

Dieser Ansatz ignoriert jedoch die Neigung von LLMs zu halluzinieren und Ihre Kunden mit falschen oder irrelevanten Informationen zu konfrontieren. Ohne ein System wie das von Intercom, das die Eingaben und Ausgaben des LMM verfeinert, kann ein AI-Agent nicht effektiv auf Genauigkeit und Zuverlässigkeit optimiert werden.


Wie es funktioniert

Phase 1 - Anfrage verfeinern

Um die Genauigkeit einer Antwort, die ein LLM generiert, zu optimieren, müssen die Eingaben, die das LLM erhält, für das Verständnis verfeinert werden. Je klarer und verständlicher die Anfrage, desto besser das Ergebnis.

Oft schreiben Kunden im Kundenservice an den Support, ohne ihre Anfrage vollständig zu erklären oder zu kontextualisieren. Um dieses Problem zu lösen, wurde die Fin AI Engine™ entwickelt, um die Eingaben, die an das LLM gesendet werden, zu verfeinern. So wird sichergestellt, dass jede Kundenanfrage in Bezug auf Bedeutung und Kontext optimiert ist, damit das LLM die bestmögliche Chance hat, eine genaue Antwort zu liefern.

Außerdem führt die Fin AI Engine™ Prüfungen durch, um zu sehen, ob eine Workflows-Automatisierung oder eine Custom Answer basierend auf dem Thema und Kontext der Kundenanfrage ausgelöst werden sollte, sowie Sicherheitsprüfungen, um alles herauszufiltern, was Fin nicht beantworten sollte.

  1. Prüfung auf Sicherheit und Relevanz

    1. Die AI Engine führt eine umfassende Prüfung einer Kundenanfrage durch, um alles herauszufiltern, was Fin nicht beantworten sollte, wie Anfragen nach vertraulichen Informationen, irrelevante Fragen, böswillige Akteure, Datenerfassung und mehr.

  2. Anfrageverständnis optimieren

    1. Die AI Engine optimiert die Kundenanfrage, um sie für das LLM besser durchsuchbar und verständlich zu machen. Die AI Engine führt viele Prüfungen durch und wendet die richtige Optimierung an, je nachdem, ob die Absicht und das Thema der Anfrage klar sind, ob die Anfrage umformuliert werden muss und vieles mehr.

  3. Prüfung auf Workflows-Automatisierung

    1. Die Kundenanfrage wird auf das Vorhandensein vorab konfigurierter Bedingungen geprüft, die eine bestimmte Automatisierung auslösen (z. B. eine Beschwerde).

  4. Prüfung auf Custom Answer

    1. Eine zusätzliche Prüfung wird durchgeführt, um zu erkennen, ob für die Kundenanfrage eine vorab konfigurierte Custom Answer benötigt wird.

Phase 2 - Antwort generieren

Sobald eine Anfrage geprüft und optimiert wurde, besteht die nächste Stufe darin, eine Antwort mit dem LLM zu generieren. Für diese Aufgabe wurde die Fin AI Engine™ entwickelt, um eine maßgeschneiderte und verbesserte Retrieval Augmented Generation-Architektur (kurz RAG) zu verwenden.

RAG ist ein Prozess, bei dem relevante Informationen aus einer Datenquelle abgerufen und mit dem Prompt eines Nutzers kombiniert werden, bevor sie an ein LLM weitergegeben werden. Dieser zusätzliche Kontext hilft, die Ausgabe des Modells zu verbessern, indem das Basiswissen erweitert und so das Risiko von Ungenauigkeiten wie Halluzinationen reduziert wird.

Die Anwendung von RAG bei Intercom ist sehr einzigartig. Die AI-Gruppe bei Intercom hat stark in die Optimierung unserer einzigartigen Anwendung von RAG investiert und testet kontinuierlich sowohl die Genauigkeit des LLM als auch die einzelnen Schritte von RAG, um die Gesamtleistung zu verbessern.

  1. Optimierung der Informationsbeschaffung:

    1. Die AI Engine durchsucht die verfügbaren Informationen, Aktionen oder Daten und bestimmt, was für die Art der Anfrage am relevantesten ist und was zur Lösung der Frage oder des Problems benötigt wird. Informationsquellen umfassen:

      1. Inhalte – wie vergangene Intercom-Gespräche, help center-Artikel, PDFs und HTML/URLs, die als genaue und sichere Quellen genehmigt wurden.

      2. Daten – intern oder extern zu Intercom, einschließlich dynamischer Informationen, die Fin zur Personalisierung der Kundenerfahrung nutzen kann.

      3. Integrationen & Aktionen – bestimmen, ob aufgrund der Absicht der Kundenanfrage Aktionen in Drittanbietersystemen erforderlich sind.

  2. Integrieren und erweitern

    1. Die abgerufenen Informationen werden dann mit der optimierten Anfrage oder dem „Input“ integriert und erweitert. Dieser Schritt stellt sicher, dass das generative Modell Zugriff auf die relevantesten und aktuellsten Informationen hat, bevor es eine Antwort erzeugt. Der erweiterte Input ist so strukturiert, dass der Kontext und die Relevanz der abgerufenen Informationen erhalten bleiben, was es dem Modell erleichtert, sie zu verstehen und zu nutzen.

  3. Antwort generieren

    1. Klärung und Entambiguierung

      1. Wenn die Ausgabe des Modells nicht den Parametern der Fin AI Engine™ für Sicherheit entspricht, wird eine Antwort generiert, die den Kunden bittet, seine Anfrage zu klären. Dieser Entambiguierungsschritt hilft, Risiken wie Halluzinationen zu vermeiden, da die generierte Antwort kontextbezogen und auf den Fakten aus den verfügbaren Wissensressourcen und Supportinhalten Ihres Unternehmens basiert.

    2. Eine Aktion ausführen

      1. Wenn aufgrund der Nutzeranfrage und -absicht eine Aktion erforderlich ist, wird diese mit den notwendigen Informationen, Daten, Integrationen und Systemen ausgeführt.

    3. Antwort generieren

      1. Das generative Modell verwendet den erweiterten Input, um eine Antwort zu generieren. Durch die Einbeziehung der abgerufenen Informationen kann das Modell genauere, kontextuell relevantere und detailliertere Antworten liefern. Die generierte Antwort kann einer Nachbearbeitung unterzogen werden, um Klarheit, Kohärenz und Übereinstimmung mit der Nutzeranfrage sicherzustellen.

Phase 3 - Genauigkeit validieren

Im letzten Schritt des Prozesses führt die Fin AI Engine™ Prüfungen durch, um zu verstehen, ob die Ausgabe des LLM die notwendigen Genauigkeits- und Sicherheitsstandards für Antworten erfüllt. Es werden viele Prüfungen durchgeführt, die abdecken, ob genügend Vertrauen in die Antwort besteht, die Antwort genau genug ist und ob die Antwort ausreichend in der Realität verankert ist, um die Frage angemessen zu beantworten.

  1. Antwort validieren

    1. Vergleichen Sie die generierte Antwort mit der ursprünglichen Kundenanfrage.

    2. Bestimmen Sie, ob die generierte Antwort die Anfrage ausreichend beantwortet.

    3. Bestimmen Sie, ob die generierte Antwort auf dem Wissen Ihrer Wissensressourcen und Supportinhalte als Wahrheitsquelle basiert.

  2. Auf Kunden antworten

    1. Senden Sie die generierte Antwort über Fin an den Kunden zurück.


Engine-Optimierung

Um die Leistung der Engine zu kalibrieren und zu verbessern, verfügt die Fin AI Engine™ über fortschrittliche integrierte Werkzeuge, die helfen, die Antwortgenerierung, Effizienz, Präzision und Abdeckung zu optimieren.

Fin-Anpassung und -Kontrolle – Intercom hat Funktionen und Werkzeuge integriert, die users helfen, Fin anzupassen und zu steuern, wie Fin antwortet, was es tun kann, welche Informationen es verwenden darf und vieles mehr. Jedes dieser Elemente spielt eine Rolle dafür, wie gut Fin funktioniert. Je mehr Fin weiß, wie es etwas tun kann, desto mehr kann es tun und desto mehr können Sie Ihren Support mit menschlicher Qualität automatisieren.

AI-Analysen und Berichte – Die Fin AI Engine™ wurde entwickelt, um Analysen zur Effektivität jeder Phase des Antwortgenerierungsprozesses zu ermöglichen. Dies gibt der AI-Gruppe bei Intercom die Werkzeuge, die sie benötigen, um jede Phase des Prozesses und die Gesamtleistung zu verbessern. Vor jeder Änderung an der AI-Engine-Architektur wird eine rigorose Testphase durchgeführt, die berücksichtigt, wie sich jede kleine Änderung auf die Engine als Ganzes auswirkt. Außerdem bietet die AI Engine Intercom users Zugang zu vorgefertigten und anpassbaren Berichten, die helfen zu verstehen, wo Fin gut funktioniert und was verbessert werden kann.

AI-Empfehlungen – Die AI Engine bietet Empfehlungen zur kontinuierlichen Leistungsverbesserung im Laufe der Zeit. Dies reicht von der Identifizierung von Inhalten, die helfen könnten, Wissenslücken von Fin zu schließen, bis hin zur Hervorhebung von unterperformanten Inhalten, die weiter optimiert werden sollten, oder dem Vorschlag, Aktionen einzurichten, damit Fin mehr Anfragen für Kunden lösen kann.


Sicherheit und Schutz

Sich ausschließlich auf die generativen Fähigkeiten eines LLM zu verlassen, um ein Kundenproblem zu beantworten oder zu lösen, ist keine zuverlässige Methode, um Kunden zu bedienen. Ohne die richtigen Schutzmaßnahmen können LLMs anfällig für Manipulationen oder Halluzinationen sein, was sich auf Ihre Kunden auswirken könnte. Um Sicherheit und Zuverlässigkeit zu gewährleisten, wurde die Fin AI Engine™ mit strengen Sicherheitskontrollen in jeder Phase entwickelt. Wenn die notwendigen Sicherheitsparameter in einem der Schritte oder Phasen nicht erfüllt sind, informiert Fin den Kunden, dass die Anfrage nicht beantwortet werden kann, und eskaliert an den menschlichen Support.

Intercom hat modernste Sicherheitsmaßnahmen implementiert, um Fin gegen eine Vielzahl von LLM-Bedrohungen zu schützen, einschließlich der vom OWASP LLM Top 10 identifizierten. Durch konsequentes Testen verschiedener High-End-LLMs und den Einsatz rigoroser interner Kontrollen, Sicherheitsprotokolle und Schutzmaßnahmen kann Fin das höchste Sicherheits- und Zuverlässigkeitsniveau erreichen und potenzielle Einschränkungen und Bedrohungen vermeiden.

Das bedeutet, dass Sie und Ihre Kunden Fin’s Antworten immer als die sichersten, genauesten und zuverlässigsten aller AI-Agenten vertrauen können.

Erfahren Sie mehr über Fin’s Sicherheitsmaßnahmen auf trust.intercom.com.

Fin AI Sicherheit

Umfassender Überblick über die Sicherheitsmaßnahmen und Testprotokolle, die für Intercom’s Fin AI-Funktionen implementiert wurden, verfügbar hier.

Regionale Hosting

Fin AI Agent ist verfügbar auf US-, EU- und AU-gehosteten Workspaces.

Compliance

Intercom verfügt über internationale Akkreditierungen und Kontrollen, um den höchsten Standard an Sicherheit und Schutz zu gewährleisten, darunter:

  • ISO 27001, ISO27701, ISO 27018 und ISO42001

  • HIPAA-Konformität.

  • SOC 2 Bericht – SOC 2, Typ II Auditbericht, der Kontrollen speziell für Sicherheit, Verfügbarkeit und Vertraulichkeit abdeckt.

  • HDS-Zertifikat – Zertifizierung der Einhaltung des HDS-Referenzrahmens Version 1.1 (englische und französische Version)

  • Zusammenfassung des Penetrationstests – Zusammenfassung detaillierter Penetrationstests an Intercom’s Anwendung und Infrastruktur durch externe Sicherheitsexperten.

  • Cloud Security Alliance Bewertung – Sicherheits- und Datenschutz-Selbsteinschätzungen basierend auf der Cloud Controls Matrix und dem CSA-Verhaltenskodex für GDPR-Konformität.

Datenverwendung, -übertragung und -speicherung von Drittanbieter-LLMs

Kundendaten werden von LLM-Anbietern nicht für das Modelltraining verwendet. Alle an ein AI-Produkt übermittelten Daten werden zu einem Input, der zur Generierung eines Outputs verwendet wird (wie diese Begriffe in unseren zusätzlichen Produktbedingungen definiert sind).

Vollständige Details finden Sie in unserem rechtlichen und sicherheitstechnischen Leitfaden für AI-Produkte/-Funktionen (Sie müssen in Ihrem Intercom-Workspace angemeldet sein, um diesen Artikel zu sehen).

Hat dies deine Frage beantwortet?