Zum Hauptinhalt springen

Wie versteht Fin Vision Bilder?

Fin Vision analysiert Bilder sofort, um Probleme zu diagnostizieren, Lösungen anzubieten oder wichtige Details zu erfassen, die das Gespräch voranbringen.

Fin Vision ist eine integrierte Funktion des Fin AI Agent, die es ermöglicht, Bilder von Kunden gesendet zu analysieren und zu verstehen – Screenshots, Fotos, Dokumente und mehr – direkt in Gesprächen über Chat, E-Mail, Zendesk tickets, Salesforce-Fälle usw.

Es ist keine Aktivierung oder Konfiguration erforderlich, und es entstehen keine zusätzlichen Kosten.

Fin Vision hilft dabei:

  • Probleme schneller zu diagnostizieren

  • Lange Erklärungen der Kunden zu vermeiden

  • Visuelle Inhalte wie Fehlermeldungen, Belege, Produktmängel und mehr zu extrahieren und zu verstehen


Wie Fin Vision funktioniert

Fin Vision verwendet multimodale große Sprachmodelle (LLMs), um Bilder zu verstehen. Wenn ein Kunde ein Bild sendet, verarbeitet Fin es mit einem vision-fähigen LLM, um eine strukturierte Textbeschreibung zu erzeugen. Diese Transkription umfasst:

  • Extrahierter Text (OCR)

  • UI-Elemente und zugehörige Beschriftungen

  • Referenznummern, Produktdetails und wichtige Highlights

  • Kontextbezogene Erkenntnisse aus dem Bild

Diese Beschreibung wird dann dem Chatverlauf hinzugefügt, wodurch Fin den visuellen Kontext in seine Antworten einbeziehen kann.

Mit diesem Verständnis kann Fin:

  • Ihre knowledge base effektiver durchsuchen

  • Aufgaben lösen, die von visuellen Informationen abhängen

  • Relevante, umsetzbare Antworten geben – genau wie bei schriftlichen Eingaben von Kunden

Hinweis:

  • Fin trainiert nicht auf oder analysiert Bilder innerhalb Ihrer Support-Inhalte (z. B. in Artikeln eingebettete Bilder). Es verarbeitet nur Bilder, die Kunden aktiv während Gesprächen senden.

  • Fin generiert keine Bilder, kann aber vorhandene Bilder aus Ihren Support-Inhalten in Antworten einbinden (Fin Image Answers).

  • Fin kann derzeit keinen ALT-Text in Bildern lesen.


Anwendungsbereiche von Fin Vision

Branche

Beispielanwendungen

FinTech

  • Fehlerbehebung: Screenshots von fehlgeschlagenen Überweisungen oder Anmeldeproblemen helfen Fin, gezielten Support zu bieten.

  • Überprüfung von Betrugswarnungen: Fin hilft, Phishing-Screenshots oder verdächtige Aktivitäten zu erkennen.

SaaS

  • Fehlerbehebung bei UI-Bugs: Kunden teilen Screenshots von Fehlern oder unerwartetem UI-Verhalten; Fin extrahiert Fehlermeldungen und bietet Lösungen an.

  • Onboarding-Hilfe: Fin kann Kunden durch unklare UI-Flows anhand geteilter Screenshots unterstützen.

  • Lizenzüberprüfung: Fin liest Lizenzschlüssel oder Kontonummern von hochgeladenen Rechnungen.

ecommerce

  • Rückgabe-/Erstattungsprüfung: Kunden laden Bilder von beschädigten oder falschen Produkten hoch; Fin bewertet die Berechtigung basierend auf Task instructions.

  • Versandprobleme: Kunden teilen Fotos von Verpackung oder Inhalt; Fin erkennt fehlende Artikel oder Verpackungsschäden.

  • Rechnungsverarbeitung: Fin extrahiert Bestellnummern und Daten von Belegen oder Lieferscheinen.

Gaming/Gambling

  • Bug reporting: Spieler senden Screenshots von Fehlern oder Abstürzen; Fin interpretiert die Bilder und protokolliert Probleme.

  • Auszahlungsprobleme: Kunden laden Screenshots von fehlgeschlagenen Transaktionen hoch; Fin zieht Zeitstempel, Beträge und Transaktions-IDs.

  • Wettscheinprüfung: Fin liest und bestätigt Wettschein-Details aus hochgeladenen Bildern.


Fin Vision optimal nutzen

Um Fin Vision optimal zu nutzen, kombinieren Sie es mit anderen Funktionen von Fin:

Verwendung mit Fin Guidance

Verwenden Sie Fin Guidance, um Fin anzuweisen, proaktiv nach Bildern zu fragen, wenn nötig. Sie können Fin auch anleiten, worauf es in einem Screenshot achten soll und welche nächsten Schritte basierend auf dem Ergebnis folgen.

Beispiele für Anweisungen:

  • Wenn ein Kunde einen Screenshot teilt, identifizieren Sie den Gerätetyp und schlagen Sie entsprechend die nächsten Schritte vor.

  • Wenn ein Nutzer einen Fehler oder ein anderes Problem mit unserer Website meldet, bitten Sie um einen Screenshot, der den Fehler zeigt, und um einen Link zur Seite, auf der er sich befindet, bevor Sie weitere Hilfe leisten.

  • Bitten Sie den Kunden, einen Zahlungsnachweis (Beleg) als Screenshot oder Foto bereitzustellen.


FAQs

Welche Bildformate unterstützt Fin Vision?

Fin Vision unterstützt JPG-, PNG-, GIF- und HEIC-Dateien, die von Kunden geteilt werden.

Wie geht Fin mit Datenschutz und sensiblen Informationen in Bildern um?

Fin ist auf Datenschutz ausgelegt. Die Vision-Modelle werden ausdrücklich angewiesen, keine persönlichen oder sensiblen Informationen aus Bildern zu extrahieren, wie Kreditkartennummern, CVVs oder Identifikationsdaten. Außerdem werden Bilder nur vorübergehend gespeichert und nach kurzer Zeit automatisch gelöscht.

Speichert Fin Bilder?

Bilder werden vorübergehend in einer sicheren Cloud-Umgebung gespeichert und nach kurzer Zeit automatisch gelöscht.

Müssen Kunden Bilder auf eine bestimmte Weise senden?

Nein, Kunden können Bilder im Chat oder per E-Mail hochladen oder einfügen. Fin erledigt den Rest.

Können Kunden mehrere Bilder senden?

Ja, Fin analysiert jedes Bild einzeln und nutzt den Kontext für die Antworten.

Erzeugt oder sendet Fin Bilder?

Fin generiert keine Bilder, kann aber vorhandene Bilder aus Ihren Support-Inhalten in Antworten einbinden (Fin Image Answers).

Hinweis: Fin verwendet VLM (Vision Language Model), um die Reihenfolge der Bilder so zu bestimmen, dass sie dem Fluss der Antwort entsprechen. Daher kann die Reihenfolge der Bilder beim Verweis auf einen Artikel abweichen.

Unterstützt Fin Vision mehrere Sprachen?

Ja, Fin kann Text aus Bildern in vielen Sprachen extrahieren, wobei die Genauigkeit von Klarheit und Komplexität abhängt.

Kann ich Fin Vision ausschalten?

Nein, Fin Vision ist integriert und kann nicht deaktiviert werden. Es arbeitet automatisch als Teil von Fins Verständnis der Gespräche.

Kann Fin HEIC-Bilder lesen?

Ja, Fin Vision kann High Efficiency Image Container (HEIC)-Dateien lesen und verarbeiten – das Standardfotoformat auf iPhones. Fin liest HEIC-Bilder und reagiert mit relevantem Kontext, genau wie bei jedem anderen unterstützten Bildformat.

Hat dies deine Frage beantwortet?