Aktion „Text aus Bild extrahieren“ auslösen

Prev Next

Die Trigger-Aktion „Text aus Bild extrahieren“ extrahiert Text aus einem Bild auf der Grundlage einer Abfrage. Man könnte dies auch als „abfragebasierte OCR (optische Zeichenerkennung)“ oder „Text aus einem Bild extrahieren, indem man danach fragt“ beschreiben.

Der Trigger gibt stets nur Text zurück, der tatsächlich im Bild vorhanden ist. Er fügt keine zusätzlichen Informationen oder Interpretationen hinzu. Dies macht ihn zu einem sehr leistungsstarken Werkzeug für die Übertragung von Daten aus der physischen in die digitale Welt.

Beispiel-Anwendungsfälle:

  • Daten aus einem Bestellformular eines externen Anbieters erfassen. Vergessen Sie die manuelle Übertragung dieser 14-stelligen Bestellnummer aus einer Lieferantenrechnung in Ihr WMS – kombinieren Sie eine einfache App mit „Text aus Bild extrahieren“, um diese Daten in Sekundenschnelle zu übernehmen.
  • Digitalisieren Sie Papierformulare. Die Daten auf bestehenden Papierbelegen sind noch wertvoller, wenn sie innerhalb von Tulip-Apps abgerufen werden können. „Text aus Bild extrahieren“-Aktionen sind ein hervorragendes Mittel, um eine Brücke zwischen der physischen und der digitalen Welt zu schlagen.
  • Arbeiten Sie zuverlässig mit Texten in Sprachen, die Ihren Mitarbeitern fremd sind. Die Fertigungswelt ist global – geben Sie Ihren Mitarbeitern Superkräfte, indem Sie die Trigger-Aktionen „Text aus Bild extrahieren“ und „Übersetzen“ kombinieren, um papierbasierte Informationen in etwas umzuwandeln, auf das Ihre Mitarbeiter reagieren können.

Beispiel für einen Trigger

Nutzen Sie eine mobile App, um ein Foto eines Etiketts auf einem Produkt aufzunehmen und so die Chargennummer zu ermitteln.

Bild Trigger Ergebnis
image.png{height="" width="400"} image.png{height="" width="400"} 11EP8F4WA58CCX

Wert aus Bild extrahieren

Ein- und Ausgänge

Die Trigger-Aktion verfügt über zwei Eingaben, „Eingabebild“ und „Abfrage“, sowie eine Ausgabe, den extrahierten Text.

Eingabe: Eingabebild

Dies ist das Bild, aus dem der Text extrahiert werden soll. Es kann vom Kamera-Eingabe-Widget, von Tulip Vision oder von externen Systemen stammen.

Unterstützter Datentyp
Eingabe Bild-URL

Eingabe: Abfrage

Dies ist die Suchanfrage, die zum Extrahieren des Textes aus dem Bild oder Dokument verwendet wird.

Bewährte Vorgehensweisen für Abfragen:* Verwenden Sie nach Möglichkeit Wörter aus dem Dokument. Dies ist besonders hilfreich bei Akronymen und Abkürzungen (z. B. SN, ID, SSN, Lot-Nr. usw.). Die Trigger-Aktionen zum Extrahieren von Text unterstützen weniger komplexe Abfragen als die Trigger-Aktionen „Frage aus Daten/Dokument beantworten“. * Beispiel für eine gute Eingabe: „Wer ist der Lieferant?“ * Beispiel für eine schlechte Eingabe: „Was glaubst du, wer uns das geschickt haben könnte?“* Die Angabe des Ortes, an dem sich die Informationen befinden, kann ebenfalls hilfreich sein (z. B. „Wie lautet die Referenznummer unten?“)

Unterstützte Datentypen
Eingabe Text

Ausgabe: extrahierter Text

Dies ist der Text, der basierend auf der Abfrage aus dem Bild extrahiert wurde.

Unterstützter Datentyp
Ausgabe Text

Werte aus Bild/Dokument extrahieren

Note

Extracting values from documents is a relatively slow operation. We limit documents to 10 pages to limit execution time.

„Werte aus Bild/Dokument extrahieren“ funktioniert genau wie „Wert aus Bild extrahieren“, unterstützt jedoch eine Reihe von Fragen. Dies ist deutlich leistungsfähiger als die Ausführung der Trigger-Aktion „Wert aus Bild extrahieren“.

Eingabe: Eingabebild/-dokument

Dies ist das Bild, aus dem der Text extrahiert werden soll. Es kann aus dem Kamera-Eingabe-Widget, von Tulip Vision oder aus externen Systemen stammen. Bei Dateien kann dies statisch festgelegt, über das Datei-Eingabe-Widget eingegeben oder auf in Tabellen gespeicherte Dateien verwiesen werden.

Unterstützte Datentypen
Eingabe Bild-URL

Eingabe: Abfrage

Dies ist die Abfrage, die zum Extrahieren des Textes aus dem Bild verwendet wird. Dabei sollte es sich um ein Array bzw. eine Liste von Textwerten handeln.

Unterstützter Datentyp
Eingabe Textliste

Ausgabe: extrahierter Text

Dies ist der Text, der anhand der Abfrage aus dem Bild extrahiert wurde.

Unterstützter Datentyp
Ausgabe Objekt-Array. Jedes Element verfügt über die Attribute „Frage“ und „Antwort“.

Den gesamten Text aus einem Bild/Dokument extrahieren

In manchen Fällen ist das Schlüssel-Wert-Paradigma der Trigger-Aktionen zum Extrahieren von Werten für Ihren Anwendungsfall nicht sinnvoll. Das Auslesen aller Daten aus einem Bild bietet nahezu unbegrenzte Flexibilität hinsichtlich der Probleme, die von Copilot gelöst werden können. Die Trigger-Aktionen „Gesamten Text extrahieren“ bieten Ihnen diese Flexibilität.

image.png

Eingabe: Eingabebild/-dokument

Dies ist das Bild, aus dem der Text extrahiert werden soll. Es kann aus dem Kamera-Eingabe-Widget, von Tulip Vision oder aus externen Systemen stammen. Bei Dateien kann dies statisch festgelegt, über das Datei-Eingabe-Widget eingegeben oder auf in Tabellen gespeicherte Dateien verwiesen werden.

Unterstützter Datentyp
Eingabe Bild-URL oder Datei-URL

Ausgabe: extrahierter Text

Dies ist der gesamte Text, der auf dem jeweiligen Bild oder Dokument zu finden ist. Bei Dokumenten wird ein Datenarray zurückgegeben, wobei jedes Element den Text einer Seite des bereitgestellten Dokuments darstellt.

Unterstützter Datentyp
Ausgabe (für Bilder) Text. (für Dokumente) Textliste

Sonderfälle

Kein Eingabebild und/oder keine Abfrage angegeben

Wenn der Trigger-Aktion kein Eingabebild oder keine Suchanfrage bereitgestellt wird, zeigt die App den folgenden Systemfehler an:Ihre Eingabe oder Suchanfrage ist leer

Dies tritt in allen folgenden Fällen auf:* Dem Eingabebild und/oder der Suchanfrage ist kein Wert zugewiesen. Dies entspricht „null“.* Der Suchanfrage ist eine leere Zeichenkette zugewiesen.

Kein Ergebnis für die Suchanfrage

Wenn für die Suchanfrage kein Ergebnis gefunden werden konnte, gibt die Trigger-Aktion einen leeren Text zurück.

Beschränkungen

Supported languages

The following languages are the only ones supported for documents where values are being extracted: English, Spanish, Italian, Portuguese, French, German.

Diese Limits werden auf der Ebene „ Instance “ erfasst. Wenn diese Limits überschritten werden, schlägt die Trigger-Aktion „Text aus Bild extrahieren“ fehl.

Für Trigger des Typs „Text aus Bild extrahieren“ gelten folgende Beschränkungen:

Beschränkung
Bildgröße 5 MB
Monatliches Limit 10.000 Anfragen pro Monat
Ratenbegrenzung 10 Anfragen pro Minute
Anzahl der extrahierten Werte 15 extrahierte Werte pro Aktion

Weitere Beschränkungen, einschließlich der Kontonutzung, finden Sie unter „Nutzung und Preise von Tulip AI“.

{{snippet.Haben Sie gefunden, wonach Sie gesucht haben?}}