Extraction de texte à partir d'une image Action de déclenchement

:::(Info) (Bêta ouverte) Les actions de déclenchement de Frontline Copilot sont actuellement en bêta ouverte. Contactez copilot@tulip.co si vous souhaitez rejoindre la version bêta. :: ::::(Warning) (Beta Disclaimer) L'utilisation des versions bêta proposées par Tulip est facultative et se fait à vos risques et périls. En raison de la nature non testée/non éprouvée des versions Beta, elles sont fournies "en l'état", "telles que disponibles" et sans garantie. Cela signifie que toutes les garanties, indemnités et autres obligations de Tulip en vertu des conditions de service ou de la MSA ne s'appliquent pas aux versions Bêta. * Frontline Copilot est puissant ! Nous vous aiderons à vous guider, mais vous êtes en fin de compte responsable de l'impact de ce que vous construisez * Nous nous réservons le droit de désactiver tous les déclencheurs de Copilot à tout moment si nous remarquons quelque chose d'inattendu * Nous nous réservons le droit de limiter les déclencheurs de Copilot pendant la durée de la version bêta si et selon les besoins * Vous ne serez pas facturé pour l'utilisation des déclencheurs de Copilot pendant le programme. Vous disposerez de trois mois après la fin du programme pour décider de poursuivre ou non l'utilisation de la fonctionnalité.
* A l'avenir, nous pourrons mettre en place une tarification basée sur l'utilisation pour les fonctionnalités de la version bêta.
:: :

L'action d'extraction de texte à partir d'une image extrait le texte d'une image sur la base d'une requête. Une autre façon de décrire cette action est la suivante : "Reconnaissance optique de caractères (OCR) basée sur une requête" ou "Extraire du texte d'une image en le demandant".

Le déclencheur ne renvoie toujours que le texte effectivement présent dans l'image. Il n'ajoutera pas d'informations supplémentaires ni d'interprétation. Cela le rend très puissant pour transférer des données du monde physique au monde numérique.

Exemples de cas d'utilisation :

• Intégrer les données d'un bon de commande provenant d'un fournisseur externe. Oubliez le transfert manuel du numéro de commande à 14 caractères d'une facture fournisseur dans votre WMS, combinez une simple application et "Extraire du texte d'une image" pour extraire ces données en quelques secondes.
• Numériser les formulaires papier. Les données contenues dans les formulaires papier existants sont encore plus précieuses lorsqu'elles peuvent être accédées dans les applications Tulip. Les actions "Extraire le texte de l'image" sont un excellent moyen de faire le lien entre le monde physique et le monde numérique.
• Travaillez avec des textes dans des langues étrangères à vos opérateurs, de manière fiable. Le monde de la fabrication est global, donnez à vos opérateurs des super-pouvoirs en combinant les actions "Extraire le texte de l'image" et "Traduire" pour transformer les informations papier en quelque chose sur lequel vos opérateurs peuvent agir.

Exemple de déclencheur

Utiliser une application mobile pour prendre une photo de l'étiquette d'un produit afin d'obtenir le numéro de lot.

| Image | Déclencheur | Résultat | --- | --- | --- | | | {height="" width="400"} | {height="" width="400"} | 11EP8F4WA58CCX |

Extraire une valeur d'une image

Entrées et sorties

L'action de déclenchement a deux entrées, l'image d'entrée et la requête, et une sortie, le texte extrait.

Entrée : Image d'entrée

Il s'agit de l'image à partir de laquelle le texte doit être extrait. Elle peut provenir du widget d'entrée de la caméra, de Tulip Vision ou de systèmes externes.

| L'image peut provenir du widget d'entrée de la caméra, de Tulip Vision ou de systèmes externes.

Entrée : Requête

Il s'agit de la requête utilisée pour extraire le texte de l'image ou du document.

Meilleures pratiques en matière d'interrogation : * Dans la mesure du possible, utilisez des mots du document. Cela est particulièrement utile pour les acronymes et les abréviations (par exemple, SN, ID, SSN, numéro de lot, etc.). Les actions de déclenchement d'extraction de texte prennent en charge des requêtes moins complexes que les actions de déclenchement de réponse à une question à partir de données/documents* Ex. Grande entrée : "Qui est le fournisseur ?" * Ex. Mauvaise entrée : "La spécification de l'emplacement de l'information peut également s'avérer utile (par exemple, "Quel est le numéro de référence sur le fond ?").

| Type de données pris en charge | --- | --- | Entrée | Texte |

Sortie : Texte extrait

Il s'agit du texte qui a été extrait de l'image en fonction de la requête.

| Il s'agit du texte qui a été extrait de l'image en fonction de la requête.

Extraire des valeurs d'une image/d'un document

:::(Warning) (Remarque) L'extraction de valeurs à partir de documents est une opération relativement lente. Nous limitons les documents à 10 pages pour limiter le temps d'exécution.
:: :

Extraire des valeurs d'une image/d'un document fonctionne de la même manière qu'Extraire des valeurs d'une image, mais prend en charge un tableau de questions. Cette opération sera nettement plus performante que l'exécution de l'action de déclenchement "Extraire la valeur d'une image".

Entrée : Image/document d'entrée

Il s'agit de l'image à partir de laquelle le texte doit être extrait. Elle peut provenir du widget d'entrée de la caméra, de Tulip Vision ou de systèmes externes. Pour les fichiers, elle peut être définie de manière statique, saisie à l'aide du widget de saisie de fichiers, ou les fichiers de référence sont stockés dans les tableaux.

| Type de données pris en charge : --- | --- | Entrée : URL de l'image : - - - - - - - - -.

Entrée : Requête

Il s'agit de la requête utilisée pour extraire le texte de l'image. Il doit s'agir d'un tableau ou d'une liste de valeurs de texte.

| Il doit s'agir d'un tableau ou d'une liste de valeurs de texte.

Sortie : Texte extrait

Il s'agit du texte extrait de l'image en fonction de la requête.

| Il s'agit du texte qui a été extrait de l'image en fonction de la requête. Chaque élément aura un attribut "Question" et un attribut "Réponse".

Extraire tout le texte d'une image/d'un document

Dans certains cas, le paradigme clé:valeur des actions de déclenchement d'extraction de valeur n'a pas de sens pour votre cas d'utilisation. La lecture de toutes les données d'une image offre une flexibilité presque infinie en ce qui concerne les problèmes qui peuvent être résolus par Copilot. Les actions de déclenchement "Extraire tout le texte" vous offrent cette flexibilité.

Entrée : Image/document d'entrée

Il s'agit de l'image à partir de laquelle le texte doit être extrait. Elle peut provenir du widget d'entrée de la caméra, de Tulip Vision ou de systèmes externes. Pour les fichiers, elle peut être définie de manière statique, saisie avec le widget de saisie de fichier, ou les fichiers de référence sont stockés dans les tableaux.

| Type de données : --- | | --- | Entrée : URL de l'image ou URL du fichier : - - - - - - -.

Sortie : Texte extrait

Il s'agit de l'ensemble du texte trouvé sur l'image ou le document en question. Les documents renvoient un tableau de données, chaque élément représentant le texte d'une page du document fourni.

| Les documents renvoient un tableau de données, chaque élément représentant le texte d'une page du document fourni. (pour les documents) Liste de texte

Cas limites

Pas d'image d'entrée et/ou pas de requête fournie

Si aucune image d'entrée ou aucune requête n'est fournie à l'action de déclenchement, l'application affichera l'erreur système suivante :Votre entrée ou votre requête est vide.

Cela se produit dans tous les cas suivants : * L'image d'entrée et/ou la requête d'entrée n'ont pas de valeur assignée. L'image d'entrée et/ou la requête n'ont pas de valeur assignée, ce qui équivaut à "null" * La requête a une chaîne vide assignée.

Aucun résultat pour la requête

Si aucun résultat n'a pu être trouvé pour la requête, l'action déclencheuse renvoie un texte vide.

Limites

:::(Warning) (Avertissement) Les limites sont susceptibles d'être modifiées.
Actuellement, les limites suivantes existent pour les déclencheurs "Extraire du texte d'une image". Ces limites sont suivies au niveau de l'instance. Si ces limites sont dépassées, l'action du déclencheur "Extraire le texte d'une image" échoue.

Limite mensuelle : 10 000 requêtes/mois Limite de débit : 10 requêtes/minute