Erste Schritte mit Vision

Lernen Sie, wie Sie Computer Vision-Funktionalitäten in Ihre Tulip-Anwendungen einbauen können

In diesem Artikel werden Sie lernen...

• Einen Überblick über die Funktionalitäten und Anwendungsfälle von Vision
• Wie man eine Kamera-Konfiguration einrichtet
• Wie Sie den Videostrom einer Kamera aus der Ferne betrachten können
• Mehrere Kamerakonfigurationen an einer Station verwenden

Mit Vision können Sie auf einfache Weise Computer Vision-Funktionalität in Ihre Tulip-Anwendungen integrieren. Vision ist in den Tulip Player integriert und erfordert keine zusätzliche Software-Installation.

Vision ist für alle Tulip-Konten verfügbar und in der neuesten Version des Tulip Players integriert.

Vision's Funktionalitäten

• Videostream - Betrachten Sie den Videostream der Kameras in Ihrer Werkstatt.
• Änderungsdetektor - Erkennen von Änderungen in vordefinierten Regionen.
• Jig Detector - erkennt Jigs - Objekte, an denen Sie gedruckte Markierungen angebracht haben.
• Schnappschüsse - Einrichtung von Schnappschüssen, um Bilder an verschiedene Modelle Ihrer Wahl zu senden.
• Farbdetektor - kann verschiedene Farben erkennen.
• Barcode- und Datamatrix-Detektoren - Einlesen von Barcodes oder 2D-Datamatrix-Barcodes als Vision-Ereignisse.
• Benutzerdefinierte Modelle - Erstellen und Trainieren Ihres eigenen benutzerdefinierten Modells für die Klassifizierung und Objekterkennung in Ihrer Werkstatt.
• IP-Kameras - Anschluss und Nutzung von IP-Kameras in Ihrer Werkstatt.
• Kameraauflösung - Einstellung der Kameraauflösung.
• Tulip-Tabellen als Datensatz - machen Sie Ihre wertvollen Daten aus Tulip-Tabellen zu Ihrem neuesten und besten Datensatz.

Der Wert von Vision

• Fernunterstützung des Bedienpersonals durch eine Echtzeitansicht der Vorgänge an einer Station
• Implementieren Sie ein fortschrittliches Pick-to-Light-System, indem Sie den Änderungsdetektor mit dem Light Kit kombinieren
• Erweitern Sie Ihre Zeitstudien mit zusätzlichen Ereignissen, die durch Vision erkannt werden
• Verfolgen Sie die Ankunft und den Abgang von Material an einer Station, indem Sie wissen, wann eine Vorrichtung erscheint oder verschwindet, oder indem Sie Barcode-, QR-Code- oder Datamatrix-Messwerte in Echtzeit erfassen.
• Verbessern Sie die Verfolgung von Qualitätsproblemen oder erstellen Sie Ihre eigenen Qualitätsinspektionen, indem Sie Schnappschüsse erfassen.
• Erstellen Sie schnell benutzerdefinierte Modelle, indem Sie Daten von einem Tulip-Konnektor oder einer Tabelle an eine externe Plattform senden.
• Verbessern Sie Prozesse, indem Sie Videos von bestimmten Instanzen für Audit- oder Prozessprotokolle überprüfen.

Diese Anwendungsbeispiele zeigen, dass sich die Bildverarbeitung im Gegensatz zu herkömmlichen visuellen Inspektionssystemen darauf konzentriert, Ihre Mitarbeiter zu unterstützen.

Sehen Sie sich diese kurze Demo hier an:

Anforderungen

Bevor Sie mit der Einrichtung beginnen, sind einige Voraussetzungen zu beachten:

• Der Tulip Player muss unter Windows laufen (Mindestversion 1.3.2).
• Ihr Benutzer muss eine Station Supervisor-Rolle oder eine höhere haben.
• Der Änderungsdetektor benötigt eine der folgenden Kameras. Intel D415, Intel D435 oder Intel D435i. (Siehe Hardware-Empfehlungen für Vision)
• Der Jig Detector funktioniert mit jeder USB-Kamera.
• Wenn Sie USB-Kameras an Tulip anschließen, achten Sie bitte darauf, dass Sie nur USB 3.0-Kabel an die deutlich gekennzeichneten USB 3.0-Anschlüsse des Computers verwenden.

Vision einrichten

Um Vision einzurichten, müssen Sie zuerst eine Kamerakonfiguration einrichten. Klicken Sie auf die Registerkarte Shop Floor, und navigieren Sie zur Seite Vision:

Klicken Sie auf die Schaltfläche Erstellen, um eine neue Kamerakonfiguration zu erstellen . Geben Sie ihr einen Namen, und klicken Sie auf Weiter.

Im nächsten Schritt weisen Sie die neue Kamerakonfiguration einer Kamera in Ihrer Werkstatt zu.

Es wird eine Liste aller Kameras angezeigt, die an einen Tulip Player angeschlossen sind, der an Ihrem Tulip-Konto authentifiziert ist. Wenn die Liste leer ist, schließen Sie bitte jetzt eine USB-Kamera an.

Sie können auch Kamerakonfigurationen duplizieren/bearbeiten, indem Sie auf das Ellipsen-Symbol klicken, das zu einer bestimmten Kamerakonfiguration gehört.

Um eine bestimmte Kamera zu identifizieren, sollten Sie sie aus- und wieder einstecken. Die zuletzt angeschlossene Kamera wird oben in der Liste angezeigt.

Klicken Sie auf Zuordnen und dann auf Fertig. Es wird eine neue Seite für Ihre Kamerakonfiguration geöffnet:

Sobald Ihre Kamerakonfiguration abgeschlossen ist, wird der Bediener der zugewiesenen Station standardmäßig mit dem folgenden Modal im Player aufgefordert:

Hinweis: Weitere Informationen zu den Berechtigungen für Kamera-Streams finden Sie unter Vision und Datenschutz

Sobald die Genehmigung im Tulip Player erteilt wurde, erscheint der Videostream der von Ihnen ausgewählten Kamera:

Herzlichen Glückwunsch - Sie sind nun bereit, Regionen zu erstellen und Detektoren zu verwenden . Wie Sie einen Änderungsdetektor und einen Jig-Detektor einrichten können, erfahren Sie im Abschnitt Weitere Informationen unten.

Erweiterte Zuweisung von Kamerakonfigurationen

Eine Übersicht über alle Zuordnungen, die Sie zuvor auf der Seite Kamerakonfiguration vorgenommen haben, finden Sie auch auf der Seite Werkstatt. Diese Übersicht ist besonders praktisch, wenn Sie mehrere Kameras gleichzeitig an einer Station verwenden möchten:

Unten rechts auf der Shop Floor-Seite sehen Sie den Abschnitt Interface (Anzeigegerät):

In dieser Liste werden alle angeschlossenen Kameras angezeigt. Klicken Sie auf die Schaltfläche Anzeigen, um den Live-Stream der Kamera direkt anzuzeigen.

Um die zugewiesenen Kameras zu bearbeiten oder ihre Kamerakonfiguration anzupassen, klicken Sie auf die Schaltfläche Ändern:

Weitere Informationen

• Verwenden des Änderungsdetektors (Erfordert: Intel RealSense D415)
• Verwenden des Jig-Detektors
• Verwendung des Farbdetektors
• Verwenden des Vision-Kamera-Widgets in Apps
• Verwenden der Schnappschuss-Funktion in Apps
• Verwendung der Snapshot-Funktion mit einem externen Vision-Dienst
• Verwendung der Datamatrix- und Barcode-Detektoren
• Vision und Datenschutz
• Hardware-Empfehlungen für Vision