Начало работы с Vision

Узнайте, как включить функции компьютерного зрения в приложения Tulip.

В этой статье вы узнаете...

• Обзор функциональных возможностей компьютерного зрения и случаев его использования
• Как настроить конфигурацию камеры
• Как удаленно просматривать видеопоток с камеры
• Использование нескольких конфигураций камер на одной станции

С помощью Vision вы можете легко интегрировать функциональность компьютерного зрения в свои приложения Tulip. Vision интегрирован в Tulip Player и не требует установки дополнительного программного обеспечения.

Vision доступен для всех аккаунтов Tulip и интегрирован в новейшую версию Tulip Player.

Функциональные возможности Vision

• Видеопоток - просмотр видеопотока с камер в цеху.
• Детектор изменений - обнаружение изменений в заранее определенных областях.
• Jig Detector - обнаружение Jigs - объектов, к которым вы прикрепили напечатанные маркеры.
• Снимки - настройка снимков для отправки изображений на различные модели по вашему выбору.
• Детектор цвета - возможность обнаружения различных цветов.
• Детекторы штрихкодов и матриц - считывание штрихкодов или 2D-штрихкодов Datamatrix в качестве событий зрения.
• Пользовательские модели - создание и обучение собственной модели для классификации и обнаружения объектов в цеху.
• IP-камеры - подключение и использование IP-камер в цехе.
• Разрешение камеры - настройка разрешения камеры.
• Tulip Tables как набор данных - превратите ценные данные из таблиц Tulip в свой новейший и лучший набор данных.

Ценность Vision

• Удаленная помощь операторам за счет просмотра происходящего на участке в режиме реального времени
• Внедрите усовершенствованную систему Pick To Light, объединив детектор изменений с комплектом освещения
• Расширьте временные исследования за счет дополнительных событий, обнаруженных с помощью Vision
• Отслеживайте прибытие и убытие материала на станции, зная, когда появляется или исчезает оснастка, или фиксируя показания штрих-кода, qrcode или матрицы данных в режиме реального времени.
• Улучшайте отслеживание проблем с качеством или создавайте собственные инспекции качества, делая моментальные снимки.
• Быстрое создание пользовательских моделей путем отправки данных из коннектора или таблицы Tulip на внешнюю платформу.
• Улучшение процессов путем просмотра видеозаписей конкретных экземпляров для аудита или протоколирования процессов.

Эти примеры использования показывают, что, в отличие от традиционных систем визуального контроля, зрение нацелено на дополнение к работе ваших операторов.

Ознакомьтесь с этой короткой демонстрацией здесь:

Требования

Прежде чем приступить к настройке, необходимо отметить некоторые предварительные условия:

• Tulip Player должен работать под управлением Windows (минимальная версия - 1.3.2).
• Ваш пользователь должен иметь роль Station Supervisor или выше.
• Для работы детектора изменений требуется одна из следующих камер. Intel D415, Intel D435 или Intel D435i. (См. рекомендации по аппаратному обеспечению для Vision)
• Детектор джигов работает с любой USB-камерой.
• При подключении USB-камер к Tulip убедитесь, что вы используете кабели USB 3.0 только к четко обозначенным портам USB 3.0 на компьютере.

Настройка видения

Чтобы настроить видение, сначала необходимо настроить конфигурацию камеры. Перейдите на вкладку " Торговый зал " и перейдите на страницу " Видение ":

Нажмите на кнопку Create (Создать ), чтобы создать новую конфигурацию камеры. Дайте ей имя и нажмите кнопку Далее.

На следующем этапе вы назначите новую конфигурацию камеры камере в вашем цехе.

Здесь отображается список всех камер, подключенных к любому проигрывателю Tulip Player, аутентифицированному в вашей учетной записи Tulip. Если список пуст, подключите USB-камеру прямо сейчас.

Вы также можете дублировать/редактировать конфигурации камер, нажав на значок многоточия, относящийся к конкретной конфигурации камеры.

Чтобы определить конкретную камеру, вы можете отключить ее, а затем снова подключить. Самая последняя подключенная камера будет показана в верхней части списка.

Нажмите кнопку Назначить, а затем Готово. Откроется новая страница для конфигурации камеры:

По умолчанию после завершения конфигурации камеры оператору на назначенной станции будет предложено следующее модальное окно в проигрывателе:

Примечание: Дополнительную информацию о разрешениях на поток камер можно найти в разделе Видение и конфиденциальность.

После получения разрешения в Tulip Player появится видеопоток выбранной вами камеры:

Поздравляем - теперь вы готовы к созданию регионов и использованию детекторов. О том, как настроить детектор изменений и джиг-детектор, читайте в разделе "Дополнительная литература".

Расширенное назначение конфигураций камер

Обзор всех назначений, которые вы ранее сделали на странице "Конфигурация камеры", также можно найти на странице " Цех". Этот обзор может быть удобен, особенно если вы хотите одновременно использовать несколько камер на станции:

В правом нижнем углу страницы Shop Floor вы увидите раздел Interface (устройство отображения):

В этом списке отображаются все подключенные камеры. Нажмите на кнопку " Просмотр ", чтобы просмотреть прямую трансляцию с камеры.

Чтобы отредактировать назначенные камеры или настроить их конфигурацию, нажмите кнопку Изменить:

Дополнительное чтение

• Использование детектора изменений (требуется: Intel RealSense D415)
• Использование детектора джигов
• Использование детектора цвета
• Использование виджета камеры Vision в приложениях
• Использование функции моментального снимка в приложениях
• Использование функции моментального снимка с внешней службой Vision Service
• Использование детекторов матриц и штрихкодов
• Vision и конфиденциальность
• Рекомендации по аппаратному обеспечению для Vision