ビジョン入門

Tulipアプリにコンピュータ・ビジョン機能を組み込む方法を学ぶ

この記事で学べること

• ビジョン機能の概要と使用例
• カメラ設定のセットアップ方法
• カメラのビデオストリームをリモート表示する方法
• ステーションで複数のカメラ構成を使用する

visionを使用すると、コンピュータビジョン機能をTulipアプリに簡単に統合できます。ビジョンはTulip Playerに統合されており、追加のソフトウェアをインストールする必要はありません。

ビジョンはすべてのTulipアカウントで利用可能で、Tulip Playerの最新リリースに統合されています。

ビジョンの機能

• ビデオストリーム- 生産現場のカメラのビデオストリームを表示します。
• 変更検出 -あらかじめ定義されたリージョン内の変更を検出します。
• 治具検出-印刷されたマーカーを付けた治具を検出します。
• スナップショット-スナップショットを設定し、お好みの異なるモデルに画像を送信します。
• カラーディテクター-さまざまな色を検出できます。
• バーコードおよびデータマトリクス検出器 -ビジョンイベントとしてバーコードまたは2Dデータマトリクスバーコードを読み取ります。
• カスタムモデル- 製造現場での分類や物体検出のために、独自のカスタムモデルを作成し、トレーニングすることができます。
• IPカメラ- 製造現場でIPカメラを接続し、活用します。
• カメラの解像度- カメラの解像度を設定します。
• データセットとしてのチューリップテーブル- チューリップテーブルの貴重なデータを最新かつ最高のデータセットに変換します。

ビジョンの価値

• ステーションで何が起きているかをリアルタイムで確認することで、オペレーターを遠隔操作で支援。
• チェンジディテクターと ライトキットを組み合わせることで、高度なPick To Lightシステムを導入できます。
• Visionを通して検出された追加イベントによるタイムスタディの拡張
• バーコード、QRコード、データマトリクスの読み取りをリアルタイムで行い、治具がいつ現れたり消えたりしたかを知ることで、ステーションでの材料の到着と出発を追跡します。
• スナップショットをキャプチャすることで、品質問題の 追跡を改善したり、独自の品質検査を作成したりできます。
• Tulipコネクタやテーブルから外部プラットフォームにデータを送信して、カスタムモデルをすばやく作成できます。
• 監査やプロセスログ用に特定のインスタンスのビデオを確認することで、プロセスを改善する。

これらの使用例から、従来の目視検査システムとは対照的に、ビジョンはオペレーターを補強することに重点を置いていることがわかります。

こちらの短いデモをご覧ください：

必要条件

セットアップを始める前に、いくつかの前提条件があります：

• Tulip PlayerがWindows上で動作していること（最小バージョンは1.3.2）。
• ユーザーは、Station Supervisorロール以上を持っている必要があります。
• Change Detectorには以下のいずれかのカメラが必要です。Intel D415、Intel D435またはIntel D435i。(ビジョンに関するハードウェアの推奨を参照)
• Jig Detectorは どのUSBカメラでも動作します。
• USBカメラをTulipに接続する際は、必ずUSB 3.0ケーブルをコンピュータのUSB 3.0ポートに接続してください。

ビジョンのセットアップ

ビジョンを設定するには、まずカメラ構成を設定する必要があります。ショップフロア]タブをクリックし、[**ビジョン]**ページに移動します：

Create（作成）ボタンをクリックして、新しいカメラ構成を作成します。名前を付けて、Next（次へ）をクリックします。

次のステップでは、新しいカメラ構成をショップフロアのカメラに割り当てます。

Tulipアカウントで認証されたTulip Playerに接続されているすべてのカメラのリストが表示されます。リストが空の場合は、USBカメラを接続してください。

特定のカメラ設定に関連する省略記号アイコンをクリックして、カメラ設定を複製/編集することもできます。

特定のカメラを識別するために、カメラのプラグを抜いてから再び差し込んでください。最近接続されたカメラがリストの一番上に表示されます。

Assignをクリックし、Doneをクリックします。カメラ設定の新しいページが開きます：

デフォルトでは、カメラ設定が完了すると、割り当てられたステーションのオ ペレータは、プレーヤーで以下のモーダルでプロンプされます：

注：カメラ・ストリームの許可の詳細については、ビジョンとプライバシーを参照してください。

Tulip Playerで許可が与えられると、選択したカメラのビデオストリームが表示されます：

これでリージョンを作成し、Detectorを使用する準備ができました。チェンジディテクターとジグディテクターの設定方法については、以下の「参考資料」をご覧ください。

カメラ設定の高度な割り当て

カメラ設定 ] ページで行ったすべての割り当ての概要は、[ショップフロア] ページでも確認できます。この概要は、特にステーションで複数のカメラを同時に使用する場合に便利です：

ショップフロアページの右下には、**Interface（**表示装置）セクションがあります。(表示装置）セクションがあります：

このリストには接続されているすべてのカメラが表示されます。**表示 ]**ボタンをクリックして、カメラのライブストリームを直接表示します。

割り当てられたカメラを編集したり、カメラ設定を調整するには、**[ 変更 ]**ボタンをクリックします：

さらに読む

• 変更検出器の使用（必要なもの：Intel RealSense D415）
• 治具検出器を使用する
• カラー検出器の使用
• アプリでビジョンカメラウィジェットを使用する
• アプリでスナップショット機能を使用する
• 外部ビジョンサービスでのスナップショット機能の使用
• データマトリクス検出器とバーコード検出器を使用する
• ビジョンとプライバシー
• ビジョン用推奨ハードウェア