Coleta de dados para inspeção visual com o Vision

Crie um conjunto de dados de peças defeituosas para um aplicativo de verificação de qualidade de inspeção visual.

Os aplicativos de inspeção visual atuais podem utilizar o poder do aprendizado de máquina para automatizar o processo e substituir um inspetor humano. O custo de execução desses aplicativos é cada vez menor e sua precisão, em alguns casos, pode superar os níveis humanos.

No entanto, todos os aplicativos de aprendizado de máquina dependem de dados de treinamento. Assim como é necessário treinar uma pessoa para detectar defeitos, o modelo de detecção artificial precisa ser treinado. Fazemos isso coletando um conjunto (chamado de conjunto de dados) de imagens de peças fabricadas corretamente versus peças defeituosas. Para isso, criamos um aplicativo simples que você pode obter na Tulip App Library.

Pré-requisitos

Para começar a trabalhar com o aplicativo de coleta de dados, precisamos de:

• Uma câmera conectada a uma máquina Tulip Player
• Ter a câmera configurada no Tulip Vision
• Baixar o aplicativo Data Collection da Tulip App Library
• Atribuir o aplicativo à mesma máquina com a câmera conectada
• Alterar a atribuição da câmera no aplicativo para corresponder à câmera conectada
• Opcionalmente, configure Regiões na visualização da câmera para restringir a área de coleta

Você pode saber mais sobre a configuração de câmeras do Vision no artigo Introdução ao Vision.

Para saber como funcionam os gatilhos de instantâneos, que usamos neste aplicativo, consulte o artigo Usando o recurso de instantâneo.

Como é feito

Depois de executar o aplicativo no computador do Player, você será levado a uma exibição da câmera. Você também tem dois botões para anotar a visualização como Aprovado ou Reprovado. Clique nos botões para marcar a visualização atual como uma parte boa ou ruim e observe a tabela se enchendo de amostras. Colete pelo menos 10 imagens de cada classe: Aprovada e Reprovada.

Para verificar seu trabalho, vá até a tabela de coleta de dados e veja suas amostras e anotações.

Conclusão

Comece a coletar um conjunto de dados visuais de defeitos de peças em seu processo de fabricação para se preparar para a inspeção visual automática com aprendizado de máquina. Usando o aplicativo de coleta de dados, você cria seu conjunto de dados em uma tabela Tulip, que pode ser exportada (clique no ícone de reticências na tabela para fazer o download do conjunto de dados de imagens) para uso com um serviço de treinamento de modelos. Basta executar o aplicativo em uma máquina Player com uma câmera conectada e anotar as imagens.

Leitura adicional

• Primeiros passos com o Vision
• Uso do Vision Snapshots
• Usando o widget da câmera do Vision
• Uso de instantâneos do Vision com um serviço externo de OCR
• Usando o Azure CustomVision.ai com o Tulip para inspeção visual

Encontrou o que estava procurando?

Você também pode ir para community.tulip.co para postar sua pergunta ou ver se outras pessoas tiveram uma pergunta semelhante!