Dados sintéticos com deep learning para inspeção de qualidade automática na indústria automóvel

Detalhes bibliográficos
Autor(a) principal: Azevedo, Miguel Neves Barriga Batalha
Data de Publicação: 2022
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
Texto Completo: http://hdl.handle.net/10362/152027
Resumo: Os avanços tecnológicos que surgiram com o paradigma da Indústria 4.0 renovaram o potencial disruptivo da inteligência artificial no setor da manufatura, construindo a era baseada em dados sobre conceitos como Sistemas Ciber-Físicos (SCF) e Internet of Things (IoT). No entanto, a disponibilidade de dados continua a ser um grande desafio para o sucesso destas soluções, principalmente no que diz respeito àquelas baseadas em abordagens de Deep Learning (DL). Especificamente na inspeção de qualidade de apli- cações de adesivos estruturais, regularmente encontrados no domínio automóvel, dados de defeitos com variedade, volume e qualidade suficientes são geralmente caros, demo- rados e ineficientes de se obter, prejudicando a viabilidade de tais abordagens devido à escassez de dados. Para atenuar este problema, é proposta uma nova abordagem para gerar dados de treino sintéticos para esta aplicação, aproveitando avanços recentes no treino de Generative Adversarial Networks (GANs) com dados limitados para melhorar o desempenho de métodos de inspeção automatizados baseados em DL, especialmente para conjuntos de dados desequilibrados. Os resultados preliminares numa célula piloto automotiva real mostram uma promessa nesta direção, com a abordagem sendo capaz de gerar imagens realistas de cordões adesivos e, consequentemente, modelos de deteção de objetos mostrando mean Average Precision (mAP) melhorada em diferentes limiares quando treinados no conjunto de dados aumentado. Para fins de reprodutibilidade, os pesos do modelo, configurações e dados englobados neste estudo são disponibilizados publicamente. Para além deste estudo foi realizada uma Application Programming In- terface (API) para facilitar a interação entre o cliente e o resultado final. Esta API tem como objetivo detetar os defeitos presentes nas imagens usadas como input e fornece um ficheiro de texto como output, que contém as coordenadas das caixas delimitadoras previstas pelo modelo.
id RCAP_4e0177c16bf79954a1a8adf9a72238d2
oai_identifier_str oai:run.unl.pt:10362/152027
network_acronym_str RCAP
network_name_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository_id_str 7160
spelling Dados sintéticos com deep learning para inspeção de qualidade automática na indústria automóvelData AugmentationGANsMachine Learning (ML)Inteligência Artificial (IA)imagens SintéticasAPIDomínio/Área Científica::Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e InformáticaOs avanços tecnológicos que surgiram com o paradigma da Indústria 4.0 renovaram o potencial disruptivo da inteligência artificial no setor da manufatura, construindo a era baseada em dados sobre conceitos como Sistemas Ciber-Físicos (SCF) e Internet of Things (IoT). No entanto, a disponibilidade de dados continua a ser um grande desafio para o sucesso destas soluções, principalmente no que diz respeito àquelas baseadas em abordagens de Deep Learning (DL). Especificamente na inspeção de qualidade de apli- cações de adesivos estruturais, regularmente encontrados no domínio automóvel, dados de defeitos com variedade, volume e qualidade suficientes são geralmente caros, demo- rados e ineficientes de se obter, prejudicando a viabilidade de tais abordagens devido à escassez de dados. Para atenuar este problema, é proposta uma nova abordagem para gerar dados de treino sintéticos para esta aplicação, aproveitando avanços recentes no treino de Generative Adversarial Networks (GANs) com dados limitados para melhorar o desempenho de métodos de inspeção automatizados baseados em DL, especialmente para conjuntos de dados desequilibrados. Os resultados preliminares numa célula piloto automotiva real mostram uma promessa nesta direção, com a abordagem sendo capaz de gerar imagens realistas de cordões adesivos e, consequentemente, modelos de deteção de objetos mostrando mean Average Precision (mAP) melhorada em diferentes limiares quando treinados no conjunto de dados aumentado. Para fins de reprodutibilidade, os pesos do modelo, configurações e dados englobados neste estudo são disponibilizados publicamente. Para além deste estudo foi realizada uma Application Programming In- terface (API) para facilitar a interação entre o cliente e o resultado final. Esta API tem como objetivo detetar os defeitos presentes nas imagens usadas como input e fornece um ficheiro de texto como output, que contém as coordenadas das caixas delimitadoras previstas pelo modelo.The technological advances brought forth by the Industry 4.0 paradigm have renewed the disruptive potential of artificial intelligence in the manufacturing sector, building the data-driven era on top of concepts such as Cyber–Physical Systems and the IoT. However, data availability remains a major challenge for the success of these solutions, particularly concerning those based on DL approaches. Specifically in the quality inspection of struc- tural adhesive applications, found commonly in the automotive domain, defect data with sufficient variety, volume and quality is generally costly, time-consuming and inefficient to obtain, jeopardizing the viability of such approaches due to data scarcity. To mitigate this, we propose a novel approach to generate synthetic training data for this application, leveraging recent breakthroughs in training generative adversarial networks with limited data to improve the performance of automated inspection methods based on DL, espe- cially for imbalanced datasets. Preliminary results in a real automotive pilot cell show promise in this direction, with the approach being able to generate realistic adhesive bead images and consequently object detection models showing improved mAP at different thresholds when trained on the augmented dataset. For reproducibility purposes, the model weights, configurations and data encompassed in this study are made publicly available. In addition to this study, an API was carried out to facilitate the interaction between the client and the final result. This API detects the defects present in the image used as input and provides a text file as output, which contains the coordinates of the bounding boxes predicted by the model.Peres, RicardoOliveira, JoséRUNAzevedo, Miguel Neves Barriga Batalha2023-04-21T18:41:00Z2022-022022-02-01T00:00:00Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttp://hdl.handle.net/10362/152027porinfo:eu-repo/semantics/openAccessreponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãoinstacron:RCAAP2024-03-11T05:34:19Zoai:run.unl.pt:10362/152027Portal AgregadorONGhttps://www.rcaap.pt/oai/openaireopendoar:71602024-03-20T03:54:44.489930Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãofalse
dc.title.none.fl_str_mv Dados sintéticos com deep learning para inspeção de qualidade automática na indústria automóvel
title Dados sintéticos com deep learning para inspeção de qualidade automática na indústria automóvel
spellingShingle Dados sintéticos com deep learning para inspeção de qualidade automática na indústria automóvel
Azevedo, Miguel Neves Barriga Batalha
Data Augmentation
GANs
Machine Learning (ML)
Inteligência Artificial (IA)
imagens Sintéticas
API
Domínio/Área Científica::Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e Informática
title_short Dados sintéticos com deep learning para inspeção de qualidade automática na indústria automóvel
title_full Dados sintéticos com deep learning para inspeção de qualidade automática na indústria automóvel
title_fullStr Dados sintéticos com deep learning para inspeção de qualidade automática na indústria automóvel
title_full_unstemmed Dados sintéticos com deep learning para inspeção de qualidade automática na indústria automóvel
title_sort Dados sintéticos com deep learning para inspeção de qualidade automática na indústria automóvel
author Azevedo, Miguel Neves Barriga Batalha
author_facet Azevedo, Miguel Neves Barriga Batalha
author_role author
dc.contributor.none.fl_str_mv Peres, Ricardo
Oliveira, José
RUN
dc.contributor.author.fl_str_mv Azevedo, Miguel Neves Barriga Batalha
dc.subject.por.fl_str_mv Data Augmentation
GANs
Machine Learning (ML)
Inteligência Artificial (IA)
imagens Sintéticas
API
Domínio/Área Científica::Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e Informática
topic Data Augmentation
GANs
Machine Learning (ML)
Inteligência Artificial (IA)
imagens Sintéticas
API
Domínio/Área Científica::Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e Informática
description Os avanços tecnológicos que surgiram com o paradigma da Indústria 4.0 renovaram o potencial disruptivo da inteligência artificial no setor da manufatura, construindo a era baseada em dados sobre conceitos como Sistemas Ciber-Físicos (SCF) e Internet of Things (IoT). No entanto, a disponibilidade de dados continua a ser um grande desafio para o sucesso destas soluções, principalmente no que diz respeito àquelas baseadas em abordagens de Deep Learning (DL). Especificamente na inspeção de qualidade de apli- cações de adesivos estruturais, regularmente encontrados no domínio automóvel, dados de defeitos com variedade, volume e qualidade suficientes são geralmente caros, demo- rados e ineficientes de se obter, prejudicando a viabilidade de tais abordagens devido à escassez de dados. Para atenuar este problema, é proposta uma nova abordagem para gerar dados de treino sintéticos para esta aplicação, aproveitando avanços recentes no treino de Generative Adversarial Networks (GANs) com dados limitados para melhorar o desempenho de métodos de inspeção automatizados baseados em DL, especialmente para conjuntos de dados desequilibrados. Os resultados preliminares numa célula piloto automotiva real mostram uma promessa nesta direção, com a abordagem sendo capaz de gerar imagens realistas de cordões adesivos e, consequentemente, modelos de deteção de objetos mostrando mean Average Precision (mAP) melhorada em diferentes limiares quando treinados no conjunto de dados aumentado. Para fins de reprodutibilidade, os pesos do modelo, configurações e dados englobados neste estudo são disponibilizados publicamente. Para além deste estudo foi realizada uma Application Programming In- terface (API) para facilitar a interação entre o cliente e o resultado final. Esta API tem como objetivo detetar os defeitos presentes nas imagens usadas como input e fornece um ficheiro de texto como output, que contém as coordenadas das caixas delimitadoras previstas pelo modelo.
publishDate 2022
dc.date.none.fl_str_mv 2022-02
2022-02-01T00:00:00Z
2023-04-21T18:41:00Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10362/152027
url http://hdl.handle.net/10362/152027
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron:RCAAP
instname_str Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron_str RCAAP
institution RCAAP
reponame_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
collection Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository.name.fl_str_mv Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
repository.mail.fl_str_mv
_version_ 1799138135952588800