Redes neurais convolucionais para a detecção de objetos

Detalhes bibliográficos
Autor(a) principal: Romão, Bruno
Data de Publicação: 2023
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS
Texto Completo: http://repositorio.sis.puc-campinas.edu.br/xmlui/handle/123456789/16933
Resumo: Carros autônomos (ACs) e sistemas avançados de assistência ao motorista (ADAS) contam com redes neurais convolucionais (CNNs) para detecção de objetos. No entanto, a degradação da imagem causada por condições climáticas adversas, como chuva, neve e neblina, pode diminuir o desempenho de uma CNN. Assim, este trabalho apresenta o desenvolvimento de uma técnica de processamento de imagem com o objetivo de mitigar tal problema. Primeiramente, após uma extensa avaliação de modelos para detecção de objetos, nossa escolha recaiu sobre a YOLOv3, devido a seu compromisso entre precisão e tempo de inferência. Posteriormente, o treinamento e teste de uma CNN YOLOv3 foi investigado para carros, semáforos, semáforos, pedestres e ciclistas/motociclistas. O desempenho foi avaliado estimando-se a precisão média e média da precisão média (mAP) para cada uma das classes de objetos mencionadas. Foi implementada uma técnica de pré-processamento baseada em OpenCV para mitigar a degradação imposta por condições climáticas adversas. Em vista disso, os filtros do OpenCV de erosão, dilatação e joint bilateral filter foram considerados durante o treinamento e testes dos conjuntos de dados Berkeley DeepDrive (BDD100K) e Detection in Adverse Weather Nature (DAWN). O trabalho desenvolvido apresenta os benefícios potenciais do uso de filtros OpenCV como aumento de dados durante treinamento e testes. Nossos resultados mostram uma melhora em torno de 3% no mAP durante os testes com DAWN.
id PCAM_23b159fb5b4f4f81d0610fae0b1431e7
oai_identifier_str oai:repositorio.sis.puc-campinas.edu.br:123456789/16933
network_acronym_str PCAM
network_name_str Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS
repository_id_str 4886
spelling Romão, BrunoPontifícia Universidade Católica de Campinas (PUC-Campinas)Fagotto, Eric Alberto de Mello2023-05-26T12:53:32Z2023-05-26T12:53:32Z2023-04-03http://repositorio.sis.puc-campinas.edu.br/xmlui/handle/123456789/169339174257186263997Carros autônomos (ACs) e sistemas avançados de assistência ao motorista (ADAS) contam com redes neurais convolucionais (CNNs) para detecção de objetos. No entanto, a degradação da imagem causada por condições climáticas adversas, como chuva, neve e neblina, pode diminuir o desempenho de uma CNN. Assim, este trabalho apresenta o desenvolvimento de uma técnica de processamento de imagem com o objetivo de mitigar tal problema. Primeiramente, após uma extensa avaliação de modelos para detecção de objetos, nossa escolha recaiu sobre a YOLOv3, devido a seu compromisso entre precisão e tempo de inferência. Posteriormente, o treinamento e teste de uma CNN YOLOv3 foi investigado para carros, semáforos, semáforos, pedestres e ciclistas/motociclistas. O desempenho foi avaliado estimando-se a precisão média e média da precisão média (mAP) para cada uma das classes de objetos mencionadas. Foi implementada uma técnica de pré-processamento baseada em OpenCV para mitigar a degradação imposta por condições climáticas adversas. Em vista disso, os filtros do OpenCV de erosão, dilatação e joint bilateral filter foram considerados durante o treinamento e testes dos conjuntos de dados Berkeley DeepDrive (BDD100K) e Detection in Adverse Weather Nature (DAWN). O trabalho desenvolvido apresenta os benefícios potenciais do uso de filtros OpenCV como aumento de dados durante treinamento e testes. Nossos resultados mostram uma melhora em torno de 3% no mAP durante os testes com DAWN.Autonomous cars (ACs) and advanced driver-assistance systems (ADAS) have relied on convolutional neural networks (CNNs) for object detection. However, image degradation caused by adverse weather conditions like rain, snow, and fog can decrease the performance of a CNN. So, this paper presents the development of an image-processing technique aimed to mitigate such a problem. First, after an extensive evaluation of models for object detection, our choice fell on YOLOv3, because of its compromise between precision and inference time. Afterwards, the training and test of a YOLOv3 CNN was investigated for cars, traffic signals, traffic lights, pedestrians, and riders. Performance was evaluated by estimating the average and mean average precision (mAP) for every one of the mentioned object classes. An OpenCV based pre-processing technique to mitigate the degradation imposed by adverse weather conditions was implemented. Hence, the OpenCV filters of erosion, dilation and joint bilateral filter were considered during training and tests of the datasets Berkeley DeepDrive (BDD100K) and Detection in Adverse Weather Nature (DAWN). The developed work presents the potential benefits of OpenCV filters use as data augmentation during training and testes. Our results show an improvement around 3% in mAP during tests with DAWN.Pontifícia Universidade Católica de Campinas (PUC-Campinas)porPontifícia Universidade Católica de Campinas (PUC-Campinas)Detecção de ObjetosCNNOpenCVAumentação de dadosProcessamento de ImagemObject DetectionData augmentationImage ProcessingRedes neurais convolucionais para a detecção de objetosConvolutional neural networks for object detectioninfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da PUC_CAMPINASinstname:Pontifícia Universidade Católica de Campinas (PUC-CAMPINAS)instacron:PUC_CAMP8733923983559037Akabane, Ademar TakeoUrsini, Edson Luiz67818747281873257150028902000426Escola PolitécnicaGestão de Redes de TelecomunicaçõesOnlineNão se aplicaLICENSElicense.txtlicense.txttext/plain; charset=utf-80http://repositorio.sis.puc-campinas.edu.br/xmlui/bitstream/123456789/16933/2/license.txtd41d8cd98f00b204e9800998ecf8427eMD52ORIGINALpoli_ppggrt_dissertacao_romao_b.pdfpoli_ppggrt_dissertacao_romao_b.pdfapplication/pdf3523488http://repositorio.sis.puc-campinas.edu.br/xmlui/bitstream/123456789/16933/1/poli_ppggrt_dissertacao_romao_b.pdfe40bea7ed24f287110317a98ce9bfe11MD51123456789/169332023-05-26 09:53:33.392oai:repositorio.sis.puc-campinas.edu.br:123456789/16933Biblioteca Digital de Teses e Dissertaçõeshttp://tede.bibliotecadigital.puc-campinas.edu.br:8080/jspui/http://tede.bibliotecadigital.puc-campinas.edu.br:8080/oai/requestsbi.bibliotecadigital@puc-campinas.edu.b||sbi.bibliotecadigital@puc-campinas.edu.bropendoar:48862023-05-26T12:53:33Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS - Pontifícia Universidade Católica de Campinas (PUC-CAMPINAS)false
dc.title.pt_BR.fl_str_mv Redes neurais convolucionais para a detecção de objetos
dc.title.alternative.pt_BR.fl_str_mv Convolutional neural networks for object detection
title Redes neurais convolucionais para a detecção de objetos
spellingShingle Redes neurais convolucionais para a detecção de objetos
Romão, Bruno
Detecção de Objetos
CNN
OpenCV
Aumentação de dados
Processamento de Imagem
Object Detection
Data augmentation
Image Processing
title_short Redes neurais convolucionais para a detecção de objetos
title_full Redes neurais convolucionais para a detecção de objetos
title_fullStr Redes neurais convolucionais para a detecção de objetos
title_full_unstemmed Redes neurais convolucionais para a detecção de objetos
title_sort Redes neurais convolucionais para a detecção de objetos
author Romão, Bruno
author_facet Romão, Bruno
author_role author
dc.contributor.institution.pt_BR.fl_str_mv Pontifícia Universidade Católica de Campinas (PUC-Campinas)
dc.contributor.author.fl_str_mv Romão, Bruno
dc.contributor.advisor1.fl_str_mv Fagotto, Eric Alberto de Mello
contributor_str_mv Fagotto, Eric Alberto de Mello
dc.subject.por.fl_str_mv Detecção de Objetos
CNN
OpenCV
Aumentação de dados
Processamento de Imagem
Object Detection
Data augmentation
Image Processing
topic Detecção de Objetos
CNN
OpenCV
Aumentação de dados
Processamento de Imagem
Object Detection
Data augmentation
Image Processing
description Carros autônomos (ACs) e sistemas avançados de assistência ao motorista (ADAS) contam com redes neurais convolucionais (CNNs) para detecção de objetos. No entanto, a degradação da imagem causada por condições climáticas adversas, como chuva, neve e neblina, pode diminuir o desempenho de uma CNN. Assim, este trabalho apresenta o desenvolvimento de uma técnica de processamento de imagem com o objetivo de mitigar tal problema. Primeiramente, após uma extensa avaliação de modelos para detecção de objetos, nossa escolha recaiu sobre a YOLOv3, devido a seu compromisso entre precisão e tempo de inferência. Posteriormente, o treinamento e teste de uma CNN YOLOv3 foi investigado para carros, semáforos, semáforos, pedestres e ciclistas/motociclistas. O desempenho foi avaliado estimando-se a precisão média e média da precisão média (mAP) para cada uma das classes de objetos mencionadas. Foi implementada uma técnica de pré-processamento baseada em OpenCV para mitigar a degradação imposta por condições climáticas adversas. Em vista disso, os filtros do OpenCV de erosão, dilatação e joint bilateral filter foram considerados durante o treinamento e testes dos conjuntos de dados Berkeley DeepDrive (BDD100K) e Detection in Adverse Weather Nature (DAWN). O trabalho desenvolvido apresenta os benefícios potenciais do uso de filtros OpenCV como aumento de dados durante treinamento e testes. Nossos resultados mostram uma melhora em torno de 3% no mAP durante os testes com DAWN.
publishDate 2023
dc.date.accessioned.fl_str_mv 2023-05-26T12:53:32Z
dc.date.available.fl_str_mv 2023-05-26T12:53:32Z
dc.date.issued.fl_str_mv 2023-04-03
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://repositorio.sis.puc-campinas.edu.br/xmlui/handle/123456789/16933
dc.identifier.lattes.pt_BR.fl_str_mv 9174257186263997
url http://repositorio.sis.puc-campinas.edu.br/xmlui/handle/123456789/16933
identifier_str_mv 9174257186263997
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Pontifícia Universidade Católica de Campinas (PUC-Campinas)
publisher.none.fl_str_mv Pontifícia Universidade Católica de Campinas (PUC-Campinas)
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS
instname:Pontifícia Universidade Católica de Campinas (PUC-CAMPINAS)
instacron:PUC_CAMP
instname_str Pontifícia Universidade Católica de Campinas (PUC-CAMPINAS)
instacron_str PUC_CAMP
institution PUC_CAMP
reponame_str Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS
collection Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS
bitstream.url.fl_str_mv http://repositorio.sis.puc-campinas.edu.br/xmlui/bitstream/123456789/16933/2/license.txt
http://repositorio.sis.puc-campinas.edu.br/xmlui/bitstream/123456789/16933/1/poli_ppggrt_dissertacao_romao_b.pdf
bitstream.checksum.fl_str_mv d41d8cd98f00b204e9800998ecf8427e
e40bea7ed24f287110317a98ce9bfe11
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS - Pontifícia Universidade Católica de Campinas (PUC-CAMPINAS)
repository.mail.fl_str_mv sbi.bibliotecadigital@puc-campinas.edu.b||sbi.bibliotecadigital@puc-campinas.edu.br
_version_ 1796790719390679040