Redes neurais convolucionais para a detecção de objetos
Autor(a) principal: | |
---|---|
Data de Publicação: | 2023 |
Tipo de documento: | Dissertação |
Idioma: | por |
Título da fonte: | Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS |
Texto Completo: | http://repositorio.sis.puc-campinas.edu.br/xmlui/handle/123456789/16933 |
Resumo: | Carros autônomos (ACs) e sistemas avançados de assistência ao motorista (ADAS) contam com redes neurais convolucionais (CNNs) para detecção de objetos. No entanto, a degradação da imagem causada por condições climáticas adversas, como chuva, neve e neblina, pode diminuir o desempenho de uma CNN. Assim, este trabalho apresenta o desenvolvimento de uma técnica de processamento de imagem com o objetivo de mitigar tal problema. Primeiramente, após uma extensa avaliação de modelos para detecção de objetos, nossa escolha recaiu sobre a YOLOv3, devido a seu compromisso entre precisão e tempo de inferência. Posteriormente, o treinamento e teste de uma CNN YOLOv3 foi investigado para carros, semáforos, semáforos, pedestres e ciclistas/motociclistas. O desempenho foi avaliado estimando-se a precisão média e média da precisão média (mAP) para cada uma das classes de objetos mencionadas. Foi implementada uma técnica de pré-processamento baseada em OpenCV para mitigar a degradação imposta por condições climáticas adversas. Em vista disso, os filtros do OpenCV de erosão, dilatação e joint bilateral filter foram considerados durante o treinamento e testes dos conjuntos de dados Berkeley DeepDrive (BDD100K) e Detection in Adverse Weather Nature (DAWN). O trabalho desenvolvido apresenta os benefícios potenciais do uso de filtros OpenCV como aumento de dados durante treinamento e testes. Nossos resultados mostram uma melhora em torno de 3% no mAP durante os testes com DAWN. |
id |
PCAM_23b159fb5b4f4f81d0610fae0b1431e7 |
---|---|
oai_identifier_str |
oai:repositorio.sis.puc-campinas.edu.br:123456789/16933 |
network_acronym_str |
PCAM |
network_name_str |
Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS |
repository_id_str |
4886 |
spelling |
Romão, BrunoPontifícia Universidade Católica de Campinas (PUC-Campinas)Fagotto, Eric Alberto de Mello2023-05-26T12:53:32Z2023-05-26T12:53:32Z2023-04-03http://repositorio.sis.puc-campinas.edu.br/xmlui/handle/123456789/169339174257186263997Carros autônomos (ACs) e sistemas avançados de assistência ao motorista (ADAS) contam com redes neurais convolucionais (CNNs) para detecção de objetos. No entanto, a degradação da imagem causada por condições climáticas adversas, como chuva, neve e neblina, pode diminuir o desempenho de uma CNN. Assim, este trabalho apresenta o desenvolvimento de uma técnica de processamento de imagem com o objetivo de mitigar tal problema. Primeiramente, após uma extensa avaliação de modelos para detecção de objetos, nossa escolha recaiu sobre a YOLOv3, devido a seu compromisso entre precisão e tempo de inferência. Posteriormente, o treinamento e teste de uma CNN YOLOv3 foi investigado para carros, semáforos, semáforos, pedestres e ciclistas/motociclistas. O desempenho foi avaliado estimando-se a precisão média e média da precisão média (mAP) para cada uma das classes de objetos mencionadas. Foi implementada uma técnica de pré-processamento baseada em OpenCV para mitigar a degradação imposta por condições climáticas adversas. Em vista disso, os filtros do OpenCV de erosão, dilatação e joint bilateral filter foram considerados durante o treinamento e testes dos conjuntos de dados Berkeley DeepDrive (BDD100K) e Detection in Adverse Weather Nature (DAWN). O trabalho desenvolvido apresenta os benefícios potenciais do uso de filtros OpenCV como aumento de dados durante treinamento e testes. Nossos resultados mostram uma melhora em torno de 3% no mAP durante os testes com DAWN.Autonomous cars (ACs) and advanced driver-assistance systems (ADAS) have relied on convolutional neural networks (CNNs) for object detection. However, image degradation caused by adverse weather conditions like rain, snow, and fog can decrease the performance of a CNN. So, this paper presents the development of an image-processing technique aimed to mitigate such a problem. First, after an extensive evaluation of models for object detection, our choice fell on YOLOv3, because of its compromise between precision and inference time. Afterwards, the training and test of a YOLOv3 CNN was investigated for cars, traffic signals, traffic lights, pedestrians, and riders. Performance was evaluated by estimating the average and mean average precision (mAP) for every one of the mentioned object classes. An OpenCV based pre-processing technique to mitigate the degradation imposed by adverse weather conditions was implemented. Hence, the OpenCV filters of erosion, dilation and joint bilateral filter were considered during training and tests of the datasets Berkeley DeepDrive (BDD100K) and Detection in Adverse Weather Nature (DAWN). The developed work presents the potential benefits of OpenCV filters use as data augmentation during training and testes. Our results show an improvement around 3% in mAP during tests with DAWN.Pontifícia Universidade Católica de Campinas (PUC-Campinas)porPontifícia Universidade Católica de Campinas (PUC-Campinas)Detecção de ObjetosCNNOpenCVAumentação de dadosProcessamento de ImagemObject DetectionData augmentationImage ProcessingRedes neurais convolucionais para a detecção de objetosConvolutional neural networks for object detectioninfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da PUC_CAMPINASinstname:Pontifícia Universidade Católica de Campinas (PUC-CAMPINAS)instacron:PUC_CAMP8733923983559037Akabane, Ademar TakeoUrsini, Edson Luiz67818747281873257150028902000426Escola PolitécnicaGestão de Redes de TelecomunicaçõesOnlineNão se aplicaLICENSElicense.txtlicense.txttext/plain; charset=utf-80http://repositorio.sis.puc-campinas.edu.br/xmlui/bitstream/123456789/16933/2/license.txtd41d8cd98f00b204e9800998ecf8427eMD52ORIGINALpoli_ppggrt_dissertacao_romao_b.pdfpoli_ppggrt_dissertacao_romao_b.pdfapplication/pdf3523488http://repositorio.sis.puc-campinas.edu.br/xmlui/bitstream/123456789/16933/1/poli_ppggrt_dissertacao_romao_b.pdfe40bea7ed24f287110317a98ce9bfe11MD51123456789/169332023-05-26 09:53:33.392oai:repositorio.sis.puc-campinas.edu.br:123456789/16933Biblioteca Digital de Teses e Dissertaçõeshttp://tede.bibliotecadigital.puc-campinas.edu.br:8080/jspui/http://tede.bibliotecadigital.puc-campinas.edu.br:8080/oai/requestsbi.bibliotecadigital@puc-campinas.edu.b||sbi.bibliotecadigital@puc-campinas.edu.bropendoar:48862023-05-26T12:53:33Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS - Pontifícia Universidade Católica de Campinas (PUC-CAMPINAS)false |
dc.title.pt_BR.fl_str_mv |
Redes neurais convolucionais para a detecção de objetos |
dc.title.alternative.pt_BR.fl_str_mv |
Convolutional neural networks for object detection |
title |
Redes neurais convolucionais para a detecção de objetos |
spellingShingle |
Redes neurais convolucionais para a detecção de objetos Romão, Bruno Detecção de Objetos CNN OpenCV Aumentação de dados Processamento de Imagem Object Detection Data augmentation Image Processing |
title_short |
Redes neurais convolucionais para a detecção de objetos |
title_full |
Redes neurais convolucionais para a detecção de objetos |
title_fullStr |
Redes neurais convolucionais para a detecção de objetos |
title_full_unstemmed |
Redes neurais convolucionais para a detecção de objetos |
title_sort |
Redes neurais convolucionais para a detecção de objetos |
author |
Romão, Bruno |
author_facet |
Romão, Bruno |
author_role |
author |
dc.contributor.institution.pt_BR.fl_str_mv |
Pontifícia Universidade Católica de Campinas (PUC-Campinas) |
dc.contributor.author.fl_str_mv |
Romão, Bruno |
dc.contributor.advisor1.fl_str_mv |
Fagotto, Eric Alberto de Mello |
contributor_str_mv |
Fagotto, Eric Alberto de Mello |
dc.subject.por.fl_str_mv |
Detecção de Objetos CNN OpenCV Aumentação de dados Processamento de Imagem Object Detection Data augmentation Image Processing |
topic |
Detecção de Objetos CNN OpenCV Aumentação de dados Processamento de Imagem Object Detection Data augmentation Image Processing |
description |
Carros autônomos (ACs) e sistemas avançados de assistência ao motorista (ADAS) contam com redes neurais convolucionais (CNNs) para detecção de objetos. No entanto, a degradação da imagem causada por condições climáticas adversas, como chuva, neve e neblina, pode diminuir o desempenho de uma CNN. Assim, este trabalho apresenta o desenvolvimento de uma técnica de processamento de imagem com o objetivo de mitigar tal problema. Primeiramente, após uma extensa avaliação de modelos para detecção de objetos, nossa escolha recaiu sobre a YOLOv3, devido a seu compromisso entre precisão e tempo de inferência. Posteriormente, o treinamento e teste de uma CNN YOLOv3 foi investigado para carros, semáforos, semáforos, pedestres e ciclistas/motociclistas. O desempenho foi avaliado estimando-se a precisão média e média da precisão média (mAP) para cada uma das classes de objetos mencionadas. Foi implementada uma técnica de pré-processamento baseada em OpenCV para mitigar a degradação imposta por condições climáticas adversas. Em vista disso, os filtros do OpenCV de erosão, dilatação e joint bilateral filter foram considerados durante o treinamento e testes dos conjuntos de dados Berkeley DeepDrive (BDD100K) e Detection in Adverse Weather Nature (DAWN). O trabalho desenvolvido apresenta os benefícios potenciais do uso de filtros OpenCV como aumento de dados durante treinamento e testes. Nossos resultados mostram uma melhora em torno de 3% no mAP durante os testes com DAWN. |
publishDate |
2023 |
dc.date.accessioned.fl_str_mv |
2023-05-26T12:53:32Z |
dc.date.available.fl_str_mv |
2023-05-26T12:53:32Z |
dc.date.issued.fl_str_mv |
2023-04-03 |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
format |
masterThesis |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
http://repositorio.sis.puc-campinas.edu.br/xmlui/handle/123456789/16933 |
dc.identifier.lattes.pt_BR.fl_str_mv |
9174257186263997 |
url |
http://repositorio.sis.puc-campinas.edu.br/xmlui/handle/123456789/16933 |
identifier_str_mv |
9174257186263997 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.publisher.none.fl_str_mv |
Pontifícia Universidade Católica de Campinas (PUC-Campinas) |
publisher.none.fl_str_mv |
Pontifícia Universidade Católica de Campinas (PUC-Campinas) |
dc.source.none.fl_str_mv |
reponame:Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS instname:Pontifícia Universidade Católica de Campinas (PUC-CAMPINAS) instacron:PUC_CAMP |
instname_str |
Pontifícia Universidade Católica de Campinas (PUC-CAMPINAS) |
instacron_str |
PUC_CAMP |
institution |
PUC_CAMP |
reponame_str |
Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS |
collection |
Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS |
bitstream.url.fl_str_mv |
http://repositorio.sis.puc-campinas.edu.br/xmlui/bitstream/123456789/16933/2/license.txt http://repositorio.sis.puc-campinas.edu.br/xmlui/bitstream/123456789/16933/1/poli_ppggrt_dissertacao_romao_b.pdf |
bitstream.checksum.fl_str_mv |
d41d8cd98f00b204e9800998ecf8427e e40bea7ed24f287110317a98ce9bfe11 |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 |
repository.name.fl_str_mv |
Biblioteca Digital de Teses e Dissertações da PUC_CAMPINAS - Pontifícia Universidade Católica de Campinas (PUC-CAMPINAS) |
repository.mail.fl_str_mv |
sbi.bibliotecadigital@puc-campinas.edu.b||sbi.bibliotecadigital@puc-campinas.edu.br |
_version_ |
1796790719390679040 |