Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais
Autor(a) principal: | |
---|---|
Data de Publicação: | 2018 |
Tipo de documento: | Dissertação |
Idioma: | por |
Título da fonte: | Biblioteca Digital de Teses e Dissertações da PUC_RS |
Texto Completo: | http://tede2.pucrs.br/tede2/handle/tede/9828 |
Resumo: | Due to a large number of visually impaired persons in the world, and with the advance of technology, the research interest in the development of different approaches to support the mobility of these persons has increased. In this context, the detection of doorsand stairs is an important research topic because it provides useful information that can aid in the mobility of these persons. In this work, we present a model to aid the visually impaired navigation in indoor environments. We found approaches that use computer vision techniques to identify corridors, obstacles, stairs, and doors through a literature review. However, few of them use recent techniques in computer vision and convolutional neural networks in their solutions. Thus, the presented model includes an experiment on convolutional neural networks to recognize and detect doors and stairs. Using the YOLO method, we present a model that detects not only different kinds of doors but also is capable of differentiating ascending and descending stairs, with FPS rates close to 30 and mAP above 90%. |
id |
P_RS_d89dd8a3ca5fd02cc2cc657ffbfbad0a |
---|---|
oai_identifier_str |
oai:tede2.pucrs.br:tede/9828 |
network_acronym_str |
P_RS |
network_name_str |
Biblioteca Digital de Teses e Dissertações da PUC_RS |
repository_id_str |
|
spelling |
Manssour, Isabel Harbhttp://lattes.cnpq.br/4904489502853690http://lattes.cnpq.br/3387311288748384Nogueira Junior, Rodney Sales2021-08-31T17:12:31Z2018-08-29http://tede2.pucrs.br/tede2/handle/tede/9828Due to a large number of visually impaired persons in the world, and with the advance of technology, the research interest in the development of different approaches to support the mobility of these persons has increased. In this context, the detection of doorsand stairs is an important research topic because it provides useful information that can aid in the mobility of these persons. In this work, we present a model to aid the visually impaired navigation in indoor environments. We found approaches that use computer vision techniques to identify corridors, obstacles, stairs, and doors through a literature review. However, few of them use recent techniques in computer vision and convolutional neural networks in their solutions. Thus, the presented model includes an experiment on convolutional neural networks to recognize and detect doors and stairs. Using the YOLO method, we present a model that detects not only different kinds of doors but also is capable of differentiating ascending and descending stairs, with FPS rates close to 30 and mAP above 90%.Devido ao grande numero de pessoas com deficiência visual no mundo, e com o avanço tecnológico, os interesses em pesquisa e desenvolvimento de diferentes técnicas de apoio a mobilidade dessas pessoas aumentou. Nesse contexto a detecção de portas e escadas é um tópico de pesquisa importante, pois provê informações que podem auxiliar a mobilidade dessas pessoas. Este trabalho apresenta um modelo para auxílio a navegação em ambientes internos para deficientes visuais. Através de um estudo aprofundado da literatura, foram encontrados trabalhos que utilizam de técnicas de visão computacional para identificar corredores, obstáculos, portas e escadas. Entretanto, poucos utilizam os recentes avanços em visão computacional e redes neurais convolucionais para esse objetivo. Desta forma, o presente modelo engloba um experimento sobre as redes neurais convolucionais para o reconhecimento e detecção de portas e escadas. Usando o método YOLO, apresentamos um modelo que não só detecta diferentes tipos de portas, como também também é capaz de diferenciar escadas ascendentes e descendentes, com taxas de FPS próximas a 30, e mAP acima de 90%.Submitted by PPG Ciência da Computação (ppgcc@pucrs.br) on 2021-08-30T14:17:54Z No. of bitstreams: 1 RODNEY SALES NOGUEIRA JR_DIS.pdf: 2475968 bytes, checksum: e399715c6ecf9da220b849a0b0688ae7 (MD5)Approved for entry into archive by Sarajane Pan (sarajane.pan@pucrs.br) on 2021-08-31T16:52:39Z (GMT) No. of bitstreams: 1 RODNEY SALES NOGUEIRA JR_DIS.pdf: 2475968 bytes, checksum: e399715c6ecf9da220b849a0b0688ae7 (MD5)Made available in DSpace on 2021-08-31T17:12:31Z (GMT). No. of bitstreams: 1 RODNEY SALES NOGUEIRA JR_DIS.pdf: 2475968 bytes, checksum: e399715c6ecf9da220b849a0b0688ae7 (MD5) Previous issue date: 2018-08-29application/pdfhttp://tede2.pucrs.br:80/tede2/retrieve/181854/RODNEY%20SALES%20NOGUEIRA%20JR_DIS.pdf.jpgporPontifícia Universidade Católica do Rio Grande do SulPrograma de Pós-Graduação em Ciência da ComputaçãoPUCRSBrasilEscola PolitécnicaVisão ComputacionalRedes Neurais ConvolucionaisAmbientes InternosDeficientes VisuaisComputer VisionConvolutional Neural NetworksIndoor EnvironmentsVisually ImpairedCIENCIA DA COMPUTACAO::TEORIA DA COMPUTACAOModelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuaisA deep learning based model for the detection of doors and stairs to aid the visually impairedinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisTrabalho não apresenta restrição para publicação-4570527706994352458500500-862078257083325301info:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da PUC_RSinstname:Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS)instacron:PUC_RSTHUMBNAILRODNEY SALES NOGUEIRA JR_DIS.pdf.jpgRODNEY SALES NOGUEIRA JR_DIS.pdf.jpgimage/jpeg5527http://tede2.pucrs.br/tede2/bitstream/tede/9828/3/RODNEY+SALES+NOGUEIRA+JR_DIS.pdf.jpg963775fd3cc05b957e83a60105550fcbMD53TEXTRODNEY SALES NOGUEIRA JR_DIS.pdf.txtRODNEY SALES NOGUEIRA JR_DIS.pdf.txttext/plain138829http://tede2.pucrs.br/tede2/bitstream/tede/9828/4/RODNEY+SALES+NOGUEIRA+JR_DIS.pdf.txt8b8dffadc4e591315f19e1fbb3e979faMD54ORIGINALRODNEY SALES NOGUEIRA JR_DIS.pdfRODNEY SALES NOGUEIRA JR_DIS.pdfapplication/pdf2475968http://tede2.pucrs.br/tede2/bitstream/tede/9828/2/RODNEY+SALES+NOGUEIRA+JR_DIS.pdfe399715c6ecf9da220b849a0b0688ae7MD52LICENSElicense.txtlicense.txttext/plain; charset=utf-8590http://tede2.pucrs.br/tede2/bitstream/tede/9828/1/license.txt220e11f2d3ba5354f917c7035aadef24MD51tede/98282021-09-01 12:00:22.456oai:tede2.pucrs.br:tede/9828QXV0b3JpemE/P28gcGFyYSBQdWJsaWNhPz9vIEVsZXRyP25pY2E6IENvbSBiYXNlIG5vIGRpc3Bvc3RvIG5hIExlaSBGZWRlcmFsIG4/OS42MTAsIGRlIDE5IGRlIGZldmVyZWlybyBkZSAxOTk4LCBvIGF1dG9yIEFVVE9SSVpBIGEgcHVibGljYT8/byBlbGV0cj9uaWNhIGRhIHByZXNlbnRlIG9icmEgbm8gYWNlcnZvIGRhIEJpYmxpb3RlY2EgRGlnaXRhbCBkYSBQb250aWY/Y2lhIFVuaXZlcnNpZGFkZSBDYXQ/bGljYSBkbyBSaW8gR3JhbmRlIGRvIFN1bCwgc2VkaWFkYSBhIEF2LiBJcGlyYW5nYSA2NjgxLCBQb3J0byBBbGVncmUsIFJpbyBHcmFuZGUgZG8gU3VsLCBjb20gcmVnaXN0cm8gZGUgQ05QSiA4ODYzMDQxMzAwMDItODEgYmVtIGNvbW8gZW0gb3V0cmFzIGJpYmxpb3RlY2FzIGRpZ2l0YWlzLCBuYWNpb25haXMgZSBpbnRlcm5hY2lvbmFpcywgY29ucz9yY2lvcyBlIHJlZGVzID9zIHF1YWlzIGEgYmlibGlvdGVjYSBkYSBQVUNSUyBwb3NzYSBhIHZpciBwYXJ0aWNpcGFyLCBzZW0gP251cyBhbHVzaXZvIGFvcyBkaXJlaXRvcyBhdXRvcmFpcywgYSB0P3R1bG8gZGUgZGl2dWxnYT8/byBkYSBwcm9kdT8/byBjaWVudD9maWNhLgo=Biblioteca Digital de Teses e Dissertaçõeshttp://tede2.pucrs.br/tede2/PRIhttps://tede2.pucrs.br/oai/requestbiblioteca.central@pucrs.br||opendoar:2021-09-01T15:00:22Biblioteca Digital de Teses e Dissertações da PUC_RS - Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS)false |
dc.title.por.fl_str_mv |
Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais |
dc.title.alternative.eng.fl_str_mv |
A deep learning based model for the detection of doors and stairs to aid the visually impaired |
title |
Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais |
spellingShingle |
Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais Nogueira Junior, Rodney Sales Visão Computacional Redes Neurais Convolucionais Ambientes Internos Deficientes Visuais Computer Vision Convolutional Neural Networks Indoor Environments Visually Impaired CIENCIA DA COMPUTACAO::TEORIA DA COMPUTACAO |
title_short |
Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais |
title_full |
Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais |
title_fullStr |
Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais |
title_full_unstemmed |
Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais |
title_sort |
Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais |
author |
Nogueira Junior, Rodney Sales |
author_facet |
Nogueira Junior, Rodney Sales |
author_role |
author |
dc.contributor.advisor1.fl_str_mv |
Manssour, Isabel Harb |
dc.contributor.advisor1Lattes.fl_str_mv |
http://lattes.cnpq.br/4904489502853690 |
dc.contributor.authorLattes.fl_str_mv |
http://lattes.cnpq.br/3387311288748384 |
dc.contributor.author.fl_str_mv |
Nogueira Junior, Rodney Sales |
contributor_str_mv |
Manssour, Isabel Harb |
dc.subject.por.fl_str_mv |
Visão Computacional Redes Neurais Convolucionais Ambientes Internos Deficientes Visuais |
topic |
Visão Computacional Redes Neurais Convolucionais Ambientes Internos Deficientes Visuais Computer Vision Convolutional Neural Networks Indoor Environments Visually Impaired CIENCIA DA COMPUTACAO::TEORIA DA COMPUTACAO |
dc.subject.eng.fl_str_mv |
Computer Vision Convolutional Neural Networks Indoor Environments Visually Impaired |
dc.subject.cnpq.fl_str_mv |
CIENCIA DA COMPUTACAO::TEORIA DA COMPUTACAO |
description |
Due to a large number of visually impaired persons in the world, and with the advance of technology, the research interest in the development of different approaches to support the mobility of these persons has increased. In this context, the detection of doorsand stairs is an important research topic because it provides useful information that can aid in the mobility of these persons. In this work, we present a model to aid the visually impaired navigation in indoor environments. We found approaches that use computer vision techniques to identify corridors, obstacles, stairs, and doors through a literature review. However, few of them use recent techniques in computer vision and convolutional neural networks in their solutions. Thus, the presented model includes an experiment on convolutional neural networks to recognize and detect doors and stairs. Using the YOLO method, we present a model that detects not only different kinds of doors but also is capable of differentiating ascending and descending stairs, with FPS rates close to 30 and mAP above 90%. |
publishDate |
2018 |
dc.date.issued.fl_str_mv |
2018-08-29 |
dc.date.accessioned.fl_str_mv |
2021-08-31T17:12:31Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
format |
masterThesis |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
http://tede2.pucrs.br/tede2/handle/tede/9828 |
url |
http://tede2.pucrs.br/tede2/handle/tede/9828 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.relation.program.fl_str_mv |
-4570527706994352458 |
dc.relation.confidence.fl_str_mv |
500 500 |
dc.relation.cnpq.fl_str_mv |
-862078257083325301 |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
application/pdf |
dc.publisher.none.fl_str_mv |
Pontifícia Universidade Católica do Rio Grande do Sul |
dc.publisher.program.fl_str_mv |
Programa de Pós-Graduação em Ciência da Computação |
dc.publisher.initials.fl_str_mv |
PUCRS |
dc.publisher.country.fl_str_mv |
Brasil |
dc.publisher.department.fl_str_mv |
Escola Politécnica |
publisher.none.fl_str_mv |
Pontifícia Universidade Católica do Rio Grande do Sul |
dc.source.none.fl_str_mv |
reponame:Biblioteca Digital de Teses e Dissertações da PUC_RS instname:Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS) instacron:PUC_RS |
instname_str |
Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS) |
instacron_str |
PUC_RS |
institution |
PUC_RS |
reponame_str |
Biblioteca Digital de Teses e Dissertações da PUC_RS |
collection |
Biblioteca Digital de Teses e Dissertações da PUC_RS |
bitstream.url.fl_str_mv |
http://tede2.pucrs.br/tede2/bitstream/tede/9828/3/RODNEY+SALES+NOGUEIRA+JR_DIS.pdf.jpg http://tede2.pucrs.br/tede2/bitstream/tede/9828/4/RODNEY+SALES+NOGUEIRA+JR_DIS.pdf.txt http://tede2.pucrs.br/tede2/bitstream/tede/9828/2/RODNEY+SALES+NOGUEIRA+JR_DIS.pdf http://tede2.pucrs.br/tede2/bitstream/tede/9828/1/license.txt |
bitstream.checksum.fl_str_mv |
963775fd3cc05b957e83a60105550fcb 8b8dffadc4e591315f19e1fbb3e979fa e399715c6ecf9da220b849a0b0688ae7 220e11f2d3ba5354f917c7035aadef24 |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 MD5 MD5 |
repository.name.fl_str_mv |
Biblioteca Digital de Teses e Dissertações da PUC_RS - Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS) |
repository.mail.fl_str_mv |
biblioteca.central@pucrs.br|| |
_version_ |
1799765351614906368 |