Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais

Detalhes bibliográficos
Autor(a) principal: Nogueira Junior, Rodney Sales
Data de Publicação: 2018
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da PUC_RS
Texto Completo: http://tede2.pucrs.br/tede2/handle/tede/9828
Resumo: Due to a large number of visually impaired persons in the world, and with the advance of technology, the research interest in the development of different approaches to support the mobility of these persons has increased. In this context, the detection of doorsand stairs is an important research topic because it provides useful information that can aid in the mobility of these persons. In this work, we present a model to aid the visually impaired navigation in indoor environments. We found approaches that use computer vision techniques to identify corridors, obstacles, stairs, and doors through a literature review. However, few of them use recent techniques in computer vision and convolutional neural networks in their solutions. Thus, the presented model includes an experiment on convolutional neural networks to recognize and detect doors and stairs. Using the YOLO method, we present a model that detects not only different kinds of doors but also is capable of differentiating ascending and descending stairs, with FPS rates close to 30 and mAP above 90%.
id P_RS_d89dd8a3ca5fd02cc2cc657ffbfbad0a
oai_identifier_str oai:tede2.pucrs.br:tede/9828
network_acronym_str P_RS
network_name_str Biblioteca Digital de Teses e Dissertações da PUC_RS
repository_id_str
spelling Manssour, Isabel Harbhttp://lattes.cnpq.br/4904489502853690http://lattes.cnpq.br/3387311288748384Nogueira Junior, Rodney Sales2021-08-31T17:12:31Z2018-08-29http://tede2.pucrs.br/tede2/handle/tede/9828Due to a large number of visually impaired persons in the world, and with the advance of technology, the research interest in the development of different approaches to support the mobility of these persons has increased. In this context, the detection of doorsand stairs is an important research topic because it provides useful information that can aid in the mobility of these persons. In this work, we present a model to aid the visually impaired navigation in indoor environments. We found approaches that use computer vision techniques to identify corridors, obstacles, stairs, and doors through a literature review. However, few of them use recent techniques in computer vision and convolutional neural networks in their solutions. Thus, the presented model includes an experiment on convolutional neural networks to recognize and detect doors and stairs. Using the YOLO method, we present a model that detects not only different kinds of doors but also is capable of differentiating ascending and descending stairs, with FPS rates close to 30 and mAP above 90%.Devido ao grande numero de pessoas com deficiência visual no mundo, e com o avanço tecnológico, os interesses em pesquisa e desenvolvimento de diferentes técnicas de apoio a mobilidade dessas pessoas aumentou. Nesse contexto a detecção de portas e escadas é um tópico de pesquisa importante, pois provê informações que podem auxiliar a mobilidade dessas pessoas. Este trabalho apresenta um modelo para auxílio a navegação em ambientes internos para deficientes visuais. Através de um estudo aprofundado da literatura, foram encontrados trabalhos que utilizam de técnicas de visão computacional para identificar corredores, obstáculos, portas e escadas. Entretanto, poucos utilizam os recentes avanços em visão computacional e redes neurais convolucionais para esse objetivo. Desta forma, o presente modelo engloba um experimento sobre as redes neurais convolucionais para o reconhecimento e detecção de portas e escadas. Usando o método YOLO, apresentamos um modelo que não só detecta diferentes tipos de portas, como também também é capaz de diferenciar escadas ascendentes e descendentes, com taxas de FPS próximas a 30, e mAP acima de 90%.Submitted by PPG Ciência da Computação (ppgcc@pucrs.br) on 2021-08-30T14:17:54Z No. of bitstreams: 1 RODNEY SALES NOGUEIRA JR_DIS.pdf: 2475968 bytes, checksum: e399715c6ecf9da220b849a0b0688ae7 (MD5)Approved for entry into archive by Sarajane Pan (sarajane.pan@pucrs.br) on 2021-08-31T16:52:39Z (GMT) No. of bitstreams: 1 RODNEY SALES NOGUEIRA JR_DIS.pdf: 2475968 bytes, checksum: e399715c6ecf9da220b849a0b0688ae7 (MD5)Made available in DSpace on 2021-08-31T17:12:31Z (GMT). No. of bitstreams: 1 RODNEY SALES NOGUEIRA JR_DIS.pdf: 2475968 bytes, checksum: e399715c6ecf9da220b849a0b0688ae7 (MD5) Previous issue date: 2018-08-29application/pdfhttp://tede2.pucrs.br:80/tede2/retrieve/181854/RODNEY%20SALES%20NOGUEIRA%20JR_DIS.pdf.jpgporPontifícia Universidade Católica do Rio Grande do SulPrograma de Pós-Graduação em Ciência da ComputaçãoPUCRSBrasilEscola PolitécnicaVisão ComputacionalRedes Neurais ConvolucionaisAmbientes InternosDeficientes VisuaisComputer VisionConvolutional Neural NetworksIndoor EnvironmentsVisually ImpairedCIENCIA DA COMPUTACAO::TEORIA DA COMPUTACAOModelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuaisA deep learning based model for the detection of doors and stairs to aid the visually impairedinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisTrabalho não apresenta restrição para publicação-4570527706994352458500500-862078257083325301info:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da PUC_RSinstname:Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS)instacron:PUC_RSTHUMBNAILRODNEY SALES NOGUEIRA JR_DIS.pdf.jpgRODNEY SALES NOGUEIRA JR_DIS.pdf.jpgimage/jpeg5527http://tede2.pucrs.br/tede2/bitstream/tede/9828/3/RODNEY+SALES+NOGUEIRA+JR_DIS.pdf.jpg963775fd3cc05b957e83a60105550fcbMD53TEXTRODNEY SALES NOGUEIRA JR_DIS.pdf.txtRODNEY SALES NOGUEIRA JR_DIS.pdf.txttext/plain138829http://tede2.pucrs.br/tede2/bitstream/tede/9828/4/RODNEY+SALES+NOGUEIRA+JR_DIS.pdf.txt8b8dffadc4e591315f19e1fbb3e979faMD54ORIGINALRODNEY SALES NOGUEIRA JR_DIS.pdfRODNEY SALES NOGUEIRA JR_DIS.pdfapplication/pdf2475968http://tede2.pucrs.br/tede2/bitstream/tede/9828/2/RODNEY+SALES+NOGUEIRA+JR_DIS.pdfe399715c6ecf9da220b849a0b0688ae7MD52LICENSElicense.txtlicense.txttext/plain; charset=utf-8590http://tede2.pucrs.br/tede2/bitstream/tede/9828/1/license.txt220e11f2d3ba5354f917c7035aadef24MD51tede/98282021-09-01 12:00:22.456oai:tede2.pucrs.br:tede/9828QXV0b3JpemE/P28gcGFyYSBQdWJsaWNhPz9vIEVsZXRyP25pY2E6IENvbSBiYXNlIG5vIGRpc3Bvc3RvIG5hIExlaSBGZWRlcmFsIG4/OS42MTAsIGRlIDE5IGRlIGZldmVyZWlybyBkZSAxOTk4LCBvIGF1dG9yIEFVVE9SSVpBIGEgcHVibGljYT8/byBlbGV0cj9uaWNhIGRhIHByZXNlbnRlIG9icmEgbm8gYWNlcnZvIGRhIEJpYmxpb3RlY2EgRGlnaXRhbCBkYSBQb250aWY/Y2lhIFVuaXZlcnNpZGFkZSBDYXQ/bGljYSBkbyBSaW8gR3JhbmRlIGRvIFN1bCwgc2VkaWFkYSBhIEF2LiBJcGlyYW5nYSA2NjgxLCBQb3J0byBBbGVncmUsIFJpbyBHcmFuZGUgZG8gU3VsLCBjb20gcmVnaXN0cm8gZGUgQ05QSiA4ODYzMDQxMzAwMDItODEgYmVtIGNvbW8gZW0gb3V0cmFzIGJpYmxpb3RlY2FzIGRpZ2l0YWlzLCBuYWNpb25haXMgZSBpbnRlcm5hY2lvbmFpcywgY29ucz9yY2lvcyBlIHJlZGVzID9zIHF1YWlzIGEgYmlibGlvdGVjYSBkYSBQVUNSUyBwb3NzYSBhIHZpciBwYXJ0aWNpcGFyLCBzZW0gP251cyBhbHVzaXZvIGFvcyBkaXJlaXRvcyBhdXRvcmFpcywgYSB0P3R1bG8gZGUgZGl2dWxnYT8/byBkYSBwcm9kdT8/byBjaWVudD9maWNhLgo=Biblioteca Digital de Teses e Dissertaçõeshttp://tede2.pucrs.br/tede2/PRIhttps://tede2.pucrs.br/oai/requestbiblioteca.central@pucrs.br||opendoar:2021-09-01T15:00:22Biblioteca Digital de Teses e Dissertações da PUC_RS - Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS)false
dc.title.por.fl_str_mv Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais
dc.title.alternative.eng.fl_str_mv A deep learning based model for the detection of doors and stairs to aid the visually impaired
title Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais
spellingShingle Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais
Nogueira Junior, Rodney Sales
Visão Computacional
Redes Neurais Convolucionais
Ambientes Internos
Deficientes Visuais
Computer Vision
Convolutional Neural Networks
Indoor Environments
Visually Impaired
CIENCIA DA COMPUTACAO::TEORIA DA COMPUTACAO
title_short Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais
title_full Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais
title_fullStr Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais
title_full_unstemmed Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais
title_sort Modelo baseado em deep learning para detecção de portas e escadas para auxiliar deficientes visuais
author Nogueira Junior, Rodney Sales
author_facet Nogueira Junior, Rodney Sales
author_role author
dc.contributor.advisor1.fl_str_mv Manssour, Isabel Harb
dc.contributor.advisor1Lattes.fl_str_mv http://lattes.cnpq.br/4904489502853690
dc.contributor.authorLattes.fl_str_mv http://lattes.cnpq.br/3387311288748384
dc.contributor.author.fl_str_mv Nogueira Junior, Rodney Sales
contributor_str_mv Manssour, Isabel Harb
dc.subject.por.fl_str_mv Visão Computacional
Redes Neurais Convolucionais
Ambientes Internos
Deficientes Visuais
topic Visão Computacional
Redes Neurais Convolucionais
Ambientes Internos
Deficientes Visuais
Computer Vision
Convolutional Neural Networks
Indoor Environments
Visually Impaired
CIENCIA DA COMPUTACAO::TEORIA DA COMPUTACAO
dc.subject.eng.fl_str_mv Computer Vision
Convolutional Neural Networks
Indoor Environments
Visually Impaired
dc.subject.cnpq.fl_str_mv CIENCIA DA COMPUTACAO::TEORIA DA COMPUTACAO
description Due to a large number of visually impaired persons in the world, and with the advance of technology, the research interest in the development of different approaches to support the mobility of these persons has increased. In this context, the detection of doorsand stairs is an important research topic because it provides useful information that can aid in the mobility of these persons. In this work, we present a model to aid the visually impaired navigation in indoor environments. We found approaches that use computer vision techniques to identify corridors, obstacles, stairs, and doors through a literature review. However, few of them use recent techniques in computer vision and convolutional neural networks in their solutions. Thus, the presented model includes an experiment on convolutional neural networks to recognize and detect doors and stairs. Using the YOLO method, we present a model that detects not only different kinds of doors but also is capable of differentiating ascending and descending stairs, with FPS rates close to 30 and mAP above 90%.
publishDate 2018
dc.date.issued.fl_str_mv 2018-08-29
dc.date.accessioned.fl_str_mv 2021-08-31T17:12:31Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://tede2.pucrs.br/tede2/handle/tede/9828
url http://tede2.pucrs.br/tede2/handle/tede/9828
dc.language.iso.fl_str_mv por
language por
dc.relation.program.fl_str_mv -4570527706994352458
dc.relation.confidence.fl_str_mv 500
500
dc.relation.cnpq.fl_str_mv -862078257083325301
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Pontifícia Universidade Católica do Rio Grande do Sul
dc.publisher.program.fl_str_mv Programa de Pós-Graduação em Ciência da Computação
dc.publisher.initials.fl_str_mv PUCRS
dc.publisher.country.fl_str_mv Brasil
dc.publisher.department.fl_str_mv Escola Politécnica
publisher.none.fl_str_mv Pontifícia Universidade Católica do Rio Grande do Sul
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da PUC_RS
instname:Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS)
instacron:PUC_RS
instname_str Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS)
instacron_str PUC_RS
institution PUC_RS
reponame_str Biblioteca Digital de Teses e Dissertações da PUC_RS
collection Biblioteca Digital de Teses e Dissertações da PUC_RS
bitstream.url.fl_str_mv http://tede2.pucrs.br/tede2/bitstream/tede/9828/3/RODNEY+SALES+NOGUEIRA+JR_DIS.pdf.jpg
http://tede2.pucrs.br/tede2/bitstream/tede/9828/4/RODNEY+SALES+NOGUEIRA+JR_DIS.pdf.txt
http://tede2.pucrs.br/tede2/bitstream/tede/9828/2/RODNEY+SALES+NOGUEIRA+JR_DIS.pdf
http://tede2.pucrs.br/tede2/bitstream/tede/9828/1/license.txt
bitstream.checksum.fl_str_mv 963775fd3cc05b957e83a60105550fcb
8b8dffadc4e591315f19e1fbb3e979fa
e399715c6ecf9da220b849a0b0688ae7
220e11f2d3ba5354f917c7035aadef24
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da PUC_RS - Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS)
repository.mail.fl_str_mv biblioteca.central@pucrs.br||
_version_ 1799765351614906368