Aplicação de Língua Gestual Portuguesa num robô virtual com suporte em ROS

Detalhes bibliográficos
Autor(a) principal: Barbosa, Fábio André da Costa
Data de Publicação: 2019
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
Texto Completo: http://hdl.handle.net/1822/72200
Resumo: Dissertação de mestrado integrado em Engenharia Eletrónica Industrial e Computadores
id RCAP_fcddfe10644fcb4224226a191a780306
oai_identifier_str oai:repositorium.sdum.uminho.pt:1822/72200
network_acronym_str RCAP
network_name_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository_id_str 7160
spelling Aplicação de Língua Gestual Portuguesa num robô virtual com suporte em ROSPortuguese Sign Language Application in a virtual robot with ROS supportIHM (interação homem-máquina)Língua gestualMongoDBROSTradutor linguísticosHMI (human-machine interaction)Language translatorSign languageEngenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e InformáticaDissertação de mestrado integrado em Engenharia Eletrónica Industrial e ComputadoresNo mundo atual, verifica-se cada vez mais, o uso de novas tecnologias para tarefas do dia-a-dia ou então para resolução de problemas. Na última década tem-se verificado uma exploração exponencial em diversas áreas, incluindo robótica, que tem como um dos seus focos evoluir e dinamizar a interação entre o Homem e a Máquina, através da reprodução de sons para assim comunicar por uma Língua. Os indivíduos surdos e/ou mudos possuem deficiência na audição e/ou fala, tendo as- sim uma desvantagem no mundo social já que a comunicação por voz é predominante no quotidiano, havendo poucos que conseguem entendê-los. Dado isso, o objetivo do projeto é apoiar essas pessoas desenvolvendo uma plataforma robótica capaz de habilitar os robôs a conversar em Língua Gestual. O objetivo é criar uma infraestrutura capaz de traduzir Língua Portuguesa para Língua Gestual Portuguesa, desenvolvendo um robô virtual. No projeto usou-se um midleware open-source que é focado no desenvolvimento de robôs, designado em português, de sistema operativo de robôs. Este tem vindo a ser cada vez mais habitual entre quem desenvolve robôs, por fornecer bibliotecas e ferramentas prontas a serem usadas. Com este middleware consegue-se integrar bem com vários simu- ladores, facilitando a criação de um robô humanoide virtual. Neste projeto desenvolveu-se uma prova de conceito, mas, pensando na escalabilidade do sistema, foi desenvolvida uma base de dados com MongoDB, para o sistema guardar as propriedades de cada gesto e uma interface gráfica para ser mais fácil de usar e visualizar o robô a traduzir. Finalmente, o sistema proposto foi avaliado por um grupo de pessoas bilingues, que permitiu detetar algumas limitações do sistema e validar a aplicabilidade deste em edifícios públicos. Face aos testes, este projeto provou obter grande sucesso nos objetivos propostos.Our world is increasingly using new technologies for day-to-day tasks or for problem solving. In the last decade there has been an exponential exploration in several areas, including robotics, which has as one of its focuses evolve and dynamize the interaction between Man and Machine, through the reproduction of sounds to communicate in a language. Deaf and/or mute individuals are deficient in hearing and/or speech, thus having a disadvantage in the social world since voice communication is predominant in everyday life, with few who can understand them. Given that, the goal of the project is to support these people by developing a robotic platform capable of enabling robots to talk in Sign Language. The goal is to create an infrastructure capable of translating Portuguese to Portuguese Sign Language, developing a virtual robot. An open-source middleware was used for the project, which focuses mainly on robot development, robotic operating system, that has become common among those who develop robots, by providing libraries and tools ready to be used. This middleware can integrate well with several simulators, facilitating the creation of a virtual humanoid robot. In this project was developed a proof of concept but, thinking about the scalability of the system, a database was developed with MongoDB, for the system to save the properties of each gesture and a graphical interface to be easier to use and to visualize the robot translating. Finally, the proposed system was evaluated by a group of bilingual people, which al- lowed to detect some limitations of the system and to validate its applicability in public buildings. In the face of the tests, this project proved to achieve great success in the proposed objectives.Lopes, GilUniversidade do MinhoBarbosa, Fábio André da Costa20192019-01-01T00:00:00Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttp://hdl.handle.net/1822/72200por202672913info:eu-repo/semantics/openAccessreponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãoinstacron:RCAAP2023-07-21T12:52:16Zoai:repositorium.sdum.uminho.pt:1822/72200Portal AgregadorONGhttps://www.rcaap.pt/oai/openaireopendoar:71602024-03-19T19:51:21.073298Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãofalse
dc.title.none.fl_str_mv Aplicação de Língua Gestual Portuguesa num robô virtual com suporte em ROS
Portuguese Sign Language Application in a virtual robot with ROS support
title Aplicação de Língua Gestual Portuguesa num robô virtual com suporte em ROS
spellingShingle Aplicação de Língua Gestual Portuguesa num robô virtual com suporte em ROS
Barbosa, Fábio André da Costa
IHM (interação homem-máquina)
Língua gestual
MongoDB
ROS
Tradutor linguísticos
HMI (human-machine interaction)
Language translator
Sign language
Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e Informática
title_short Aplicação de Língua Gestual Portuguesa num robô virtual com suporte em ROS
title_full Aplicação de Língua Gestual Portuguesa num robô virtual com suporte em ROS
title_fullStr Aplicação de Língua Gestual Portuguesa num robô virtual com suporte em ROS
title_full_unstemmed Aplicação de Língua Gestual Portuguesa num robô virtual com suporte em ROS
title_sort Aplicação de Língua Gestual Portuguesa num robô virtual com suporte em ROS
author Barbosa, Fábio André da Costa
author_facet Barbosa, Fábio André da Costa
author_role author
dc.contributor.none.fl_str_mv Lopes, Gil
Universidade do Minho
dc.contributor.author.fl_str_mv Barbosa, Fábio André da Costa
dc.subject.por.fl_str_mv IHM (interação homem-máquina)
Língua gestual
MongoDB
ROS
Tradutor linguísticos
HMI (human-machine interaction)
Language translator
Sign language
Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e Informática
topic IHM (interação homem-máquina)
Língua gestual
MongoDB
ROS
Tradutor linguísticos
HMI (human-machine interaction)
Language translator
Sign language
Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e Informática
description Dissertação de mestrado integrado em Engenharia Eletrónica Industrial e Computadores
publishDate 2019
dc.date.none.fl_str_mv 2019
2019-01-01T00:00:00Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/1822/72200
url http://hdl.handle.net/1822/72200
dc.language.iso.fl_str_mv por
language por
dc.relation.none.fl_str_mv 202672913
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron:RCAAP
instname_str Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron_str RCAAP
institution RCAAP
reponame_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
collection Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository.name.fl_str_mv Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
repository.mail.fl_str_mv
_version_ 1799133102065319936

Registros relacionados