Reconhecimento e Geração de Áudio de Sinais de Libras utilizando Visão Computacional e Redes Neurais Convolucionais

Detalhes bibliográficos
Autor(a) principal: Silva, João Lucas Ferreira
Data de Publicação: 2024
Tipo de documento: Trabalho de conclusão de curso
Idioma: por
Título da fonte: Repositório Institucional da UFSC
Texto Completo: https://repositorio.ufsc.br/handle/123456789/256015
Resumo: TCC (graduação) - Universidade Federal de Santa Catarina, Campus Blumenau, Engenharia de Controle e Automação.
id UFSC_ce0edc2a9e62a5d383cf6f9f1734e3bc
oai_identifier_str oai:repositorio.ufsc.br:123456789/256015
network_acronym_str UFSC
network_name_str Repositório Institucional da UFSC
repository_id_str 2373
spelling Reconhecimento e Geração de Áudio de Sinais de Libras utilizando Visão Computacional e Redes Neurais ConvolucionaisLibrasVisão ComputacionalAprendizado de MáquinaRedes NeuraisTCC (graduação) - Universidade Federal de Santa Catarina, Campus Blumenau, Engenharia de Controle e Automação.A Língua Brasileira de Sinais (LIBRAS) é utilizada por mais de 2 milhões de indivíduos, tornando-se cada vez mais essencial desenvolver tecnologias que auxiliem na inclusão dos surdos e deficientes auditivos na comunicação com o restante da comunidade. O presente trabalho apresenta um modelo computacional que utiliza visão computacional e redes neurais para tradução em tempo real de algumas letras do alfabeto em LIBRAS, integrado com um sintetizador de voz. Foram desenvolvidas e analisadas redes neurais CNN, FFCNN e VGG16, que apresentaram excelentes resultados, com acurácias acima de 99,3%. A rede FFCNN destacou-se com a maior acurácia, alcançando 99,9%. Todo o desenvolvimento foi realizado em plataforma em nuvem, permitindo a execução em máquinas de baixa performance.Brazilian Sign Language (LIBRAS) is used by over 2 million individuals, making it incre asingly essential to develop technologies that aid in the inclusion of the deaf and hard of hearing in communication with the rest of the community. This work presents a computa tional model that utilizes computer vision and neural networks for real-time translation of some letters of the alphabet in LIBRAS, integrated with a voice synthesizer. CNN, FFCNN, and VGG16 neural networks were developed and analyzed, showing excellent results with accuracies above 99.3%. The FFCNN network stood out with the highest accuracy, reaching 99.9%. All development was conducted on a cloud platform, enabling execution on low-performance machines.Blumenau, SC.Ferrandin, MauriUniversidade Federal de Santa Catarina.Silva, João Lucas Ferreira2024-07-12T18:35:51Z2024-07-12T18:35:51Z2024-07-05info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/bachelorThesis53application/pdfhttps://repositorio.ufsc.br/handle/123456789/256015Open Access.info:eu-repo/semantics/openAccessporreponame:Repositório Institucional da UFSCinstname:Universidade Federal de Santa Catarina (UFSC)instacron:UFSC2024-07-12T18:35:51Zoai:repositorio.ufsc.br:123456789/256015Repositório InstitucionalPUBhttp://150.162.242.35/oai/requestopendoar:23732024-07-12T18:35:51Repositório Institucional da UFSC - Universidade Federal de Santa Catarina (UFSC)false
dc.title.none.fl_str_mv Reconhecimento e Geração de Áudio de Sinais de Libras utilizando Visão Computacional e Redes Neurais Convolucionais
title Reconhecimento e Geração de Áudio de Sinais de Libras utilizando Visão Computacional e Redes Neurais Convolucionais
spellingShingle Reconhecimento e Geração de Áudio de Sinais de Libras utilizando Visão Computacional e Redes Neurais Convolucionais
Silva, João Lucas Ferreira
Libras
Visão Computacional
Aprendizado de Máquina
Redes Neurais
title_short Reconhecimento e Geração de Áudio de Sinais de Libras utilizando Visão Computacional e Redes Neurais Convolucionais
title_full Reconhecimento e Geração de Áudio de Sinais de Libras utilizando Visão Computacional e Redes Neurais Convolucionais
title_fullStr Reconhecimento e Geração de Áudio de Sinais de Libras utilizando Visão Computacional e Redes Neurais Convolucionais
title_full_unstemmed Reconhecimento e Geração de Áudio de Sinais de Libras utilizando Visão Computacional e Redes Neurais Convolucionais
title_sort Reconhecimento e Geração de Áudio de Sinais de Libras utilizando Visão Computacional e Redes Neurais Convolucionais
author Silva, João Lucas Ferreira
author_facet Silva, João Lucas Ferreira
author_role author
dc.contributor.none.fl_str_mv Ferrandin, Mauri
Universidade Federal de Santa Catarina.
dc.contributor.author.fl_str_mv Silva, João Lucas Ferreira
dc.subject.por.fl_str_mv Libras
Visão Computacional
Aprendizado de Máquina
Redes Neurais
topic Libras
Visão Computacional
Aprendizado de Máquina
Redes Neurais
description TCC (graduação) - Universidade Federal de Santa Catarina, Campus Blumenau, Engenharia de Controle e Automação.
publishDate 2024
dc.date.none.fl_str_mv 2024-07-12T18:35:51Z
2024-07-12T18:35:51Z
2024-07-05
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/bachelorThesis
format bachelorThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://repositorio.ufsc.br/handle/123456789/256015
url https://repositorio.ufsc.br/handle/123456789/256015
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv Open Access.
info:eu-repo/semantics/openAccess
rights_invalid_str_mv Open Access.
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 53
application/pdf
dc.publisher.none.fl_str_mv Blumenau, SC.
publisher.none.fl_str_mv Blumenau, SC.
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFSC
instname:Universidade Federal de Santa Catarina (UFSC)
instacron:UFSC
instname_str Universidade Federal de Santa Catarina (UFSC)
instacron_str UFSC
institution UFSC
reponame_str Repositório Institucional da UFSC
collection Repositório Institucional da UFSC
repository.name.fl_str_mv Repositório Institucional da UFSC - Universidade Federal de Santa Catarina (UFSC)
repository.mail.fl_str_mv
_version_ 1808652146409734144