Método para reconhecimento em tempo real de expressões faciais em grupos utilizando redes neurais convolucionais

Detalhes bibliográficos
Autor(a) principal: Canal, Felipe Zago
Data de Publicação: 2024
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Repositório Institucional da UFSC
Texto Completo: https://repositorio.ufsc.br/handle/123456789/254899
Resumo: Dissertação (mestrado) - Universidade Federal de Santa Catarina, Campus Araranguá, Programa de Pós-Graduação em Tecnologias da Informação e Comunicação, Araranguá, 2024.
id UFSC_7120f3162c641f99238c30ca54b0889d
oai_identifier_str oai:repositorio.ufsc.br:123456789/254899
network_acronym_str UFSC
network_name_str Repositório Institucional da UFSC
repository_id_str 2373
spelling Método para reconhecimento em tempo real de expressões faciais em grupos utilizando redes neurais convolucionaisTecnologias da informação e comunicaçãoInteligência artificialPercepção facialRedes neurais (Computação)Dissertação (mestrado) - Universidade Federal de Santa Catarina, Campus Araranguá, Programa de Pós-Graduação em Tecnologias da Informação e Comunicação, Araranguá, 2024.Com a evolução das Novas Tecnologias da Informação e Comunicação (NTICs), o setor educacional, assim como diversos outros setores da sociedade, se beneficiam com aplicações e soluções nas mais diversas áreas. A adoção de novas ferramentas com Inteligência Artificial (IA) para auxiliar professores e estudantes no processo de ensino-aprendizado é essencial e frequente neste contexto, especialmente devido às mudanças das dinâmicas sociais dos últimos anos, desencadeadas pela pandemia da COVID-19. Este trabalho aborda a aplicação de (NTICs) no reconhecimento de expressões faciais em grupos, uma área de interesse crescente devido ao seu potencial nestes ambientes e outros contextos sociais. A pesquisa centrou-se no desenvolvimento e aplicação de um modelo de IA baseado em Redes Neurais Convolucionais (CNNs), utilizando uma técnica de transferência de aprendizagem sobre o modelo MobileNetV2, ajustado para classificações de sete expressões básicas. A metodologia envolve a seleção do conjunto de dados FER-2013 para treinar o modelo, seguida por um processo de treinamento e validação que fornece métricas como precisão, recall, e F1-score. A acurácia obtida no conjunto de teste foi de 68,57% em média para todas as expressões comuns. Um comparativo com trabalhos relacionados revelou que o modelo apresenta resultados promissores, superando a maioria das outras abordagens baseadas no mesmo conjunto de dados. A análise destacou a importância de conjuntos de dados representativos e a necessidade de considerar a variabilidade e sutileza das expressões humanas. Uma aplicação prática do software foi realizada em um grupo de alunos, onde o modelo operou em tempo real e demonstrou eficiência na captura de expressões aparentes, alcançando uma mídia de 12 frames por segundo (FPS). O experimento realçou tanto a eficácia quanto os desafios do modelo em capturar a dinâmica das expressões em um ambiente coletivo e reativo. As instruções do experimento apontam para a importância de continuar refinando a tecnologia de reconhecimento facial, levando em consideração a diversidade das expressões humanas e as nuances das interações grupais. O trabalho demonstrou que, apesar do potencial significativo, a aplicação efetiva do reconhecimento facial em grupos requer um entendimento profundo do comportamento humano e adaptações para contextos específicos. Este trabalho contribui para o avanço da pesquisa, fornecendo percepções importantes para futuros desenvolvimentos e aplicações.Abstract: With the evolution of New Information and Communication Technologies (NTICs), the educational sector, along with various other sectors of the society, has benefited from applications and solutions in the most diverse areas. The adoption of new tools with Artificial Intelligence (IA) to assist teachers and students in the teaching-learning process is essential and frequent in this context, especially due to changes in social dynamics in recent years, triggered by the COVID-19 pandemic. This work addresses the application of NTICs in the recognition of facial expressions in groups, an area of growing interest due to its potential in these environments and other social contexts. The research focused on the development and application of an IA model based on Convolutional Neural Networks (CNNs), using the technique of transfer learning on the MobileNetV2 model, adjusted to classify seven basic facial expressions. The methodology involved the selection of the FER-2013 dataset to train the model, followed by a training and validation processes that used metrics such as precision, recall, and F1-score. The accuracy obtained in the test set was 68.57% on average for all classified expressions. A comparison with related works revealed that the model presents promising results, outperforming most other approaches based on the same dataset. The analysis highlighted the importance of representative datasets and the need to consider the variability and subtlety of human expressions. A practical application of the software was carried out in a group of students, where the model operated in real-time and demonstrated efficiency in capturing facial expressions, achieving an average of 12 frames per second (FPS). The experiment highlighted both the efficacy and the challenges of the model in capturing the dynamics of expressions in a collective and reactive environment. The conclusions of the experiment point to the importance of continuing to refine facial recognition technology, taking into account the diversity of human expressions and the nuances of group interactions. The work demonstrated that, despite significant potential, the effective application of facial recognition in groups requires a deep understanding of human behavior and adaptations for specific contexts. This work contributes to the advancement of research, providing valuable insights for future developments and applications.Pozzebon, ElianeSobieranski, Antonio CarlosUniversidade Federal de Santa CatarinaCanal, Felipe Zago2024-04-02T23:24:17Z2024-04-02T23:24:17Z2024info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesis79 p.| il., gráfs., tabs.application/pdf386725https://repositorio.ufsc.br/handle/123456789/254899porreponame:Repositório Institucional da UFSCinstname:Universidade Federal de Santa Catarina (UFSC)instacron:UFSCinfo:eu-repo/semantics/openAccess2024-04-02T23:24:17Zoai:repositorio.ufsc.br:123456789/254899Repositório InstitucionalPUBhttp://150.162.242.35/oai/requestopendoar:23732024-04-02T23:24:17Repositório Institucional da UFSC - Universidade Federal de Santa Catarina (UFSC)false
dc.title.none.fl_str_mv Método para reconhecimento em tempo real de expressões faciais em grupos utilizando redes neurais convolucionais
title Método para reconhecimento em tempo real de expressões faciais em grupos utilizando redes neurais convolucionais
spellingShingle Método para reconhecimento em tempo real de expressões faciais em grupos utilizando redes neurais convolucionais
Canal, Felipe Zago
Tecnologias da informação e comunicação
Inteligência artificial
Percepção facial
Redes neurais (Computação)
title_short Método para reconhecimento em tempo real de expressões faciais em grupos utilizando redes neurais convolucionais
title_full Método para reconhecimento em tempo real de expressões faciais em grupos utilizando redes neurais convolucionais
title_fullStr Método para reconhecimento em tempo real de expressões faciais em grupos utilizando redes neurais convolucionais
title_full_unstemmed Método para reconhecimento em tempo real de expressões faciais em grupos utilizando redes neurais convolucionais
title_sort Método para reconhecimento em tempo real de expressões faciais em grupos utilizando redes neurais convolucionais
author Canal, Felipe Zago
author_facet Canal, Felipe Zago
author_role author
dc.contributor.none.fl_str_mv Pozzebon, Eliane
Sobieranski, Antonio Carlos
Universidade Federal de Santa Catarina
dc.contributor.author.fl_str_mv Canal, Felipe Zago
dc.subject.por.fl_str_mv Tecnologias da informação e comunicação
Inteligência artificial
Percepção facial
Redes neurais (Computação)
topic Tecnologias da informação e comunicação
Inteligência artificial
Percepção facial
Redes neurais (Computação)
description Dissertação (mestrado) - Universidade Federal de Santa Catarina, Campus Araranguá, Programa de Pós-Graduação em Tecnologias da Informação e Comunicação, Araranguá, 2024.
publishDate 2024
dc.date.none.fl_str_mv 2024-04-02T23:24:17Z
2024-04-02T23:24:17Z
2024
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv 386725
https://repositorio.ufsc.br/handle/123456789/254899
identifier_str_mv 386725
url https://repositorio.ufsc.br/handle/123456789/254899
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 79 p.| il., gráfs., tabs.
application/pdf
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFSC
instname:Universidade Federal de Santa Catarina (UFSC)
instacron:UFSC
instname_str Universidade Federal de Santa Catarina (UFSC)
instacron_str UFSC
institution UFSC
reponame_str Repositório Institucional da UFSC
collection Repositório Institucional da UFSC
repository.name.fl_str_mv Repositório Institucional da UFSC - Universidade Federal de Santa Catarina (UFSC)
repository.mail.fl_str_mv
_version_ 1808652201112895488

Registros relacionados