Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo

Detalhes bibliográficos
Autor(a) principal: Pedernera Parada, Daniel Mauricio
Data de Publicação: 2017
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Repositório Institucional da UFPR
Texto Completo: https://hdl.handle.net/1884/55807
Resumo: Orientadora: Profa. Dra. Olga Regina Pereira Bellon
id UFPR_c8fbd16174181b5fded2e445f5c71175
oai_identifier_str oai:acervodigital.ufpr.br:1884/55807
network_acronym_str UFPR
network_name_str Repositório Institucional da UFPR
repository_id_str 308
spelling Pedernera Parada, Daniel MauricioBellon, Olga Regina Pereira, 1962-Universidade Federal do Paraná. Setor de Ciências Exatas. Programa de Pós-Graduação em Informática2018-09-21T13:15:49Z2018-09-21T13:15:49Z2017https://hdl.handle.net/1884/55807Orientadora: Profa. Dra. Olga Regina Pereira BellonDissertação (mestrado) - Universidade Federal do Paraná, Setor de Ciências Exatas, Programa de Pós-Graduação em Informática. Defesa : Curitiba, 16/12/2017Inclui referências: p.56-60Área de concentração: Ciência da ComputaçãoResumo: Neste trabalho, realiza-se o reconhecimento de Expressões Faciais Compostas (EFCs), em imagens 3D, nos ambientes de captura: forçado e espontâneo. Explora-se assim, uma moderna categorização de expressões faciais, diferente das expressões faciais básicas, por ser construída pela combinação de duas expressões básicas. A pesquisa se orienta através da utilização de imagens 3D por conta de suas vantagens intrínsecas: não apresentam problemas decorrentes de variações de pose, iluminação e de outras mudanças na aparência facial. Consideram-se dois ambientes de captura de expressões: forçado (quando o sujeito é instruído para realizar a expressão) e espontâneo (quando o sujeito produz a expressão por meio de estímulos). Isto, com a intenção de comparar o comportamento dos dois em relação ao reconhecimento de EFCs, já que, diferem em várias dimensões, incluindo dentre elas: complexidade, temporalidade e intensidade. Por fim, propõe-se um método para reconhecer EFCs. O método em questão representa uma nova aplicação de detectores de movimentos dos músculos faciais já existentes. Esses movimentos faciais detectar são denotados no sistema de codificação de ação facial (FACS) como Unidades de Ação (AUs). Consequentemente, implementam-se detectores de AUs em imagens 3D baseados em padrões binários locais de profundidade (LDBP). Posteriormente, o método foi aplicado em duas bases de dados públicas com imagens 3D: Bosphorus (ambiente forçado) e BP4D-Spontaneus (ambiente espontâneo). Nota-se que o método desenvolvido não diferencia as EFCs que apresentam a mesma configuração de AUs, sendo estas: "felicidade com nojo", "horror" e "impressão", por conseguinte, considera-se essas expressões como um "caso especial". Portanto, ponderaram-se 14 EFCs, mais o "caso especial" e imagens sem EFCs. Resultados obtidos evidenciam a existência de EFCs em imagens 3D, das quais aproveitaramse algumas características. Além disso, notou-se que o ambiente espontâneo, teve melhor comportamento em reconhecer EFCs tanto pelas AUs anotadas na base, quanto pelas AUs detectadas automaticamente; reconhecendo mais casos de EFCs e com melhor desempenho. Pelo nosso conhecimento, esta é a primeira vez que EFCs são investigadas em imagens 3D. Palavras-chave: Expressões faciais compostas, FACS, Detecção de AUs, Ambiente forçado, Ambiente espontâneo.Abstract: The following research investigates Compound Facial Expressions (EFCs) in 3D images captured in the domains: forced and spontaneous. The work explores a modern categorization of facial expressions, different than basic facial expressions, but constructed by the combination of two basic categories of emotion. The investigation used 3D images because of their intrinsic advantages: they do not present problems due to variations in pose, lighting and other changes in facial appearance. For this purpose, this research considers both forced (when the subject is instructed to perform the expression) and spontaneous (when the subject produces the expression by means of stimuli) expression caption domains. This has the intention of comparing the behavior of both domains by analyzing the recognition of EFCs, because they differ in many dimentions, including complexity, time and intensity. Finally, a method for EFCs recognition is proposed. The method in question represents a new application of existing detectors of facial muscle movements. These facial movimentes to detect are denoted in the Facial Action Coding System (FACS) as Action Units (AUs). Consequently, 3D Facial AUs Detectors are developed based on Local Depth Binary Patterns (LDBP). Subsequently, the method was applied to two public databases with 3D images: Bosphorus (forced domain) and BP4D-Spontaneous (spontaneous domain). Note that the developed method does not differentiate the EFCs that present the same AU configuration: "sadly disgusted", "appalled" and "hateful", therefore, these expressions are considered a "special case". Thus, 14 EFCs are observed, plus the "special case" and the non-EFCs images. The results confirm the existence of EFCs in 3D images, from which some characteristics were exploit. In addition, noticed that the spontaneous environment was better at recognizing EFCs by the AUs annotated at the database and by the AUs detected; recognizing more cases of EFCs and with better performance. From our best knowledge, this is the first time that EFCs are explored for 3D images. Keywords: Coumpound facial expression, FACS, AUs detection, posed domain, spontaneous domain.60 p. : il. (algumas color.).application/pdfReconhecimento de padrõesCiencia da computaçãoExpressão facialImagem tridimensionalTesesReconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneoinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisporreponame:Repositório Institucional da UFPRinstname:Universidade Federal do Paraná (UFPR)instacron:UFPRinfo:eu-repo/semantics/openAccessORIGINALR - D - Daniel Mauricio Pedernera Parada.pdfapplication/pdf9743189https://acervodigital.ufpr.br/bitstream/1884/55807/1/R%20-%20D%20-%20Daniel%20Mauricio%20Pedernera%20Parada.pdfc380c59b4cd1462ec9e902df66068ee6MD51open access1884/558072018-09-21 10:15:49.678open accessoai:acervodigital.ufpr.br:1884/55807Repositório de PublicaçõesPUBhttp://acervodigital.ufpr.br/oai/requestopendoar:3082018-09-21T13:15:49Repositório Institucional da UFPR - Universidade Federal do Paraná (UFPR)false
dc.title.pt_BR.fl_str_mv Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo
title Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo
spellingShingle Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo
Pedernera Parada, Daniel Mauricio
Reconhecimento de padrões
Ciencia da computação
Expressão facial
Imagem tridimensional
Teses
title_short Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo
title_full Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo
title_fullStr Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo
title_full_unstemmed Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo
title_sort Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo
author Pedernera Parada, Daniel Mauricio
author_facet Pedernera Parada, Daniel Mauricio
author_role author
dc.contributor.other.pt_BR.fl_str_mv Bellon, Olga Regina Pereira, 1962-
Universidade Federal do Paraná. Setor de Ciências Exatas. Programa de Pós-Graduação em Informática
dc.contributor.author.fl_str_mv Pedernera Parada, Daniel Mauricio
dc.subject.por.fl_str_mv Reconhecimento de padrões
Ciencia da computação
Expressão facial
Imagem tridimensional
Teses
topic Reconhecimento de padrões
Ciencia da computação
Expressão facial
Imagem tridimensional
Teses
description Orientadora: Profa. Dra. Olga Regina Pereira Bellon
publishDate 2017
dc.date.issued.fl_str_mv 2017
dc.date.accessioned.fl_str_mv 2018-09-21T13:15:49Z
dc.date.available.fl_str_mv 2018-09-21T13:15:49Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://hdl.handle.net/1884/55807
url https://hdl.handle.net/1884/55807
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 60 p. : il. (algumas color.).
application/pdf
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFPR
instname:Universidade Federal do Paraná (UFPR)
instacron:UFPR
instname_str Universidade Federal do Paraná (UFPR)
instacron_str UFPR
institution UFPR
reponame_str Repositório Institucional da UFPR
collection Repositório Institucional da UFPR
bitstream.url.fl_str_mv https://acervodigital.ufpr.br/bitstream/1884/55807/1/R%20-%20D%20-%20Daniel%20Mauricio%20Pedernera%20Parada.pdf
bitstream.checksum.fl_str_mv c380c59b4cd1462ec9e902df66068ee6
bitstream.checksumAlgorithm.fl_str_mv MD5
repository.name.fl_str_mv Repositório Institucional da UFPR - Universidade Federal do Paraná (UFPR)
repository.mail.fl_str_mv
_version_ 1813898816449937408