Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo
Autor(a) principal: | |
---|---|
Data de Publicação: | 2017 |
Tipo de documento: | Dissertação |
Idioma: | por |
Título da fonte: | Repositório Institucional da UFPR |
Texto Completo: | https://hdl.handle.net/1884/55807 |
Resumo: | Orientadora: Profa. Dra. Olga Regina Pereira Bellon |
id |
UFPR_c8fbd16174181b5fded2e445f5c71175 |
---|---|
oai_identifier_str |
oai:acervodigital.ufpr.br:1884/55807 |
network_acronym_str |
UFPR |
network_name_str |
Repositório Institucional da UFPR |
repository_id_str |
308 |
spelling |
Pedernera Parada, Daniel MauricioBellon, Olga Regina Pereira, 1962-Universidade Federal do Paraná. Setor de Ciências Exatas. Programa de Pós-Graduação em Informática2018-09-21T13:15:49Z2018-09-21T13:15:49Z2017https://hdl.handle.net/1884/55807Orientadora: Profa. Dra. Olga Regina Pereira BellonDissertação (mestrado) - Universidade Federal do Paraná, Setor de Ciências Exatas, Programa de Pós-Graduação em Informática. Defesa : Curitiba, 16/12/2017Inclui referências: p.56-60Área de concentração: Ciência da ComputaçãoResumo: Neste trabalho, realiza-se o reconhecimento de Expressões Faciais Compostas (EFCs), em imagens 3D, nos ambientes de captura: forçado e espontâneo. Explora-se assim, uma moderna categorização de expressões faciais, diferente das expressões faciais básicas, por ser construída pela combinação de duas expressões básicas. A pesquisa se orienta através da utilização de imagens 3D por conta de suas vantagens intrínsecas: não apresentam problemas decorrentes de variações de pose, iluminação e de outras mudanças na aparência facial. Consideram-se dois ambientes de captura de expressões: forçado (quando o sujeito é instruído para realizar a expressão) e espontâneo (quando o sujeito produz a expressão por meio de estímulos). Isto, com a intenção de comparar o comportamento dos dois em relação ao reconhecimento de EFCs, já que, diferem em várias dimensões, incluindo dentre elas: complexidade, temporalidade e intensidade. Por fim, propõe-se um método para reconhecer EFCs. O método em questão representa uma nova aplicação de detectores de movimentos dos músculos faciais já existentes. Esses movimentos faciais detectar são denotados no sistema de codificação de ação facial (FACS) como Unidades de Ação (AUs). Consequentemente, implementam-se detectores de AUs em imagens 3D baseados em padrões binários locais de profundidade (LDBP). Posteriormente, o método foi aplicado em duas bases de dados públicas com imagens 3D: Bosphorus (ambiente forçado) e BP4D-Spontaneus (ambiente espontâneo). Nota-se que o método desenvolvido não diferencia as EFCs que apresentam a mesma configuração de AUs, sendo estas: "felicidade com nojo", "horror" e "impressão", por conseguinte, considera-se essas expressões como um "caso especial". Portanto, ponderaram-se 14 EFCs, mais o "caso especial" e imagens sem EFCs. Resultados obtidos evidenciam a existência de EFCs em imagens 3D, das quais aproveitaramse algumas características. Além disso, notou-se que o ambiente espontâneo, teve melhor comportamento em reconhecer EFCs tanto pelas AUs anotadas na base, quanto pelas AUs detectadas automaticamente; reconhecendo mais casos de EFCs e com melhor desempenho. Pelo nosso conhecimento, esta é a primeira vez que EFCs são investigadas em imagens 3D. Palavras-chave: Expressões faciais compostas, FACS, Detecção de AUs, Ambiente forçado, Ambiente espontâneo.Abstract: The following research investigates Compound Facial Expressions (EFCs) in 3D images captured in the domains: forced and spontaneous. The work explores a modern categorization of facial expressions, different than basic facial expressions, but constructed by the combination of two basic categories of emotion. The investigation used 3D images because of their intrinsic advantages: they do not present problems due to variations in pose, lighting and other changes in facial appearance. For this purpose, this research considers both forced (when the subject is instructed to perform the expression) and spontaneous (when the subject produces the expression by means of stimuli) expression caption domains. This has the intention of comparing the behavior of both domains by analyzing the recognition of EFCs, because they differ in many dimentions, including complexity, time and intensity. Finally, a method for EFCs recognition is proposed. The method in question represents a new application of existing detectors of facial muscle movements. These facial movimentes to detect are denoted in the Facial Action Coding System (FACS) as Action Units (AUs). Consequently, 3D Facial AUs Detectors are developed based on Local Depth Binary Patterns (LDBP). Subsequently, the method was applied to two public databases with 3D images: Bosphorus (forced domain) and BP4D-Spontaneous (spontaneous domain). Note that the developed method does not differentiate the EFCs that present the same AU configuration: "sadly disgusted", "appalled" and "hateful", therefore, these expressions are considered a "special case". Thus, 14 EFCs are observed, plus the "special case" and the non-EFCs images. The results confirm the existence of EFCs in 3D images, from which some characteristics were exploit. In addition, noticed that the spontaneous environment was better at recognizing EFCs by the AUs annotated at the database and by the AUs detected; recognizing more cases of EFCs and with better performance. From our best knowledge, this is the first time that EFCs are explored for 3D images. Keywords: Coumpound facial expression, FACS, AUs detection, posed domain, spontaneous domain.60 p. : il. (algumas color.).application/pdfReconhecimento de padrõesCiencia da computaçãoExpressão facialImagem tridimensionalTesesReconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneoinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisporreponame:Repositório Institucional da UFPRinstname:Universidade Federal do Paraná (UFPR)instacron:UFPRinfo:eu-repo/semantics/openAccessORIGINALR - D - Daniel Mauricio Pedernera Parada.pdfapplication/pdf9743189https://acervodigital.ufpr.br/bitstream/1884/55807/1/R%20-%20D%20-%20Daniel%20Mauricio%20Pedernera%20Parada.pdfc380c59b4cd1462ec9e902df66068ee6MD51open access1884/558072018-09-21 10:15:49.678open accessoai:acervodigital.ufpr.br:1884/55807Repositório de PublicaçõesPUBhttp://acervodigital.ufpr.br/oai/requestopendoar:3082018-09-21T13:15:49Repositório Institucional da UFPR - Universidade Federal do Paraná (UFPR)false |
dc.title.pt_BR.fl_str_mv |
Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo |
title |
Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo |
spellingShingle |
Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo Pedernera Parada, Daniel Mauricio Reconhecimento de padrões Ciencia da computação Expressão facial Imagem tridimensional Teses |
title_short |
Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo |
title_full |
Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo |
title_fullStr |
Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo |
title_full_unstemmed |
Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo |
title_sort |
Reconhecimento de expressões faciais compostas em imagens 3D : ambiente forçado vs ambiente espontâneo |
author |
Pedernera Parada, Daniel Mauricio |
author_facet |
Pedernera Parada, Daniel Mauricio |
author_role |
author |
dc.contributor.other.pt_BR.fl_str_mv |
Bellon, Olga Regina Pereira, 1962- Universidade Federal do Paraná. Setor de Ciências Exatas. Programa de Pós-Graduação em Informática |
dc.contributor.author.fl_str_mv |
Pedernera Parada, Daniel Mauricio |
dc.subject.por.fl_str_mv |
Reconhecimento de padrões Ciencia da computação Expressão facial Imagem tridimensional Teses |
topic |
Reconhecimento de padrões Ciencia da computação Expressão facial Imagem tridimensional Teses |
description |
Orientadora: Profa. Dra. Olga Regina Pereira Bellon |
publishDate |
2017 |
dc.date.issued.fl_str_mv |
2017 |
dc.date.accessioned.fl_str_mv |
2018-09-21T13:15:49Z |
dc.date.available.fl_str_mv |
2018-09-21T13:15:49Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
format |
masterThesis |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
https://hdl.handle.net/1884/55807 |
url |
https://hdl.handle.net/1884/55807 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
60 p. : il. (algumas color.). application/pdf |
dc.source.none.fl_str_mv |
reponame:Repositório Institucional da UFPR instname:Universidade Federal do Paraná (UFPR) instacron:UFPR |
instname_str |
Universidade Federal do Paraná (UFPR) |
instacron_str |
UFPR |
institution |
UFPR |
reponame_str |
Repositório Institucional da UFPR |
collection |
Repositório Institucional da UFPR |
bitstream.url.fl_str_mv |
https://acervodigital.ufpr.br/bitstream/1884/55807/1/R%20-%20D%20-%20Daniel%20Mauricio%20Pedernera%20Parada.pdf |
bitstream.checksum.fl_str_mv |
c380c59b4cd1462ec9e902df66068ee6 |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 |
repository.name.fl_str_mv |
Repositório Institucional da UFPR - Universidade Federal do Paraná (UFPR) |
repository.mail.fl_str_mv |
|
_version_ |
1813898816449937408 |