Síntese de animação facial expressiva baseada em modelos ocultos de markov

Detalhes bibliográficos
Autor(a) principal: Jesus Filho, Silvano Ressurreição de, 1991-
Data de Publicação: 2021
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)
Texto Completo: https://hdl.handle.net/20.500.12733/1641994
Resumo: Orientador: Paula Dornhofer Paro Costa
id UNICAMP-30_d5618ef86a6e290aa1ba55ef180588f0
oai_identifier_str oai::1166780
network_acronym_str UNICAMP-30
network_name_str Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)
repository_id_str
spelling Síntese de animação facial expressiva baseada em modelos ocultos de markovHMM-based expressive facial animation synthesisComputação gráficaAnimação por computadorExpressão facial - Simulação por computadorModelos markovianos ocultosComputer graphicsComputer-based animationFacial expression - Computer-based simulationHidden markov modelsOrientador: Paula Dornhofer Paro CostaDissertação (mestrado) - Universidade Estadual de Campinas, Faculdade de Engenharia Elétrica e de ComputaçãoResumo: Agentes conversacionais virtuais, ou talking heads, são representações em vídeo da face de um agente virtual, que simulam a fala de um interlocutor humano. São uma poderosa ferramenta de interface computacional, com potencial para tornar interações mais naturais e atraentes. Nesse contexto, o campo de Síntese de Animação Facial lida com a geração automática de vídeos de um agente virtual, a partir de um texto arbitrário ou de áudio produzido previamente. Em sistemas de síntese de animação baseados em texto, o desafio técnico pode ser separado em duas etapas: geração de trajetórias de articulação labial e demais movimentações faciais a partir de uma sequência de fonemas, e conversão dessas trajetórias em sequências de imagens finais. Este trabalho foca na primeira etapa. Um sistema, baseado em modelos ocultos de Markov, capaz de gerar trajetórias de movimentações a partir de textos arbitrários é descrito e avaliado. A implementação é realizada para o Português do Brasil e a modelagem leva em consideração a expressividade do agente, sendo capaz de gerar trajetórias para diferentes emoções. A abordagem de modelagem de variancia do sinal é utilizada pra reduzir o efeito de sobreamortecimentoAbstract: Virtual conversational agents, or talking heads, are a powerful computer interface tool that simulates human speech, potentially making computer interactions more natural and engaging. The Visual Speech Synthesis field deals with automatic generation of videos of virtual agents, from generic text or audio. For text-based visual speech synthesis, the technical challenge can be split in two parts: the automatic generation of trajectories of attributes that describe visual speech from sequenes of phonemes, and the rendering of those trajectories into actual videos. This research focus on the first problem. We describe a Hidden Markov Models based system for the synthesis of visual attributes for Brazilian Portuguese. We also explore the inclusion of contextual expressive information and the modelling of variance to improve the quality of the generated trajectoriesMestradoEngenharia de ComputaçãoMestre em Engenharia Elétrica[s.n.]Costa, Paula Dornhofer Paro, 1978-Runstein, Fernando OscarTavares, Tiago FernandesUniversidade Estadual de Campinas (UNICAMP). Faculdade de Engenharia Elétrica e de ComputaçãoPrograma de Pós-Graduação em Engenharia ElétricaUNIVERSIDADE ESTADUAL DE CAMPINASJesus Filho, Silvano Ressurreição de, 1991-20212021-05-28T00:00:00Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdf1 recurso online (63 p.) : il., digital, arquivo PDF.https://hdl.handle.net/20.500.12733/1641994JESUS FILHO, Silvano Ressurreição de. Síntese de animação facial expressiva baseada em modelos ocultos de markov. 2021. 1 recurso online (63 p.) Dissertação (mestrado) - Universidade Estadual de Campinas, Faculdade de Engenharia Elétrica e de Computação, Campinas, SP. Disponível em: https://hdl.handle.net/20.500.12733/1641994. Acesso em: 3 set. 2024.https://repositorio.unicamp.br/acervo/detalhe/1166780Requisitos do sistema: Software para leitura de arquivo em PDFporreponame:Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)instname:Universidade Estadual de Campinas (UNICAMP)instacron:UNICAMPinfo:eu-repo/semantics/openAccess2021-09-21T08:41:06Zoai::1166780Biblioteca Digital de Teses e DissertaçõesPUBhttp://repositorio.unicamp.br/oai/tese/oai.aspsbubd@unicamp.bropendoar:2021-09-21T08:41:06Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP) - Universidade Estadual de Campinas (UNICAMP)false
dc.title.none.fl_str_mv Síntese de animação facial expressiva baseada em modelos ocultos de markov
HMM-based expressive facial animation synthesis
title Síntese de animação facial expressiva baseada em modelos ocultos de markov
spellingShingle Síntese de animação facial expressiva baseada em modelos ocultos de markov
Jesus Filho, Silvano Ressurreição de, 1991-
Computação gráfica
Animação por computador
Expressão facial - Simulação por computador
Modelos markovianos ocultos
Computer graphics
Computer-based animation
Facial expression - Computer-based simulation
Hidden markov models
title_short Síntese de animação facial expressiva baseada em modelos ocultos de markov
title_full Síntese de animação facial expressiva baseada em modelos ocultos de markov
title_fullStr Síntese de animação facial expressiva baseada em modelos ocultos de markov
title_full_unstemmed Síntese de animação facial expressiva baseada em modelos ocultos de markov
title_sort Síntese de animação facial expressiva baseada em modelos ocultos de markov
author Jesus Filho, Silvano Ressurreição de, 1991-
author_facet Jesus Filho, Silvano Ressurreição de, 1991-
author_role author
dc.contributor.none.fl_str_mv Costa, Paula Dornhofer Paro, 1978-
Runstein, Fernando Oscar
Tavares, Tiago Fernandes
Universidade Estadual de Campinas (UNICAMP). Faculdade de Engenharia Elétrica e de Computação
Programa de Pós-Graduação em Engenharia Elétrica
UNIVERSIDADE ESTADUAL DE CAMPINAS
dc.contributor.author.fl_str_mv Jesus Filho, Silvano Ressurreição de, 1991-
dc.subject.por.fl_str_mv Computação gráfica
Animação por computador
Expressão facial - Simulação por computador
Modelos markovianos ocultos
Computer graphics
Computer-based animation
Facial expression - Computer-based simulation
Hidden markov models
topic Computação gráfica
Animação por computador
Expressão facial - Simulação por computador
Modelos markovianos ocultos
Computer graphics
Computer-based animation
Facial expression - Computer-based simulation
Hidden markov models
description Orientador: Paula Dornhofer Paro Costa
publishDate 2021
dc.date.none.fl_str_mv 2021
2021-05-28T00:00:00Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://hdl.handle.net/20.500.12733/1641994
JESUS FILHO, Silvano Ressurreição de. Síntese de animação facial expressiva baseada em modelos ocultos de markov. 2021. 1 recurso online (63 p.) Dissertação (mestrado) - Universidade Estadual de Campinas, Faculdade de Engenharia Elétrica e de Computação, Campinas, SP. Disponível em: https://hdl.handle.net/20.500.12733/1641994. Acesso em: 3 set. 2024.
url https://hdl.handle.net/20.500.12733/1641994
identifier_str_mv JESUS FILHO, Silvano Ressurreição de. Síntese de animação facial expressiva baseada em modelos ocultos de markov. 2021. 1 recurso online (63 p.) Dissertação (mestrado) - Universidade Estadual de Campinas, Faculdade de Engenharia Elétrica e de Computação, Campinas, SP. Disponível em: https://hdl.handle.net/20.500.12733/1641994. Acesso em: 3 set. 2024.
dc.language.iso.fl_str_mv por
language por
dc.relation.none.fl_str_mv https://repositorio.unicamp.br/acervo/detalhe/1166780
Requisitos do sistema: Software para leitura de arquivo em PDF
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
1 recurso online (63 p.) : il., digital, arquivo PDF.
dc.publisher.none.fl_str_mv [s.n.]
publisher.none.fl_str_mv [s.n.]
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)
instname:Universidade Estadual de Campinas (UNICAMP)
instacron:UNICAMP
instname_str Universidade Estadual de Campinas (UNICAMP)
instacron_str UNICAMP
institution UNICAMP
reponame_str Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)
collection Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP) - Universidade Estadual de Campinas (UNICAMP)
repository.mail.fl_str_mv sbubd@unicamp.br
_version_ 1809189176004837376

Registros relacionados