[en] EXPRESSIVE TALKING HEADS: EXPRESSIVE TALKING HEADS: A STUDY ON SPEECH AND FACIAL EXPRESSION IN VIRTUAL CHARACTERS

• Autor(a) principal: PAULA SALGADO LUCENA RODRIGUES
• Data de Publicação: 2005
• Tipo de documento: Outros
• Idioma: por
• Título da fonte: Repositório Institucional da PUC-RIO (Projeto Maxwell)
• Texto Completo: https://www.maxwell.vrac.puc-rio.br/colecao.php?strSecao=resultado&nrSeq=6525@1; https://www.maxwell.vrac.puc-rio.br/colecao.php?strSecao=resultado&nrSeq=6525@2; http://doi.org/10.17771/PUCRio.acad.6525
• topic: [pt] INTERACAO; [pt] APLICACAO MULTIMIDIA; [pt] ANIMACAO DE PERSONAGEM VIRTUAL; [pt] TEMPO REAL; [en] INTERACTION; [en] APPLICATION MULTIMEDIA; [en] ANIMATION OF VIRTUAL PERSONAGE; [en] REAL-TIME

[pt] A face humana é interessante e desafiadora acima de tudo pela sua familiaridade. Essencialmente, é a parte do corpo utilizada para reconhecer indivíduos. Assim como a face, a fala é um importante instrumento na forma de comunicação do ser humano. Através da fala é possível externar pensamentos e, muitas vezes, ela indica o estado de ânimo em que uma pessoa se encontra. Juntos, fala e face são os principais elementos de interatividade entre os seres humanos. Contudo, reproduzir com naturalidade e fidelidade as peculiaridades destes dois elementos no universo computacional não é uma tarefa simples, constituindo-se em tópicos de pesquisa em diversas áreas, em particular na animação facial. Entre os diversos tipos de sistemas de animação facial, destacam-se como diretamente relacionados a este trabalho aqueles que envolvem a sincronização da fala de um personagem com a animação da sua face. Sistemas desse tipo são conhecidos como talking head ou talking face. Para o desenvolvimento de um sistema talking head, é necessário identificar as possíveis abordagens para a modelagem dos dois elementos básicos: fala e face. Os modelos utilizados irão influenciar não apenas a maneira como a animação é conduzida, mas a própria forma de interatividade do sistema. Uma contribuição importante deste trabalho é o estudo das possíveis abordagens e a proposta de uma taxonomia para a classificação de sistemas talking head. A partir da taxonomia proposta e fazendo uso de uma determinada abordagem para cada parâmetro analisado, foi desenvolvida uma aplicação que recebe como entrada um texto contendo a fala e anotações de expressividade e gera como saída, em tempo real, a animação de um personagem virtual enunciando o texto de entrada com o áudio e os movimentos faciais sincronizados. O sistema desenvolvido, denominado Expressive Talking Heads, explora a naturalidade da animação facial e ao mesmo tempo busca oferecer ao usuário uma interface com interatividade em tempo real. O Expressive Talking Heads pode ser executado tanto no modo isolado (stand alone) como acoplado a navegadores para a web, tendo sido projetado e desenvolvido com a preocupação de oferecer uma solução independente da plataforma e do sistema operacional utilizados.