Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase.

Detalhes bibliográficos
Autor(a) principal: MOTA, Moisés Roberto de Araújo.
Data de Publicação: 2020
Tipo de documento: Tese
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da UFCG
Texto Completo: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950
Resumo: Emoções são importantes para os seres humanos, influencia nosso comportamento social, memória e cognição. A área da computação afetiva visa a auxiliar na compreensão dos fenômenos emocionais humanos utilizando sistemas computacionais para isso. Neste contexto, definir, caracterizar e classificar emoções e suas partes constituintes a partir de sinais fisiológicos, como sinais de eletroencefalograma (EEG), expressões faciais, etc., é uma tarefa desafiadora. No entanto, ainda não se conhece um conjunto de características ótimas para o reconhecimento de emoções a partir de sinais de EEG, apesar de existirem características como PSD (power spectral density) e HOC (higher-order crossings), amplamente utilizadas pela comunidade científica. Novas pesquisas têm conseguido avançar substancialmente o estado da arte no que diz respeito ao reconhecimento de emoções a partir de EEG ao considerarem o emprego de características extraídas do espaço de fase desses sinais e classificadores baseados em técnicas de deep learning. Neste contexto, a presente tese investigou o emprego de imagens de reconstrução do espaço de fase de sinais de EEG, que são submetidas à uma rede convolucional 3D (uma das técnicas de deep learning), para aprender automaticamente características do espaço de fase de sinais de EEG para reconhecer diferentes estados emocionais de modo independente do indivíduo. Os resultados dos experimentos demonstraram a viabilidade e competitividade da abordagem proposta utilizando imagens de reconstrução do espaço de fase empilhadas de, apenas um canal de EEG FP1, alcançando acurácias de 0, 84 ± 0, 07, para quatro classes de valência-excitação, e 0, 88 ± 0, 05 para duas classes de valência e 0, 94 ± 0, 01 para duas classes de excitação, ambos utilizando a metodologia de treinamento e classificação do tipo LOSO (leave-one-subject-out). Esses resultados, além de reduzir a quantidade de canais necessários para a classificação ao mínimo possível, contribui para avançar o estado da arte ao apresentar uma nova abordagem para a classificação de emoções a partir de sinais de EEG.
id UFCG_ea0b6d0fdac96460c1b94cc7d0d5c7d4
oai_identifier_str oai:localhost:riufcg/15950
network_acronym_str UFCG
network_name_str Biblioteca Digital de Teses e Dissertações da UFCG
repository_id_str 4851
spelling Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase.Recognition of emotions in EEG signals via deep learning and phase space reconstructionEmotionsElectroencephalogramStacked phaseSpace images3D convolutional networkEmoçõesEletroencefalogramaElectroencefalogramaEmocionesImagens de espaçoFase empilhadasImágenes del espacioEtapa apiladaRede convolucional 3DRed convolucional 3DCiência da ComputaçãoEmoções são importantes para os seres humanos, influencia nosso comportamento social, memória e cognição. A área da computação afetiva visa a auxiliar na compreensão dos fenômenos emocionais humanos utilizando sistemas computacionais para isso. Neste contexto, definir, caracterizar e classificar emoções e suas partes constituintes a partir de sinais fisiológicos, como sinais de eletroencefalograma (EEG), expressões faciais, etc., é uma tarefa desafiadora. No entanto, ainda não se conhece um conjunto de características ótimas para o reconhecimento de emoções a partir de sinais de EEG, apesar de existirem características como PSD (power spectral density) e HOC (higher-order crossings), amplamente utilizadas pela comunidade científica. Novas pesquisas têm conseguido avançar substancialmente o estado da arte no que diz respeito ao reconhecimento de emoções a partir de EEG ao considerarem o emprego de características extraídas do espaço de fase desses sinais e classificadores baseados em técnicas de deep learning. Neste contexto, a presente tese investigou o emprego de imagens de reconstrução do espaço de fase de sinais de EEG, que são submetidas à uma rede convolucional 3D (uma das técnicas de deep learning), para aprender automaticamente características do espaço de fase de sinais de EEG para reconhecer diferentes estados emocionais de modo independente do indivíduo. Os resultados dos experimentos demonstraram a viabilidade e competitividade da abordagem proposta utilizando imagens de reconstrução do espaço de fase empilhadas de, apenas um canal de EEG FP1, alcançando acurácias de 0, 84 ± 0, 07, para quatro classes de valência-excitação, e 0, 88 ± 0, 05 para duas classes de valência e 0, 94 ± 0, 01 para duas classes de excitação, ambos utilizando a metodologia de treinamento e classificação do tipo LOSO (leave-one-subject-out). Esses resultados, além de reduzir a quantidade de canais necessários para a classificação ao mínimo possível, contribui para avançar o estado da arte ao apresentar uma nova abordagem para a classificação de emoções a partir de sinais de EEG.Emotions are important for human beings, it influences our social behavior, memory and cognition. The affective computing area aims to assist in the understanding of human emotional phenomena using computer systems for this. In this context, defining, charac- terizing and classifying emotions and their constituent parts based on physiological signals, such as electroencephalogram signals (EEG), facial expressions, etc, is a challenging task. However, a optimal characteristics set for recognizing emotions from EEG signals is not yet known, although there are characteristics such as PSD (power spectral density) and HOC (higher-order crossings), widely used by the scientific community. New researches have substantially advanced the state of the art with regard to the recognition of emotions from EEG when considering the use of characteristics extracted from the phase space of these signals and classifiers based on deep learning techniques. In this context, the present thesis investigated the use of reconstruction of the EEG signals images of phase space, which are subjected to a 3D convolutional network (one of the deep learning techniques), to automatically learn the EEG signal space phase characteristics to recognize different emotional states independently of the individual. The results of the experiments demonstrated the feasibility and competitiveness of the proposed approach using images of the stacked phase space reconstruction of only one EEG FP1 channel, reaching accuracy of 0, 84 ± 0, 07, for four valence-arousal classes, and 0, 88 ± 0, 05 for two valence classes and 0, 94 ± 0, 01 for two arousal classes, both using the training and classification methodology of the LOSO type (leave-one-subject-out). These results, in addition to reducing the number of channels required for classification to the minimum possible, contribute to advancing the state of the art by presenting a new approach to the emotions classification based on EEG signals.CNPqUniversidade Federal de Campina GrandeBrasilCentro de Engenharia Elétrica e Informática - CEEIPÓS-GRADUAÇÃO EM CIÊNCIA DA COMPUTAÇÃOUFCGGOMES, Herman Martins.GOMES, H. M.http://lattes.cnpq.br/4223020694433271PEREIRA, Eanes Torres.PEREIRA, E. T.http://lattes.cnpq.br/2030738304003254ARAÚJO, Joseana Macêdo Fechine Régis de.ALMEIDA, Carlos Wilson Dantas.ASSIS, Francisco Marcos de.BERNARDINO JUNIOR, Francisco Madeiro.MOTA, Moisés Roberto de Araújo.2020-03-302020-10-07T12:29:22Z2020-10-072020-10-07T12:29:22Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesishttp://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950MOTA, M. R. de A. Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. 2020. 115 f. Tese (Doutorado em Ciência da Computação) Programa de Pós-graduação em Ciência da Computação, Centro de Engenharia Elétrica e Informática, Universidade Federal de Campina Grande - Paraíba - Brasil, 2020. Disponível em: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950porinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UFCGinstname:Universidade Federal de Campina Grande (UFCG)instacron:UFCG2022-03-16T19:52:43Zoai:localhost:riufcg/15950Biblioteca Digital de Teses e Dissertaçõeshttp://bdtd.ufcg.edu.br/PUBhttp://dspace.sti.ufcg.edu.br:8080/oai/requestbdtd@setor.ufcg.edu.br || bdtd@setor.ufcg.edu.bropendoar:48512022-03-16T19:52:43Biblioteca Digital de Teses e Dissertações da UFCG - Universidade Federal de Campina Grande (UFCG)false
dc.title.none.fl_str_mv Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase.
Recognition of emotions in EEG signals via deep learning and phase space reconstruction
title Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase.
spellingShingle Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase.
MOTA, Moisés Roberto de Araújo.
Emotions
Electroencephalogram
Stacked phase
Space images
3D convolutional network
Emoções
Eletroencefalograma
Electroencefalograma
Emociones
Imagens de espaço
Fase empilhadas
Imágenes del espacio
Etapa apilada
Rede convolucional 3D
Red convolucional 3D
Ciência da Computação
title_short Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase.
title_full Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase.
title_fullStr Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase.
title_full_unstemmed Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase.
title_sort Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase.
author MOTA, Moisés Roberto de Araújo.
author_facet MOTA, Moisés Roberto de Araújo.
author_role author
dc.contributor.none.fl_str_mv GOMES, Herman Martins.
GOMES, H. M.
http://lattes.cnpq.br/4223020694433271
PEREIRA, Eanes Torres.
PEREIRA, E. T.
http://lattes.cnpq.br/2030738304003254
ARAÚJO, Joseana Macêdo Fechine Régis de.
ALMEIDA, Carlos Wilson Dantas.
ASSIS, Francisco Marcos de.
BERNARDINO JUNIOR, Francisco Madeiro.
dc.contributor.author.fl_str_mv MOTA, Moisés Roberto de Araújo.
dc.subject.por.fl_str_mv Emotions
Electroencephalogram
Stacked phase
Space images
3D convolutional network
Emoções
Eletroencefalograma
Electroencefalograma
Emociones
Imagens de espaço
Fase empilhadas
Imágenes del espacio
Etapa apilada
Rede convolucional 3D
Red convolucional 3D
Ciência da Computação
topic Emotions
Electroencephalogram
Stacked phase
Space images
3D convolutional network
Emoções
Eletroencefalograma
Electroencefalograma
Emociones
Imagens de espaço
Fase empilhadas
Imágenes del espacio
Etapa apilada
Rede convolucional 3D
Red convolucional 3D
Ciência da Computação
description Emoções são importantes para os seres humanos, influencia nosso comportamento social, memória e cognição. A área da computação afetiva visa a auxiliar na compreensão dos fenômenos emocionais humanos utilizando sistemas computacionais para isso. Neste contexto, definir, caracterizar e classificar emoções e suas partes constituintes a partir de sinais fisiológicos, como sinais de eletroencefalograma (EEG), expressões faciais, etc., é uma tarefa desafiadora. No entanto, ainda não se conhece um conjunto de características ótimas para o reconhecimento de emoções a partir de sinais de EEG, apesar de existirem características como PSD (power spectral density) e HOC (higher-order crossings), amplamente utilizadas pela comunidade científica. Novas pesquisas têm conseguido avançar substancialmente o estado da arte no que diz respeito ao reconhecimento de emoções a partir de EEG ao considerarem o emprego de características extraídas do espaço de fase desses sinais e classificadores baseados em técnicas de deep learning. Neste contexto, a presente tese investigou o emprego de imagens de reconstrução do espaço de fase de sinais de EEG, que são submetidas à uma rede convolucional 3D (uma das técnicas de deep learning), para aprender automaticamente características do espaço de fase de sinais de EEG para reconhecer diferentes estados emocionais de modo independente do indivíduo. Os resultados dos experimentos demonstraram a viabilidade e competitividade da abordagem proposta utilizando imagens de reconstrução do espaço de fase empilhadas de, apenas um canal de EEG FP1, alcançando acurácias de 0, 84 ± 0, 07, para quatro classes de valência-excitação, e 0, 88 ± 0, 05 para duas classes de valência e 0, 94 ± 0, 01 para duas classes de excitação, ambos utilizando a metodologia de treinamento e classificação do tipo LOSO (leave-one-subject-out). Esses resultados, além de reduzir a quantidade de canais necessários para a classificação ao mínimo possível, contribui para avançar o estado da arte ao apresentar uma nova abordagem para a classificação de emoções a partir de sinais de EEG.
publishDate 2020
dc.date.none.fl_str_mv 2020-03-30
2020-10-07T12:29:22Z
2020-10-07
2020-10-07T12:29:22Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950
MOTA, M. R. de A. Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. 2020. 115 f. Tese (Doutorado em Ciência da Computação) Programa de Pós-graduação em Ciência da Computação, Centro de Engenharia Elétrica e Informática, Universidade Federal de Campina Grande - Paraíba - Brasil, 2020. Disponível em: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950
url http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950
identifier_str_mv MOTA, M. R. de A. Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. 2020. 115 f. Tese (Doutorado em Ciência da Computação) Programa de Pós-graduação em Ciência da Computação, Centro de Engenharia Elétrica e Informática, Universidade Federal de Campina Grande - Paraíba - Brasil, 2020. Disponível em: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Universidade Federal de Campina Grande
Brasil
Centro de Engenharia Elétrica e Informática - CEEI
PÓS-GRADUAÇÃO EM CIÊNCIA DA COMPUTAÇÃO
UFCG
publisher.none.fl_str_mv Universidade Federal de Campina Grande
Brasil
Centro de Engenharia Elétrica e Informática - CEEI
PÓS-GRADUAÇÃO EM CIÊNCIA DA COMPUTAÇÃO
UFCG
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da UFCG
instname:Universidade Federal de Campina Grande (UFCG)
instacron:UFCG
instname_str Universidade Federal de Campina Grande (UFCG)
instacron_str UFCG
institution UFCG
reponame_str Biblioteca Digital de Teses e Dissertações da UFCG
collection Biblioteca Digital de Teses e Dissertações da UFCG
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da UFCG - Universidade Federal de Campina Grande (UFCG)
repository.mail.fl_str_mv bdtd@setor.ufcg.edu.br || bdtd@setor.ufcg.edu.br
_version_ 1809744468336705536