Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase.
Autor(a) principal: | |
---|---|
Data de Publicação: | 2020 |
Tipo de documento: | Tese |
Idioma: | por |
Título da fonte: | Biblioteca Digital de Teses e Dissertações da UFCG |
Texto Completo: | http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950 |
Resumo: | Emoções são importantes para os seres humanos, influencia nosso comportamento social, memória e cognição. A área da computação afetiva visa a auxiliar na compreensão dos fenômenos emocionais humanos utilizando sistemas computacionais para isso. Neste contexto, definir, caracterizar e classificar emoções e suas partes constituintes a partir de sinais fisiológicos, como sinais de eletroencefalograma (EEG), expressões faciais, etc., é uma tarefa desafiadora. No entanto, ainda não se conhece um conjunto de características ótimas para o reconhecimento de emoções a partir de sinais de EEG, apesar de existirem características como PSD (power spectral density) e HOC (higher-order crossings), amplamente utilizadas pela comunidade científica. Novas pesquisas têm conseguido avançar substancialmente o estado da arte no que diz respeito ao reconhecimento de emoções a partir de EEG ao considerarem o emprego de características extraídas do espaço de fase desses sinais e classificadores baseados em técnicas de deep learning. Neste contexto, a presente tese investigou o emprego de imagens de reconstrução do espaço de fase de sinais de EEG, que são submetidas à uma rede convolucional 3D (uma das técnicas de deep learning), para aprender automaticamente características do espaço de fase de sinais de EEG para reconhecer diferentes estados emocionais de modo independente do indivíduo. Os resultados dos experimentos demonstraram a viabilidade e competitividade da abordagem proposta utilizando imagens de reconstrução do espaço de fase empilhadas de, apenas um canal de EEG FP1, alcançando acurácias de 0, 84 ± 0, 07, para quatro classes de valência-excitação, e 0, 88 ± 0, 05 para duas classes de valência e 0, 94 ± 0, 01 para duas classes de excitação, ambos utilizando a metodologia de treinamento e classificação do tipo LOSO (leave-one-subject-out). Esses resultados, além de reduzir a quantidade de canais necessários para a classificação ao mínimo possível, contribui para avançar o estado da arte ao apresentar uma nova abordagem para a classificação de emoções a partir de sinais de EEG. |
id |
UFCG_ea0b6d0fdac96460c1b94cc7d0d5c7d4 |
---|---|
oai_identifier_str |
oai:localhost:riufcg/15950 |
network_acronym_str |
UFCG |
network_name_str |
Biblioteca Digital de Teses e Dissertações da UFCG |
repository_id_str |
4851 |
spelling |
Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase.Recognition of emotions in EEG signals via deep learning and phase space reconstructionEmotionsElectroencephalogramStacked phaseSpace images3D convolutional networkEmoçõesEletroencefalogramaElectroencefalogramaEmocionesImagens de espaçoFase empilhadasImágenes del espacioEtapa apiladaRede convolucional 3DRed convolucional 3DCiência da ComputaçãoEmoções são importantes para os seres humanos, influencia nosso comportamento social, memória e cognição. A área da computação afetiva visa a auxiliar na compreensão dos fenômenos emocionais humanos utilizando sistemas computacionais para isso. Neste contexto, definir, caracterizar e classificar emoções e suas partes constituintes a partir de sinais fisiológicos, como sinais de eletroencefalograma (EEG), expressões faciais, etc., é uma tarefa desafiadora. No entanto, ainda não se conhece um conjunto de características ótimas para o reconhecimento de emoções a partir de sinais de EEG, apesar de existirem características como PSD (power spectral density) e HOC (higher-order crossings), amplamente utilizadas pela comunidade científica. Novas pesquisas têm conseguido avançar substancialmente o estado da arte no que diz respeito ao reconhecimento de emoções a partir de EEG ao considerarem o emprego de características extraídas do espaço de fase desses sinais e classificadores baseados em técnicas de deep learning. Neste contexto, a presente tese investigou o emprego de imagens de reconstrução do espaço de fase de sinais de EEG, que são submetidas à uma rede convolucional 3D (uma das técnicas de deep learning), para aprender automaticamente características do espaço de fase de sinais de EEG para reconhecer diferentes estados emocionais de modo independente do indivíduo. Os resultados dos experimentos demonstraram a viabilidade e competitividade da abordagem proposta utilizando imagens de reconstrução do espaço de fase empilhadas de, apenas um canal de EEG FP1, alcançando acurácias de 0, 84 ± 0, 07, para quatro classes de valência-excitação, e 0, 88 ± 0, 05 para duas classes de valência e 0, 94 ± 0, 01 para duas classes de excitação, ambos utilizando a metodologia de treinamento e classificação do tipo LOSO (leave-one-subject-out). Esses resultados, além de reduzir a quantidade de canais necessários para a classificação ao mínimo possível, contribui para avançar o estado da arte ao apresentar uma nova abordagem para a classificação de emoções a partir de sinais de EEG.Emotions are important for human beings, it influences our social behavior, memory and cognition. The affective computing area aims to assist in the understanding of human emotional phenomena using computer systems for this. In this context, defining, charac- terizing and classifying emotions and their constituent parts based on physiological signals, such as electroencephalogram signals (EEG), facial expressions, etc, is a challenging task. However, a optimal characteristics set for recognizing emotions from EEG signals is not yet known, although there are characteristics such as PSD (power spectral density) and HOC (higher-order crossings), widely used by the scientific community. New researches have substantially advanced the state of the art with regard to the recognition of emotions from EEG when considering the use of characteristics extracted from the phase space of these signals and classifiers based on deep learning techniques. In this context, the present thesis investigated the use of reconstruction of the EEG signals images of phase space, which are subjected to a 3D convolutional network (one of the deep learning techniques), to automatically learn the EEG signal space phase characteristics to recognize different emotional states independently of the individual. The results of the experiments demonstrated the feasibility and competitiveness of the proposed approach using images of the stacked phase space reconstruction of only one EEG FP1 channel, reaching accuracy of 0, 84 ± 0, 07, for four valence-arousal classes, and 0, 88 ± 0, 05 for two valence classes and 0, 94 ± 0, 01 for two arousal classes, both using the training and classification methodology of the LOSO type (leave-one-subject-out). These results, in addition to reducing the number of channels required for classification to the minimum possible, contribute to advancing the state of the art by presenting a new approach to the emotions classification based on EEG signals.CNPqUniversidade Federal de Campina GrandeBrasilCentro de Engenharia Elétrica e Informática - CEEIPÓS-GRADUAÇÃO EM CIÊNCIA DA COMPUTAÇÃOUFCGGOMES, Herman Martins.GOMES, H. M.http://lattes.cnpq.br/4223020694433271PEREIRA, Eanes Torres.PEREIRA, E. T.http://lattes.cnpq.br/2030738304003254ARAÚJO, Joseana Macêdo Fechine Régis de.ALMEIDA, Carlos Wilson Dantas.ASSIS, Francisco Marcos de.BERNARDINO JUNIOR, Francisco Madeiro.MOTA, Moisés Roberto de Araújo.2020-03-302020-10-07T12:29:22Z2020-10-072020-10-07T12:29:22Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesishttp://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950MOTA, M. R. de A. Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. 2020. 115 f. Tese (Doutorado em Ciência da Computação) Programa de Pós-graduação em Ciência da Computação, Centro de Engenharia Elétrica e Informática, Universidade Federal de Campina Grande - Paraíba - Brasil, 2020. Disponível em: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950porinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UFCGinstname:Universidade Federal de Campina Grande (UFCG)instacron:UFCG2022-03-16T19:52:43Zoai:localhost:riufcg/15950Biblioteca Digital de Teses e Dissertaçõeshttp://bdtd.ufcg.edu.br/PUBhttp://dspace.sti.ufcg.edu.br:8080/oai/requestbdtd@setor.ufcg.edu.br || bdtd@setor.ufcg.edu.bropendoar:48512022-03-16T19:52:43Biblioteca Digital de Teses e Dissertações da UFCG - Universidade Federal de Campina Grande (UFCG)false |
dc.title.none.fl_str_mv |
Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. Recognition of emotions in EEG signals via deep learning and phase space reconstruction |
title |
Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. |
spellingShingle |
Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. MOTA, Moisés Roberto de Araújo. Emotions Electroencephalogram Stacked phase Space images 3D convolutional network Emoções Eletroencefalograma Electroencefalograma Emociones Imagens de espaço Fase empilhadas Imágenes del espacio Etapa apilada Rede convolucional 3D Red convolucional 3D Ciência da Computação |
title_short |
Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. |
title_full |
Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. |
title_fullStr |
Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. |
title_full_unstemmed |
Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. |
title_sort |
Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. |
author |
MOTA, Moisés Roberto de Araújo. |
author_facet |
MOTA, Moisés Roberto de Araújo. |
author_role |
author |
dc.contributor.none.fl_str_mv |
GOMES, Herman Martins. GOMES, H. M. http://lattes.cnpq.br/4223020694433271 PEREIRA, Eanes Torres. PEREIRA, E. T. http://lattes.cnpq.br/2030738304003254 ARAÚJO, Joseana Macêdo Fechine Régis de. ALMEIDA, Carlos Wilson Dantas. ASSIS, Francisco Marcos de. BERNARDINO JUNIOR, Francisco Madeiro. |
dc.contributor.author.fl_str_mv |
MOTA, Moisés Roberto de Araújo. |
dc.subject.por.fl_str_mv |
Emotions Electroencephalogram Stacked phase Space images 3D convolutional network Emoções Eletroencefalograma Electroencefalograma Emociones Imagens de espaço Fase empilhadas Imágenes del espacio Etapa apilada Rede convolucional 3D Red convolucional 3D Ciência da Computação |
topic |
Emotions Electroencephalogram Stacked phase Space images 3D convolutional network Emoções Eletroencefalograma Electroencefalograma Emociones Imagens de espaço Fase empilhadas Imágenes del espacio Etapa apilada Rede convolucional 3D Red convolucional 3D Ciência da Computação |
description |
Emoções são importantes para os seres humanos, influencia nosso comportamento social, memória e cognição. A área da computação afetiva visa a auxiliar na compreensão dos fenômenos emocionais humanos utilizando sistemas computacionais para isso. Neste contexto, definir, caracterizar e classificar emoções e suas partes constituintes a partir de sinais fisiológicos, como sinais de eletroencefalograma (EEG), expressões faciais, etc., é uma tarefa desafiadora. No entanto, ainda não se conhece um conjunto de características ótimas para o reconhecimento de emoções a partir de sinais de EEG, apesar de existirem características como PSD (power spectral density) e HOC (higher-order crossings), amplamente utilizadas pela comunidade científica. Novas pesquisas têm conseguido avançar substancialmente o estado da arte no que diz respeito ao reconhecimento de emoções a partir de EEG ao considerarem o emprego de características extraídas do espaço de fase desses sinais e classificadores baseados em técnicas de deep learning. Neste contexto, a presente tese investigou o emprego de imagens de reconstrução do espaço de fase de sinais de EEG, que são submetidas à uma rede convolucional 3D (uma das técnicas de deep learning), para aprender automaticamente características do espaço de fase de sinais de EEG para reconhecer diferentes estados emocionais de modo independente do indivíduo. Os resultados dos experimentos demonstraram a viabilidade e competitividade da abordagem proposta utilizando imagens de reconstrução do espaço de fase empilhadas de, apenas um canal de EEG FP1, alcançando acurácias de 0, 84 ± 0, 07, para quatro classes de valência-excitação, e 0, 88 ± 0, 05 para duas classes de valência e 0, 94 ± 0, 01 para duas classes de excitação, ambos utilizando a metodologia de treinamento e classificação do tipo LOSO (leave-one-subject-out). Esses resultados, além de reduzir a quantidade de canais necessários para a classificação ao mínimo possível, contribui para avançar o estado da arte ao apresentar uma nova abordagem para a classificação de emoções a partir de sinais de EEG. |
publishDate |
2020 |
dc.date.none.fl_str_mv |
2020-03-30 2020-10-07T12:29:22Z 2020-10-07 2020-10-07T12:29:22Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/doctoralThesis |
format |
doctoralThesis |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950 MOTA, M. R. de A. Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. 2020. 115 f. Tese (Doutorado em Ciência da Computação) Programa de Pós-graduação em Ciência da Computação, Centro de Engenharia Elétrica e Informática, Universidade Federal de Campina Grande - Paraíba - Brasil, 2020. Disponível em: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950 |
url |
http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950 |
identifier_str_mv |
MOTA, M. R. de A. Reconhecimento de emoções em sinais de EEG via deep learning e reconstrução do espaço de fase. 2020. 115 f. Tese (Doutorado em Ciência da Computação) Programa de Pós-graduação em Ciência da Computação, Centro de Engenharia Elétrica e Informática, Universidade Federal de Campina Grande - Paraíba - Brasil, 2020. Disponível em: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/15950 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.publisher.none.fl_str_mv |
Universidade Federal de Campina Grande Brasil Centro de Engenharia Elétrica e Informática - CEEI PÓS-GRADUAÇÃO EM CIÊNCIA DA COMPUTAÇÃO UFCG |
publisher.none.fl_str_mv |
Universidade Federal de Campina Grande Brasil Centro de Engenharia Elétrica e Informática - CEEI PÓS-GRADUAÇÃO EM CIÊNCIA DA COMPUTAÇÃO UFCG |
dc.source.none.fl_str_mv |
reponame:Biblioteca Digital de Teses e Dissertações da UFCG instname:Universidade Federal de Campina Grande (UFCG) instacron:UFCG |
instname_str |
Universidade Federal de Campina Grande (UFCG) |
instacron_str |
UFCG |
institution |
UFCG |
reponame_str |
Biblioteca Digital de Teses e Dissertações da UFCG |
collection |
Biblioteca Digital de Teses e Dissertações da UFCG |
repository.name.fl_str_mv |
Biblioteca Digital de Teses e Dissertações da UFCG - Universidade Federal de Campina Grande (UFCG) |
repository.mail.fl_str_mv |
bdtd@setor.ufcg.edu.br || bdtd@setor.ufcg.edu.br |
_version_ |
1809744468336705536 |