Decoding human movement intentions and postural reactions through brain signals

Detalhes bibliográficos
Autor(a) principal: Neto, Raimundo Nonato Barros
Data de Publicação: 2023
Tipo de documento: Dissertação
Idioma: eng
Título da fonte: Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
Texto Completo: https://hdl.handle.net/1822/88562
Resumo: Dissertação de mestrado integrado em Informatics Engineering
id RCAP_4d59fcbb3b507bf099d27127f9fe16dd
oai_identifier_str oai:repositorium.sdum.uminho.pt:1822/88562
network_acronym_str RCAP
network_name_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository_id_str 7160
spelling Decoding human movement intentions and postural reactions through brain signalsBrain-computer interfaceElectroencephalogramFalls recognitionPertubation-evoked potentialDeep learningInterface cérebro-computadorEletroencefalogramaReconhecimento de quedaPotencial evocado de perturbaçãoAprendizagem profundaEngenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e InformáticaDissertação de mestrado integrado em Informatics EngineeringFalls are one of the most common causes of injuries in the elderly population. As a result, treatment costs have also increased. Recent efforts to restore lower limb function in these populations have seen an increase in the use of wearable robotic systems, however, fall prevention measures in these systems require early detection of loss of balance to be effective. In short, the development of technologies, such as a brain-computer interface, that is capable of recognizing situations at risk of falling based on the loss of balance caused by several factors, is essential. Previous studies have investigated whether kinematic variables contain information about an impending fall, but few have examined the potential of using electroencephalography (EEG) as a predictor of falling and how the brain responds to prevent a fall. Perceived disturbances of balance are always accompanied by a specific cortical activation, called disturbance-evoked potential (PEP). In this study, the recognition of daily activities (walking, lifting, crouching, going up and down stairs) was also part of the initial objective, however, due to the challenges encountered, the object of study of the present work was focused on the recognition and binary classification of the presence of loss of balance (PEPs) in brain signals. Thus, this dissertation intends to take the first steps toward the decoding of brain activity in response to imbalanced events. Initially, to acquire the data, an experimental protocol was designed, so that the participants, using EEG, were submitted to gliding-like perturbations while walking on the treadmill. Two healthy subjects were exposed to a glide-like perturbation, and these perturbations occurred interspersed over a period lasting 30 to 60 seconds. Each subject performed 2 experiments, that is, perturbations provoked while the individual walked on the treadmill: i) at a speed of 1.6 km/h and ii) at a speed of 2.5 km/h. Based on the approached methods, the perturbation evoked potential (PEP) components were found between 70-155 ms after the onset of the external perturbation. To decode pre-processed EGG data, four (4) artificial neural networks were tested and different network architecture parameters and electrode layouts were compared. Overall, the convolutional neural network trained to predict EEG balance disturbances had a far superior classification performance than the other architectures, whose mean accuracy was 91.51 ˘ 2.91%, using a short window length of 200 ms. The electrode layout composed of 5 channels (Fz, C3, Cz, C4, and Pz) presented the shortest execution time to train the model, whose average value was 196 ˘ 44.24ms. In addition, it was possible to verify that the use of a single electrode (Cz) obtained satisfactory precision results (86.47 +/- 0.03%). These discoveries may contribute to the development of a system capable of detecting equilibrium disturbances in real-time.As quedas são uma das causas mais comuns de lesões na população idosa. Como resultado, custos com o tratamento têm também aumentado. Esforços recentes para restaurar a função dos membros inferiores nessas populações viram um aumento no uso de sistemas robóticos vestíveis, no entanto, as medidas de prevenção de quedas nesses sistemas exigem a detecção precoce da perda de equilíbrio para serem eficazes. Em suma, é fundamental o desenvolvimento de tecnologias, tal como interface cérebro-computador, que seja capaz de reconhecer situações risco de queda com base na perda de equilíbrio ocasionada por diversos fatores. Estudos anteriores investigaram se as variáveis cinemáticas continham informações sobre uma queda iminente, mas poucos examinaram o potencial do uso da eletroencefalografia (EEG) como um sinal de previsão de queda e como o cérebro responde para evitar uma queda. As perturbações do equilíbrio percebidas são sempre acompanhadas por uma ativação cortical específica, chamada de potencial evocado por perturbação (PEP). Neste estudo, também fazia parte do objetivo inicial o reconhecimento das atividades diárias (andar, levantar, agachar, subir e descer escada), porém, devido aos desafios encontrados, o objeto de estudo do presente trabalho foi focado no reconhecimento e classificação binária da presença de perda de equilíbrio (PEPs) em sinais cerebrais. Assim, esta dissertação pretende dar os primeiros passos em direção a decodificação da atividade cerebral em resposta a eventos de desequilíbrio. Inicialmente, para adquirir os dados, um protocolo experimental foi delineado, de forma que os participantes, usando EEG, fossem submetidos a perturbações do tipo deslizamento enquanto andavam sobre a esteira. Dois sujeitos saudáveis foram expostos a perturbação do tipo deslizamento, e estas perturbações ocorreram intercaladamente em um período de duração de 30 a 60 segundos. Cada sujeitou realizou 2 experimentos, ou seja, perturbações provocadas enquanto o indivíduo andava na passadeira: i) a uma velocidade de 1.6 km/h e ii) a uma velocidade de 2.5 km/h. Com base nos métodos abordados os componentes de potencial evocado de perturbação (PEP) foram encontrados entre 70-155 ms após o início da perturbação externa. Para decodificar dados pré-processados do EGG, quatro (4) redes neurais artificiais foram testados e diferentes parâmetros da arquitetura de rede e layouts de eletrodos foram comparados. No geral, a rede neural convolucional treinada para prever as perturbações do equilíbrio do EEG teve um alcance desempenho de classificação superior as demais arquiteturas, cuja precisão média foi de 91,51 ˘ 2,91%, usando um comprimento de janela curto de 200 ms. O layout de eletrodo composto por 5 canais (Fz, C3, Cz, C4 e Pz) apresentou o menor tempo de execução para treinar o modelo, cujo valor médio foi 196 ˘ 44.24ms. Além disso, foi possível verificar que a utilização de um único eletrodo (Cz) obteve resultados de precisão satisfatórios (86.47 +/- 0.03%). Essas descobertas podem contribuir para o desenvolvimento de um sistema capaz de detectar perturbações do equilíbrio em tempo real.Santos, CristinaJacinto, LuisRibeiro, Nuno Miguel FerreteUniversidade do MinhoNeto, Raimundo Nonato Barros2023-04-122023-04-12T00:00:00Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttps://hdl.handle.net/1822/88562eng203501020info:eu-repo/semantics/openAccessreponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãoinstacron:RCAAP2024-02-10T01:19:31Zoai:repositorium.sdum.uminho.pt:1822/88562Portal AgregadorONGhttps://www.rcaap.pt/oai/openaireopendoar:71602024-03-20T02:37:05.868613Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãofalse
dc.title.none.fl_str_mv Decoding human movement intentions and postural reactions through brain signals
title Decoding human movement intentions and postural reactions through brain signals
spellingShingle Decoding human movement intentions and postural reactions through brain signals
Neto, Raimundo Nonato Barros
Brain-computer interface
Electroencephalogram
Falls recognition
Pertubation-evoked potential
Deep learning
Interface cérebro-computador
Eletroencefalograma
Reconhecimento de queda
Potencial evocado de perturbação
Aprendizagem profunda
Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e Informática
title_short Decoding human movement intentions and postural reactions through brain signals
title_full Decoding human movement intentions and postural reactions through brain signals
title_fullStr Decoding human movement intentions and postural reactions through brain signals
title_full_unstemmed Decoding human movement intentions and postural reactions through brain signals
title_sort Decoding human movement intentions and postural reactions through brain signals
author Neto, Raimundo Nonato Barros
author_facet Neto, Raimundo Nonato Barros
author_role author
dc.contributor.none.fl_str_mv Santos, Cristina
Jacinto, Luis
Ribeiro, Nuno Miguel Ferrete
Universidade do Minho
dc.contributor.author.fl_str_mv Neto, Raimundo Nonato Barros
dc.subject.por.fl_str_mv Brain-computer interface
Electroencephalogram
Falls recognition
Pertubation-evoked potential
Deep learning
Interface cérebro-computador
Eletroencefalograma
Reconhecimento de queda
Potencial evocado de perturbação
Aprendizagem profunda
Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e Informática
topic Brain-computer interface
Electroencephalogram
Falls recognition
Pertubation-evoked potential
Deep learning
Interface cérebro-computador
Eletroencefalograma
Reconhecimento de queda
Potencial evocado de perturbação
Aprendizagem profunda
Engenharia e Tecnologia::Engenharia Eletrotécnica, Eletrónica e Informática
description Dissertação de mestrado integrado em Informatics Engineering
publishDate 2023
dc.date.none.fl_str_mv 2023-04-12
2023-04-12T00:00:00Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://hdl.handle.net/1822/88562
url https://hdl.handle.net/1822/88562
dc.language.iso.fl_str_mv eng
language eng
dc.relation.none.fl_str_mv 203501020
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron:RCAAP
instname_str Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron_str RCAAP
institution RCAAP
reponame_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
collection Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository.name.fl_str_mv Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
repository.mail.fl_str_mv
_version_ 1799137422056882176

Registros relacionados