Handwriting Rehabilitation Using a Haptic Joystick

Detalhes bibliográficos
Autor(a) principal: Quaresma, Vasco Araújo Goulart
Data de Publicação: 2021
Tipo de documento: Dissertação
Idioma: eng
Título da fonte: Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
Texto Completo: http://hdl.handle.net/10316/97931
Resumo: Dissertação de Mestrado Integrado em Engenharia Biomédica apresentada à Faculdade de Ciências e Tecnologia
id RCAP_4e59b43896401e2b0b1eaf7faf458a52
oai_identifier_str oai:estudogeral.uc.pt:10316/97931
network_acronym_str RCAP
network_name_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository_id_str 7160
spelling Handwriting Rehabilitation Using a Haptic JoystickReabilitação da Escrita Usando um Joystick HápticoReabilitação da escritaJoystick hápticoHOG-SVMCNNDTWHandwriting rehabilitationHaptic joystickHOG-SVMCNNDTWDissertação de Mestrado Integrado em Engenharia Biomédica apresentada à Faculdade de Ciências e TecnologiaA escrita desempenha um papel importante na comunicação, quer num cenário de escrita digital quer num cenário de escrita manual. Assim, uma diminuição ou mesmo perda destas competências pode constituir um grande contratempo. O sistema aqui descrito visa promover a reabilitação da escrita através da análise de caracteres escritos, usando um joystick háptico. O sistema desenvolvido é capaz de efetuar a classificação de números ou de letras e de realizar quantificação da qualidade dos caracteres escritos. Nesta dissertação, são estudados e avaliados diferentes métodos para a obtenção da melhor precisão de classificação. Relativamente à classificação de caracteres, o procedimento proeminente para números consiste na utilização de Histograma de Gradientes Orientados acoplado a uma Máquina de Vetores de Suporte multiclasse (HOG-SVM – Histogram of Oriented Gradients-multiclass Support Vector Machine), enquanto no caso de letras recorre-se a uma Rede Neuronal Convolucional (CNN – Convolutional Neural Network). Para a quantificação da qualidade da escrita, foi realizada a Sincronização Temporal Dinâmica (DTW – Dynamic Time Warping) entre o caractere escrito e dez imagens de referência do mesmo caractere. Em suma, a utilização destes métodos permite realizar uma análise de caracteres escritos e poderá assim contribuir para a reabilitação das capacidades de escrita através do treino e da avaliação das mesmas.Palavras-Chave: Reabilitação da escrita; Joystick háptico; Histogram of Oriented Gradients acoplado a multiclass Support Vector Machine; Convolutional Neural Network; Dynamic Time Warping.Writing skills play a major part in communication, whether in a typing or in a handwriting scenario. Thus, a decrease or even loss of these skills can be a major setback. The system described herein aims to promote handwriting rehabilitation through the analysis of characters written using a haptic joystick.The developed system can perform digit or letter classification and quantification of written characters quality. In this project, different methods are studied and evaluated to achieve the best classification accuracy.Regarding handwritten characters classification, the pre-eminent procedure for digits consists in the use of Histogram of Oriented Gradients coupled with a multiclass Support Vector Machine (HOG-SVM) whereas for letters the strategy involves using a Convolutional Neural Network (CNN). For handwriting quality quantification, Dynamic Time Warping (DTW) was performed between the written character and ten reference images of the same character.In sum, the use of these methods enables handwriting analysis and could thus contribute to writing skills rehabilitation through training and evaluation.Keywords: Handwriting rehabilitation; Haptic joystick; Histogram of Oriented Gradients coupled with a multiclass Support Vector Machine; Convolutional Neural Network; Dynamic Time Warping.Nota: Na dissertação, a lista de palavras-chave, tanto em inglês como em português, é composta pelas siglas dos métodos usados, uma vez que estas são apresentadas no corpo do abstract/resumo.2021-11-24info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesishttp://hdl.handle.net/10316/97931http://hdl.handle.net/10316/97931TID:202922804engQuaresma, Vasco Araújo Goulartinfo:eu-repo/semantics/openAccessreponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãoinstacron:RCAAP2022-05-25T03:04:06Zoai:estudogeral.uc.pt:10316/97931Portal AgregadorONGhttps://www.rcaap.pt/oai/openaireopendoar:71602024-03-19T21:15:53.024053Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãofalse
dc.title.none.fl_str_mv Handwriting Rehabilitation Using a Haptic Joystick
Reabilitação da Escrita Usando um Joystick Háptico
title Handwriting Rehabilitation Using a Haptic Joystick
spellingShingle Handwriting Rehabilitation Using a Haptic Joystick
Quaresma, Vasco Araújo Goulart
Reabilitação da escrita
Joystick háptico
HOG-SVM
CNN
DTW
Handwriting rehabilitation
Haptic joystick
HOG-SVM
CNN
DTW
title_short Handwriting Rehabilitation Using a Haptic Joystick
title_full Handwriting Rehabilitation Using a Haptic Joystick
title_fullStr Handwriting Rehabilitation Using a Haptic Joystick
title_full_unstemmed Handwriting Rehabilitation Using a Haptic Joystick
title_sort Handwriting Rehabilitation Using a Haptic Joystick
author Quaresma, Vasco Araújo Goulart
author_facet Quaresma, Vasco Araújo Goulart
author_role author
dc.contributor.author.fl_str_mv Quaresma, Vasco Araújo Goulart
dc.subject.por.fl_str_mv Reabilitação da escrita
Joystick háptico
HOG-SVM
CNN
DTW
Handwriting rehabilitation
Haptic joystick
HOG-SVM
CNN
DTW
topic Reabilitação da escrita
Joystick háptico
HOG-SVM
CNN
DTW
Handwriting rehabilitation
Haptic joystick
HOG-SVM
CNN
DTW
description Dissertação de Mestrado Integrado em Engenharia Biomédica apresentada à Faculdade de Ciências e Tecnologia
publishDate 2021
dc.date.none.fl_str_mv 2021-11-24
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10316/97931
http://hdl.handle.net/10316/97931
TID:202922804
url http://hdl.handle.net/10316/97931
identifier_str_mv TID:202922804
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.source.none.fl_str_mv reponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron:RCAAP
instname_str Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron_str RCAAP
institution RCAAP
reponame_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
collection Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository.name.fl_str_mv Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
repository.mail.fl_str_mv
_version_ 1799134055296401408