Surgical Navigation using an Optical See-Through Head Mounted Display

Detalhes bibliográficos
Autor(a) principal: Falcão, João Pedro Silva
Data de Publicação: 2019
Tipo de documento: Dissertação
Idioma: eng
Título da fonte: Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
Texto Completo: http://hdl.handle.net/10316/88100
Resumo: Dissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e Tecnologia
id RCAP_b5f51069fd9858ae69ffa3d8d4e7c9ca
oai_identifier_str oai:estudogeral.uc.pt:10316/88100
network_acronym_str RCAP
network_name_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository_id_str 7160
spelling Surgical Navigation using an Optical See-Through Head Mounted DisplayNavegação Cirúrgica usando um Óculos de Realidade Aumentada (Surgical Navigation using an Optical See-Through Head Mounted Display)Navegação Cirurgicain.navDreamGlassHMDARSurgical Navigationin.navDreamGlassHMDARDissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e TecnologiaSurgical navigation consists in guiding the surgeon during medical procedures, having important benefits such as the improvement of the clinical outcome and the decrease in the surgeon's learning curve. Recently, Perceive3D developed in.nav, which is a system for intra-operative navigation based in video that makes use of augmented reality to safely guide the medical procedures. By using only a monocular camera and small fiducial markers, in.nav overcomes the two main drawbacks inherent to the common Optical Tracking systems: the required high capital investment and the difficulty in preserving lines-of-sight in the Operating Room.The in.nav system currently runs in standard PCs and tablets. This thesis focuses on implementing in.nav in an Head Mounted Display (HMD). This brings important advantages that include the improvement of the visibility of the screen by the surgeon, enabling him/her not to move sight from anatomy, and the fact that it removes the need for an extra pair of hands for holding the screen.This implementation consists in the development of an application to serve as interface between in.nav and the HMD, through which all the necessary information is transmitted. This interface presents two different modes: one where the HMD serves to virtualize a conventional 2D display and another where the rendering of guidance information is done directly over the patient's anatomy. In order to provide a pleasant and useful user experience, the latter approach requires an accurate calibration of the HMD. This is accomplished in the last part of this thesis, as demonstrated by the thorough experimental validation.Although the technology of HMDs still presents some problems, such as the vergence-accommodation conflict, the work developed in this thesis yielded a simple, accurate and easy to use AR headset for surgical navigation.Navegação Cirúrgica consiste em guiar o cirurgião durante procedimentos médicos, tendo vários benefícios desde a melhoria de resultados clínicos até à redução do tempo da aprendizagem do cirurgião. Recentemente, a Perceive3D desenvolveu o in.nav que consiste num sistema de navegação cirúrgica baseado em vídeo, com utilização de realidade aumentada para guiar procedimentos médicos. Com a utilização de uma camara monocular e de vários pequenos marcadores, o in.nav supera as duas principais desvantagens inerentes aos sistemas de Optical Tracking: o elevado investimento de capital necessário e a dificuldade de preservar lines-of-sight na sala de operações.O sistema in.nav atualmente funciona em computadores e tablets. Esta tese tem como foco a implementação deste sistema em óculos de realidade aumentada. Com esta implementação, várias vantagens pode ser retiradas que incluem o melhoramento da visibilidade do ecrã pelo cirurgião, permitindo que não seja necessário desviar o foco da anatomia e o facto de já não ser necessário uma pessoa auxiliar para segurar o tablet ou computador. Este trabalho consiste no desenvolvimento de uma aplicação que serve de interface entre o in.nav e os óculos, pela qual toda a informação necessária é transmitida.-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------2019-07-23info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesishttp://hdl.handle.net/10316/88100http://hdl.handle.net/10316/88100TID:202306291engFalcão, João Pedro Silvainfo:eu-repo/semantics/openAccessreponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãoinstacron:RCAAP2022-05-25T02:53:55Zoai:estudogeral.uc.pt:10316/88100Portal AgregadorONGhttps://www.rcaap.pt/oai/openaireopendoar:71602024-03-19T21:08:53.159860Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãofalse
dc.title.none.fl_str_mv Surgical Navigation using an Optical See-Through Head Mounted Display
Navegação Cirúrgica usando um Óculos de Realidade Aumentada (Surgical Navigation using an Optical See-Through Head Mounted Display)
title Surgical Navigation using an Optical See-Through Head Mounted Display
spellingShingle Surgical Navigation using an Optical See-Through Head Mounted Display
Falcão, João Pedro Silva
Navegação Cirurgica
in.nav
DreamGlass
HMD
AR
Surgical Navigation
in.nav
DreamGlass
HMD
AR
title_short Surgical Navigation using an Optical See-Through Head Mounted Display
title_full Surgical Navigation using an Optical See-Through Head Mounted Display
title_fullStr Surgical Navigation using an Optical See-Through Head Mounted Display
title_full_unstemmed Surgical Navigation using an Optical See-Through Head Mounted Display
title_sort Surgical Navigation using an Optical See-Through Head Mounted Display
author Falcão, João Pedro Silva
author_facet Falcão, João Pedro Silva
author_role author
dc.contributor.author.fl_str_mv Falcão, João Pedro Silva
dc.subject.por.fl_str_mv Navegação Cirurgica
in.nav
DreamGlass
HMD
AR
Surgical Navigation
in.nav
DreamGlass
HMD
AR
topic Navegação Cirurgica
in.nav
DreamGlass
HMD
AR
Surgical Navigation
in.nav
DreamGlass
HMD
AR
description Dissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e Tecnologia
publishDate 2019
dc.date.none.fl_str_mv 2019-07-23
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10316/88100
http://hdl.handle.net/10316/88100
TID:202306291
url http://hdl.handle.net/10316/88100
identifier_str_mv TID:202306291
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.source.none.fl_str_mv reponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron:RCAAP
instname_str Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron_str RCAAP
institution RCAAP
reponame_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
collection Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository.name.fl_str_mv Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
repository.mail.fl_str_mv
_version_ 1799133981755572224