Robust point-cloud registration based on dense point matching and probabilistic modeling

Detalhes bibliográficos
Autor(a) principal: Netto, Gustavo Marques
Data de Publicação: 2022
Tipo de documento: Dissertação
Idioma: eng
Título da fonte: Biblioteca Digital de Teses e Dissertações da UFRGS
Texto Completo: http://hdl.handle.net/10183/252056
Resumo: Esta dissertação apresenta duas técnicas para o registro de nuvens de pontos 3D que são robustas a ruído e a nuvens de pontos parciais. Nossas técnicas abordam o registro rígido e o não rígido e exploram as vantagens do uso de aprendizado profundo para a estimativa de correspondência densa entre pontos. Para ambos os tipos de registro, nós propomos uma única rede neural. Nossa rede usa um mecanismo de atenção recentemente proposto e considera explicitamente a falta de correspondências entre os pontos, o que é crítico para a sua performance. Além disso, nós aplicamos avanços recentes em modelagem probabilística para refinar as correspondências criadas por nossa rede durante o registro não rígido. Tal combinação de aprendizado profundo e modelagem probabilística produz sensibilidade a contextos e também gera uma deformação coerente dos pontos, o que torna nossa abordagem resiliente a ruído e a perda de informação. Nós demonstramos a efetividade das nossas técnicas ao compará-las com métodos no estado da arte. Nossas comparações usam bases de dados com ruído e nuvens de pontos parciais ou com amostragem irregular. Os experimentos mostram que em geral, nós obtemos resultados superiores. Por exemplo, nossas abordagens alcançam um erro até 45% menor que outras técnicas no registro não rígido de nuvens de pontos parciais, ou até 49% menor no registro rígido. Nós também discutimos alguns aspectos extras da nossa técnica como a robustez a níveis diferentes de ruído e a números diferentes de amostras nas nuvens de pontos. Por último, nós abordamos a falta de bases de dados que forneçam o registro correto entre as nuvens de pontos. Essas bases são críticas no treinamento supervisionado de modelos de registro não rígido. Para resolver essa escassez, nós propomos uma estratégia de autoaprendizado baseada em deformações randômicas.
id URGS_ce8ede2381ef07ff94916ee82d6538e6
oai_identifier_str oai:www.lume.ufrgs.br:10183/252056
network_acronym_str URGS
network_name_str Biblioteca Digital de Teses e Dissertações da UFRGS
repository_id_str 1853
spelling Netto, Gustavo MarquesOliveira Neto, Manuel Menezes de2022-12-01T04:51:21Z2022http://hdl.handle.net/10183/252056001154434Esta dissertação apresenta duas técnicas para o registro de nuvens de pontos 3D que são robustas a ruído e a nuvens de pontos parciais. Nossas técnicas abordam o registro rígido e o não rígido e exploram as vantagens do uso de aprendizado profundo para a estimativa de correspondência densa entre pontos. Para ambos os tipos de registro, nós propomos uma única rede neural. Nossa rede usa um mecanismo de atenção recentemente proposto e considera explicitamente a falta de correspondências entre os pontos, o que é crítico para a sua performance. Além disso, nós aplicamos avanços recentes em modelagem probabilística para refinar as correspondências criadas por nossa rede durante o registro não rígido. Tal combinação de aprendizado profundo e modelagem probabilística produz sensibilidade a contextos e também gera uma deformação coerente dos pontos, o que torna nossa abordagem resiliente a ruído e a perda de informação. Nós demonstramos a efetividade das nossas técnicas ao compará-las com métodos no estado da arte. Nossas comparações usam bases de dados com ruído e nuvens de pontos parciais ou com amostragem irregular. Os experimentos mostram que em geral, nós obtemos resultados superiores. Por exemplo, nossas abordagens alcançam um erro até 45% menor que outras técnicas no registro não rígido de nuvens de pontos parciais, ou até 49% menor no registro rígido. Nós também discutimos alguns aspectos extras da nossa técnica como a robustez a níveis diferentes de ruído e a números diferentes de amostras nas nuvens de pontos. Por último, nós abordamos a falta de bases de dados que forneçam o registro correto entre as nuvens de pontos. Essas bases são críticas no treinamento supervisionado de modelos de registro não rígido. Para resolver essa escassez, nós propomos uma estratégia de autoaprendizado baseada em deformações randômicas.This thesis presents techniques for 3D point-cloud registration that are robust to outliers and missing regions. They tackle non-rigid and rigid registration and exploit the advan tages of deep learning for dense point matching. This is done by proposing a single new neural network to solve both registration types. Our network uses a recently proposed attention mechanism and explicitly accounts for missing correspondences, which is key to its performance. Additionally, we use recent advances in probabilistic modeling to further refine the correspondences created by our network during non-rigid registration. Such a combination of deep learning and probabilistic modeling produces context aware ness and enforces motion coherence, which makes our approach resilient to outliers and missing information. We demonstrate the effectiveness of our techniques by comparing them to state-of-the-art methods. Our comparisons use datasets containing noise, partial point clouds, and irregular sampling. The experiments show that our techniques obtain superior results in general. For example, our approaches achieve a registration error up to 45% smaller than other techniques in partial point clouds for non-rigid registration, and up to 49% smaller on rigid registration. We also discuss additional aspects of our tech niques such as robustness to different levels of noise, and different numbers of samples in the point clouds. Finally, we tackle the lack of datasets with ground truth for supervised training of non-rigid registration models by presenting a self-supervised strategy based on random deformations.application/pdfengAprendizado profundo distribuídoRede neural artificialRegistro de nuvens de pontosPoint-cloud registrationRigid registrationNon-rigid registrationDense point matchingRobust point-cloud registration based on dense point matching and probabilistic modelinginfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisUniversidade Federal do Rio Grande do SulInstituto de InformáticaPrograma de Pós-Graduação em ComputaçãoPorto Alegre, BR-RS2022mestradoinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UFRGSinstname:Universidade Federal do Rio Grande do Sul (UFRGS)instacron:UFRGSTEXT001154434.pdf.txt001154434.pdf.txtExtracted Texttext/plain184083http://www.lume.ufrgs.br/bitstream/10183/252056/2/001154434.pdf.txtb05066a5df3224433b58ca67673e951eMD52ORIGINAL001154434.pdfTexto completo (inglês)application/pdf15035240http://www.lume.ufrgs.br/bitstream/10183/252056/1/001154434.pdfe559d8b2bea0e6c98193c30be126baccMD5110183/2520562023-02-08 06:03:24.888327oai:www.lume.ufrgs.br:10183/252056Biblioteca Digital de Teses e Dissertaçõeshttps://lume.ufrgs.br/handle/10183/2PUBhttps://lume.ufrgs.br/oai/requestlume@ufrgs.br||lume@ufrgs.bropendoar:18532023-02-08T08:03:24Biblioteca Digital de Teses e Dissertações da UFRGS - Universidade Federal do Rio Grande do Sul (UFRGS)false
dc.title.pt_BR.fl_str_mv Robust point-cloud registration based on dense point matching and probabilistic modeling
title Robust point-cloud registration based on dense point matching and probabilistic modeling
spellingShingle Robust point-cloud registration based on dense point matching and probabilistic modeling
Netto, Gustavo Marques
Aprendizado profundo distribuído
Rede neural artificial
Registro de nuvens de pontos
Point-cloud registration
Rigid registration
Non-rigid registration
Dense point matching
title_short Robust point-cloud registration based on dense point matching and probabilistic modeling
title_full Robust point-cloud registration based on dense point matching and probabilistic modeling
title_fullStr Robust point-cloud registration based on dense point matching and probabilistic modeling
title_full_unstemmed Robust point-cloud registration based on dense point matching and probabilistic modeling
title_sort Robust point-cloud registration based on dense point matching and probabilistic modeling
author Netto, Gustavo Marques
author_facet Netto, Gustavo Marques
author_role author
dc.contributor.author.fl_str_mv Netto, Gustavo Marques
dc.contributor.advisor1.fl_str_mv Oliveira Neto, Manuel Menezes de
contributor_str_mv Oliveira Neto, Manuel Menezes de
dc.subject.por.fl_str_mv Aprendizado profundo distribuído
Rede neural artificial
Registro de nuvens de pontos
topic Aprendizado profundo distribuído
Rede neural artificial
Registro de nuvens de pontos
Point-cloud registration
Rigid registration
Non-rigid registration
Dense point matching
dc.subject.eng.fl_str_mv Point-cloud registration
Rigid registration
Non-rigid registration
Dense point matching
description Esta dissertação apresenta duas técnicas para o registro de nuvens de pontos 3D que são robustas a ruído e a nuvens de pontos parciais. Nossas técnicas abordam o registro rígido e o não rígido e exploram as vantagens do uso de aprendizado profundo para a estimativa de correspondência densa entre pontos. Para ambos os tipos de registro, nós propomos uma única rede neural. Nossa rede usa um mecanismo de atenção recentemente proposto e considera explicitamente a falta de correspondências entre os pontos, o que é crítico para a sua performance. Além disso, nós aplicamos avanços recentes em modelagem probabilística para refinar as correspondências criadas por nossa rede durante o registro não rígido. Tal combinação de aprendizado profundo e modelagem probabilística produz sensibilidade a contextos e também gera uma deformação coerente dos pontos, o que torna nossa abordagem resiliente a ruído e a perda de informação. Nós demonstramos a efetividade das nossas técnicas ao compará-las com métodos no estado da arte. Nossas comparações usam bases de dados com ruído e nuvens de pontos parciais ou com amostragem irregular. Os experimentos mostram que em geral, nós obtemos resultados superiores. Por exemplo, nossas abordagens alcançam um erro até 45% menor que outras técnicas no registro não rígido de nuvens de pontos parciais, ou até 49% menor no registro rígido. Nós também discutimos alguns aspectos extras da nossa técnica como a robustez a níveis diferentes de ruído e a números diferentes de amostras nas nuvens de pontos. Por último, nós abordamos a falta de bases de dados que forneçam o registro correto entre as nuvens de pontos. Essas bases são críticas no treinamento supervisionado de modelos de registro não rígido. Para resolver essa escassez, nós propomos uma estratégia de autoaprendizado baseada em deformações randômicas.
publishDate 2022
dc.date.accessioned.fl_str_mv 2022-12-01T04:51:21Z
dc.date.issued.fl_str_mv 2022
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10183/252056
dc.identifier.nrb.pt_BR.fl_str_mv 001154434
url http://hdl.handle.net/10183/252056
identifier_str_mv 001154434
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da UFRGS
instname:Universidade Federal do Rio Grande do Sul (UFRGS)
instacron:UFRGS
instname_str Universidade Federal do Rio Grande do Sul (UFRGS)
instacron_str UFRGS
institution UFRGS
reponame_str Biblioteca Digital de Teses e Dissertações da UFRGS
collection Biblioteca Digital de Teses e Dissertações da UFRGS
bitstream.url.fl_str_mv http://www.lume.ufrgs.br/bitstream/10183/252056/2/001154434.pdf.txt
http://www.lume.ufrgs.br/bitstream/10183/252056/1/001154434.pdf
bitstream.checksum.fl_str_mv b05066a5df3224433b58ca67673e951e
e559d8b2bea0e6c98193c30be126bacc
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da UFRGS - Universidade Federal do Rio Grande do Sul (UFRGS)
repository.mail.fl_str_mv lume@ufrgs.br||lume@ufrgs.br
_version_ 1800309206686892032