Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentes
Autor(a) principal: | |
---|---|
Data de Publicação: | 2024 |
Tipo de documento: | Dissertação |
Idioma: | por |
Título da fonte: | Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP) |
Texto Completo: | https://hdl.handle.net/20.500.12733/20481 |
Resumo: | Orientador: Alexandre Xavier Falcão |
id |
UNICAMP-30_e6a1e581daf210dcd90b746ce39458c7 |
---|---|
oai_identifier_str |
oai::1397017 |
network_acronym_str |
UNICAMP-30 |
network_name_str |
Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP) |
repository_id_str |
|
spelling |
Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentesExtended features through contrastive learning in person identification from latent fingerprintsRedes neurais (Computação)Identificação biométricaAlgoritmos em grafosAprendizado de máquinaNeural networks (Computer science)Biometric identificationGraph algorithmsMachine learningOrientador: Alexandre Xavier FalcãoDissertação (mestrado) - Universidade Estadual de Campinas (UNICAMP), Instituto de ComputaçãoResumo: Muitos sistemas de reconhecimento de indivíduos utilizam biometrias corporais, destacando-se os sistemas baseados em impressões digitais. Esse traço biométrico é considerado universal, distinto entre diferentes indivíduos, invariante ao longo da vida e fácil de ser mensurado. Diante disso, é amplamente utilizado em aplicações como investigações forenses, serviços de finanças, saúde, sociais, dentre outros. Existem 3 tipos de digitais: rolada, pousada e latentes. As duas primeiras são obtidas por sensores em ambientes controlados e possuem alta qualidade de imagem. Latentes, por outro lado, são deixadas não intencionalmente e capturadas por agências de perícia em cenas de crime. Os principais algoritmos para comparação de diferentes impressões utilizam estruturas locais conhecidas como minúcias como forma de representação. Minúcias são centros de regiões características na imagem, como bifurcações ou términos abruptos de linhas. Algoritmos pautados em minúcias apresentam bastante sucesso em aplicações com digitais do tipo rolada ou pousada, comprovado pelas altas taxas de identificações corretas nas bases de dados da literatura. Entretanto, falham ao lidar com latentes, dada a baixa qualidade geral da imagem e a captação parcial do dedo. Para contornar este problema, técnicas para representação de minúcias usando características estendidas obtidas por meio de aprendizagem profunda vêm sendo propostas e apresentam resultados promissores na área. Contudo, grande parte dos trabalhos se apoiam no uso de grandes bases de dados privadas, coletadas ao longo de vários anos e, além disso, não apresentam um método claro para resolver o problema do emparelhamento ótimo de minúcias combinando as características estendidas com as características geométricas clássicas de minúcias. Dentro desse contexto, os principais objetivos desta dissertação foram melhorar a capacidade computacional de representação de impressões digitais latentes por meio de características estendidas de minúcias aprendidas por aprendizado contrastivo, e a melhoria de algoritmos de emparelhamento de impressões digitais que exploram tais características. Para tanto, a abordagem proposta explorou o Aprendizado Contrastivo, técnicas de aumentação de dados e um método de anotação fraca para treinar Redes Siamesas para extrair características estendidas de minúcias mesmo com uma base de dados bastante limitada. Além disso, exploraram-se o algoritmo húngaro e o algoritmo de agrupamento espectral para obter um emparelhamento de minúcias buscando otimalidade tanto do ponto de vista de similaridade dos componentes geométricos, quanto da similaridade das características estendidas. Propõem-se novas funções de cômputo de similaridade de minúcias levando em consideração todos os componentes das características estendidas. Validou-se o método proposto com experimentos de identificação na base de dados desafiadora NIST SD27, amplamente explorada na literatura. Mostrou-se uma melhoria significativa na taxa de identificação correta de indivíduos ao combinar características estendidas com métodos tradicionais de emparelhamento de minúciasAbstract: Fingerprints stand out among individual recognition systems. This biometric trait is universal, distinct among individuals, invariant throughout life, and easy to measure. It is widely used in forensic investigations and financial, health, and social services applications. There are three types of fingerprints: rolled, plain, and latent. Sensors in controlled environments obtain the first two and provide high image quality. Latents, on the other hand, are unintentionally left at crime scenes and are collected by forensic agencies. The main algorithms for comparing different fingerprints use local structures known as minutiae as a form of representation. Minutiae are the centers of characteristic regions in the image, such as bifurcations or abrupt ridge endings. Algorithms based on minutiae points are very successful in applications involving rolled or plain fingerprints, as proven by the high rates of correct identifications in literature databases. However, given the poor overall image quality and only partial finger capture, they present much lower results on latent fingerprints. Techniques for representing minutiae using extended features obtained through deep learning have given promising results to this problem. However, most of the works rely on the use of large private databases collected over several years and, in addition, do not present a straightforward method to solve the problem of optimal minutiae matching by combining extended features with minutiae classic geometric features. Within this context, the main objectives of this work were to improve the computational capacity of representing latent fingerprints through extended minutiae characteristics learned with contrastive learning and the improvement of matching algorithms that exploit such characteristics. The proposed approach explored Contrastive Learning, data augmentation techniques, and a weak annotation method to train Siamese Networks to extract deep minutiae embeddings even with a minimal database. Furthermore the gungarian algorithm and spectral clustering algorithm were explored to obtain a minutiae matching seeking optimality both from the perspective of the similarity of geometric components and the similarity of extended features. New minutiae similarity computation functions are proposed, taking into account all components of the extended features. . We validated the proposed methods through identification experiments on the challenging NIST SD27 database, which is widely used in the literature. The results show a significant improvement in the correct identification rate of individuals when extended features are combined with traditional minutiae matching methodsAbertoMestradoCiência da ComputaçãoMestre em Ciência da Computação[s.n.]Falcão, Alexandre Xavier, 1966-Reis, Marcelo da SilvaMenotti, DavidUniversidade Estadual de Campinas (UNICAMP). Instituto de ComputaçãoPrograma de Pós-Graduação em Ciência da ComputaçãoUNIVERSIDADE ESTADUAL DE CAMPINASSilva, André Igor Nóbrega da, 1996-20242024-04-26T00:00:00Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdf1 recurso online (107 p.) : il., digital, arquivo PDF.https://hdl.handle.net/20.500.12733/20481SILVA, André Igor Nóbrega da. Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentes. 2024. 1 recurso online (107 p.) Dissertação (mestrado) - Universidade Estadual de Campinas (UNICAMP), Instituto de Computação, Campinas, SP. Disponível em: https://hdl.handle.net/20.500.12733/20481. Acesso em: 25 jan. 2025.https://repositorio.unicamp.br/acervo/detalhe/1397017Cover: https://repositorio.unicamp.br/capa/capa?codigo=1397017Requisitos do sistema: Software para leitura de arquivo em PDFporreponame:Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP)instname:Universidade Estadual de Campinas (UNICAMP)instacron:UNICAMPinfo:eu-repo/semantics/openAccess2024-12-12T13:36:02Zoai::1397017Biblioteca Digital de Teses e DissertaçõesPUBhttp://repositorio.unicamp.br/oai/tese/oai.aspsbubd@unicamp.bropendoar:2024-12-12T13:36:02Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP) - Universidade Estadual de Campinas (UNICAMP)false |
dc.title.none.fl_str_mv |
Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentes Extended features through contrastive learning in person identification from latent fingerprints |
title |
Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentes |
spellingShingle |
Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentes Silva, André Igor Nóbrega da, 1996- Redes neurais (Computação) Identificação biométrica Algoritmos em grafos Aprendizado de máquina Neural networks (Computer science) Biometric identification Graph algorithms Machine learning |
title_short |
Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentes |
title_full |
Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentes |
title_fullStr |
Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentes |
title_full_unstemmed |
Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentes |
title_sort |
Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentes |
author |
Silva, André Igor Nóbrega da, 1996- |
author_facet |
Silva, André Igor Nóbrega da, 1996- |
author_role |
author |
dc.contributor.none.fl_str_mv |
Falcão, Alexandre Xavier, 1966- Reis, Marcelo da Silva Menotti, David Universidade Estadual de Campinas (UNICAMP). Instituto de Computação Programa de Pós-Graduação em Ciência da Computação UNIVERSIDADE ESTADUAL DE CAMPINAS |
dc.contributor.author.fl_str_mv |
Silva, André Igor Nóbrega da, 1996- |
dc.subject.por.fl_str_mv |
Redes neurais (Computação) Identificação biométrica Algoritmos em grafos Aprendizado de máquina Neural networks (Computer science) Biometric identification Graph algorithms Machine learning |
topic |
Redes neurais (Computação) Identificação biométrica Algoritmos em grafos Aprendizado de máquina Neural networks (Computer science) Biometric identification Graph algorithms Machine learning |
description |
Orientador: Alexandre Xavier Falcão |
publishDate |
2024 |
dc.date.none.fl_str_mv |
2024 2024-04-26T00:00:00Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
format |
masterThesis |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
https://hdl.handle.net/20.500.12733/20481 SILVA, André Igor Nóbrega da. Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentes. 2024. 1 recurso online (107 p.) Dissertação (mestrado) - Universidade Estadual de Campinas (UNICAMP), Instituto de Computação, Campinas, SP. Disponível em: https://hdl.handle.net/20.500.12733/20481. Acesso em: 25 jan. 2025. |
url |
https://hdl.handle.net/20.500.12733/20481 |
identifier_str_mv |
SILVA, André Igor Nóbrega da. Características estendidas por aprendizado contrastivo na identificação de pessoas a partir de impressões digitais latentes. 2024. 1 recurso online (107 p.) Dissertação (mestrado) - Universidade Estadual de Campinas (UNICAMP), Instituto de Computação, Campinas, SP. Disponível em: https://hdl.handle.net/20.500.12733/20481. Acesso em: 25 jan. 2025. |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.relation.none.fl_str_mv |
https://repositorio.unicamp.br/acervo/detalhe/1397017 Cover: https://repositorio.unicamp.br/capa/capa?codigo=1397017 Requisitos do sistema: Software para leitura de arquivo em PDF |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
application/pdf 1 recurso online (107 p.) : il., digital, arquivo PDF. |
dc.publisher.none.fl_str_mv |
[s.n.] |
publisher.none.fl_str_mv |
[s.n.] |
dc.source.none.fl_str_mv |
reponame:Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP) instname:Universidade Estadual de Campinas (UNICAMP) instacron:UNICAMP |
instname_str |
Universidade Estadual de Campinas (UNICAMP) |
instacron_str |
UNICAMP |
institution |
UNICAMP |
reponame_str |
Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP) |
collection |
Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP) |
repository.name.fl_str_mv |
Biblioteca Digital de Teses e Dissertações da Universidade Estadual de Campinas (UNICAMP) - Universidade Estadual de Campinas (UNICAMP) |
repository.mail.fl_str_mv |
sbubd@unicamp.br |
_version_ |
1822247364172185600 |