Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicos
Autor(a) principal: | |
---|---|
Data de Publicação: | 2015 |
Tipo de documento: | Tese |
Idioma: | por |
Título da fonte: | Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) |
Texto Completo: | http://repositorio.ufes.br/handle/10/4312 |
Resumo: | Visual search is the mechanism that involves a scan of the visual field in order to find an object of interest. The brain region responsible for performing the visual search, performed by saccadic eye movements, is the Superior Colliculus. A computer system for visual search biologically inspired needs to modell the saccadic eye movement, the transformation suffered by the images captured by the eyes in the way from the retina to the Superior Colliculus, and the response of the neurons of the Superior Colliculus to patterns of interest in the visual scene. In this work, we present a biologically inspired long-term object tracking system based on Virtual Generalizing Random Access Memory (VG-RAM) Weightless Neural Networks (WNN). VG-RAM WNN is an effective machine learning technique that offers simple implementation and fast training. Our system models the biological saccadic eye movement, the transformation suffered by the images captured by the eyes from the retina to the Superior Colliculus (SC), and the response of SC neurons to previously seen patterns. We evaluated the performance of our system using a well-known visual tracking database. Our experimental results show that our approach is capable of reliably and efficiently track an object of interest in a video with accuracy equivalent or superior to related work. |
id |
UFES_54e16730f9dfa6d25202e4ecc1346ba1 |
---|---|
oai_identifier_str |
oai:repositorio.ufes.br:10/4312 |
network_acronym_str |
UFES |
network_name_str |
Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) |
repository_id_str |
2108 |
spelling |
Santos, Thiago Oliveira dosSouza, Alberto Ferreira deAndrade, Mariella BergerGonçalves, Claudine Santos BadueAguiar, Edilson deSalles, EvandroFrança, Felipe Maia Galvão2016-08-29T15:33:29Z2016-07-112016-08-29T15:33:29Z2015-04-09Visual search is the mechanism that involves a scan of the visual field in order to find an object of interest. The brain region responsible for performing the visual search, performed by saccadic eye movements, is the Superior Colliculus. A computer system for visual search biologically inspired needs to modell the saccadic eye movement, the transformation suffered by the images captured by the eyes in the way from the retina to the Superior Colliculus, and the response of the neurons of the Superior Colliculus to patterns of interest in the visual scene. In this work, we present a biologically inspired long-term object tracking system based on Virtual Generalizing Random Access Memory (VG-RAM) Weightless Neural Networks (WNN). VG-RAM WNN is an effective machine learning technique that offers simple implementation and fast training. Our system models the biological saccadic eye movement, the transformation suffered by the images captured by the eyes from the retina to the Superior Colliculus (SC), and the response of SC neurons to previously seen patterns. We evaluated the performance of our system using a well-known visual tracking database. Our experimental results show that our approach is capable of reliably and efficiently track an object of interest in a video with accuracy equivalent or superior to related work.A busca visual é o mecanismo por meio do qual, a partir do conhecimento prévio da imagem de um objeto de interesse, conseguimos encontrá-lo no campo visual se ele estiver nele presente. A região cerebral responsável pela realização da busca visual, realizada através dos movimentos sacádicos dos olhos, é conhecida como Superior Colliculus. Um sistema computacional de busca visual biologicamente inspirado precisa modelar o sistema biológico de movimentos sacádicos dos olhos, as transformações sofridas pelas imagens captadas pelos olhos em seu caminho para o Superior Colliculus (SC) no cérebro e a resposta dos neurônios do SC para padrões aprendidos anteriormente. Neste trabalho, apresentamos uma modelagem matemático-computacional de uma arquitetura neural que representa o Superior Colliculus. Esta arquitetura neural é baseada em Generalização Virtual de Memória de Acesso Aleatório em Redes Neurais Sem Peso (Virtual Generalizing Random Access Memory Weightless Neural Networks – VGRAM WNN) e no mapeamento log-polar da retina para o Superior Colliculus. Com a nossa implementação desta arquitetura é possível, a partir de pontos de interesse em uma determinada imagem bidimensional previamente treinados, realizar a busca visual por estes pontos em imagens diferentes da treinada. O modelo de busca visual biologicamente inspirado foi incorporado em um sistema automático de rastreamento (tracking) de longo prazo de objetos de interesse em vídeo. Nossos resultados experimentais mostram quer nosso sistema de rastreamento visual é capaz de lidar com todos os desafios apresentados e se equipara ao estado da arte em rastreamento de objetos.TextANDRADE, Mariella Berger. Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicos. 2015. 141 f. Tese (Doutorado em Ciência da Computação) - Universidade Federal do Espírito Santo, Centro Tecnológico, Vitória, 2015.http://repositorio.ufes.br/handle/10/4312porUniversidade Federal do Espírito SantoDoutorado em Ciência da ComputaçãoPrograma de Pós-Graduação em InformáticaUFESBRCentro TecnológicoMovimentos sacádicosRastreamento automáticoOlhos - MovimentosSistemas de computaçãoCampos visuaisCogniçãoVisão por computadorCiência da Computação004Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicosinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da Universidade Federal do Espírito Santo (riUfes)instname:Universidade Federal do Espírito Santo (UFES)instacron:UFESORIGINALTeseDoutorado_MariellaBerger.pdfapplication/pdf6978408http://repositorio.ufes.br/bitstreams/743b3360-2104-48c8-8d68-41c3b2d8a461/downloadbcf7ceec4a0d627b3c37ba2d7f902045MD5110/43122024-07-17 16:57:04.263oai:repositorio.ufes.br:10/4312http://repositorio.ufes.brRepositório InstitucionalPUBhttp://repositorio.ufes.br/oai/requestopendoar:21082024-10-15T18:01:02.065045Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) - Universidade Federal do Espírito Santo (UFES)false |
dc.title.none.fl_str_mv |
Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicos |
title |
Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicos |
spellingShingle |
Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicos Andrade, Mariella Berger Movimentos sacádicos Ciência da Computação Rastreamento automático Olhos - Movimentos Sistemas de computação Campos visuais Cognição Visão por computador 004 |
title_short |
Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicos |
title_full |
Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicos |
title_fullStr |
Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicos |
title_full_unstemmed |
Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicos |
title_sort |
Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicos |
author |
Andrade, Mariella Berger |
author_facet |
Andrade, Mariella Berger |
author_role |
author |
dc.contributor.advisor-co1.fl_str_mv |
Santos, Thiago Oliveira dos |
dc.contributor.advisor1.fl_str_mv |
Souza, Alberto Ferreira de |
dc.contributor.author.fl_str_mv |
Andrade, Mariella Berger |
dc.contributor.referee1.fl_str_mv |
Gonçalves, Claudine Santos Badue |
dc.contributor.referee2.fl_str_mv |
Aguiar, Edilson de |
dc.contributor.referee3.fl_str_mv |
Salles, Evandro |
dc.contributor.referee4.fl_str_mv |
França, Felipe Maia Galvão |
contributor_str_mv |
Santos, Thiago Oliveira dos Souza, Alberto Ferreira de Gonçalves, Claudine Santos Badue Aguiar, Edilson de Salles, Evandro França, Felipe Maia Galvão |
dc.subject.por.fl_str_mv |
Movimentos sacádicos |
topic |
Movimentos sacádicos Ciência da Computação Rastreamento automático Olhos - Movimentos Sistemas de computação Campos visuais Cognição Visão por computador 004 |
dc.subject.cnpq.fl_str_mv |
Ciência da Computação |
dc.subject.br-rjbn.none.fl_str_mv |
Rastreamento automático Olhos - Movimentos Sistemas de computação Campos visuais Cognição Visão por computador |
dc.subject.udc.none.fl_str_mv |
004 |
description |
Visual search is the mechanism that involves a scan of the visual field in order to find an object of interest. The brain region responsible for performing the visual search, performed by saccadic eye movements, is the Superior Colliculus. A computer system for visual search biologically inspired needs to modell the saccadic eye movement, the transformation suffered by the images captured by the eyes in the way from the retina to the Superior Colliculus, and the response of the neurons of the Superior Colliculus to patterns of interest in the visual scene. In this work, we present a biologically inspired long-term object tracking system based on Virtual Generalizing Random Access Memory (VG-RAM) Weightless Neural Networks (WNN). VG-RAM WNN is an effective machine learning technique that offers simple implementation and fast training. Our system models the biological saccadic eye movement, the transformation suffered by the images captured by the eyes from the retina to the Superior Colliculus (SC), and the response of SC neurons to previously seen patterns. We evaluated the performance of our system using a well-known visual tracking database. Our experimental results show that our approach is capable of reliably and efficiently track an object of interest in a video with accuracy equivalent or superior to related work. |
publishDate |
2015 |
dc.date.issued.fl_str_mv |
2015-04-09 |
dc.date.accessioned.fl_str_mv |
2016-08-29T15:33:29Z |
dc.date.available.fl_str_mv |
2016-07-11 2016-08-29T15:33:29Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/doctoralThesis |
format |
doctoralThesis |
status_str |
publishedVersion |
dc.identifier.citation.fl_str_mv |
ANDRADE, Mariella Berger. Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicos. 2015. 141 f. Tese (Doutorado em Ciência da Computação) - Universidade Federal do Espírito Santo, Centro Tecnológico, Vitória, 2015. |
dc.identifier.uri.fl_str_mv |
http://repositorio.ufes.br/handle/10/4312 |
identifier_str_mv |
ANDRADE, Mariella Berger. Sistema de rastreamento visual de objetos baseado em movimentos oculares sacádicos. 2015. 141 f. Tese (Doutorado em Ciência da Computação) - Universidade Federal do Espírito Santo, Centro Tecnológico, Vitória, 2015. |
url |
http://repositorio.ufes.br/handle/10/4312 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
Text |
dc.publisher.none.fl_str_mv |
Universidade Federal do Espírito Santo Doutorado em Ciência da Computação |
dc.publisher.program.fl_str_mv |
Programa de Pós-Graduação em Informática |
dc.publisher.initials.fl_str_mv |
UFES |
dc.publisher.country.fl_str_mv |
BR |
dc.publisher.department.fl_str_mv |
Centro Tecnológico |
publisher.none.fl_str_mv |
Universidade Federal do Espírito Santo Doutorado em Ciência da Computação |
dc.source.none.fl_str_mv |
reponame:Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) instname:Universidade Federal do Espírito Santo (UFES) instacron:UFES |
instname_str |
Universidade Federal do Espírito Santo (UFES) |
instacron_str |
UFES |
institution |
UFES |
reponame_str |
Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) |
collection |
Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) |
bitstream.url.fl_str_mv |
http://repositorio.ufes.br/bitstreams/743b3360-2104-48c8-8d68-41c3b2d8a461/download |
bitstream.checksum.fl_str_mv |
bcf7ceec4a0d627b3c37ba2d7f902045 |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 |
repository.name.fl_str_mv |
Repositório Institucional da Universidade Federal do Espírito Santo (riUfes) - Universidade Federal do Espírito Santo (UFES) |
repository.mail.fl_str_mv |
|
_version_ |
1813022567958577152 |