Neuromorphic Event-based Activity and Anomaly Detection

Detalhes bibliográficos
Autor(a) principal: Silva, Alessio Rivetti
Data de Publicação: 2021
Tipo de documento: Dissertação
Idioma: eng
Título da fonte: Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
Texto Completo: http://hdl.handle.net/10316/96136
Resumo: Dissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e Tecnologia
id RCAP_affb22b66b029a2ecbbaa9daf98d7d84
oai_identifier_str oai:estudogeral.uc.pt:10316/96136
network_acronym_str RCAP
network_name_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository_id_str 7160
spelling Neuromorphic Event-based Activity and Anomaly DetectionDeteção Neuromórfica baseada em Eventos de Atividades AnómalasCâmaras de EventosAprendizagem de MáquinaVisão por ComputadorVisão Baseada em EventosDeteção de Eventos AnómalosEvent-based VisionAnomalous Event DetectionEvent CamerasMachine LearningComputer VisionDissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e TecnologiaO desenvolvimento de sensores na forma de câmara tem vindo a causar um grande impacto na vida das pessoas, dado que diversos tipos de aplicações são suportados por esta tecnologia. Estas variam entre aplicações de lazer até aplicações de controlo de qualidade e segurança, entre muitas outras. Na última década, um tipo de câmara diferente, desenhado no final da década de 1980, começou a captar o interesse da comunidade de investigadores da área da Visão por Computador. Esta câmara tem diversas denominações, tais como câmara neuromórfica, retina de silício, sensor dinâmico de visão e a mais utilizada, câmara de eventos. As câmaras de eventos mimetizam o comportamento das estruturas neuronais presentes no olho humano. Como tal, elas capturam variações de luminosidade ao nível dos pixéis, contrastando com a captura de frames efetuada pelas câmaras convencionais. As características destas câmaras abriram caminho para um novo paradigma na área científica da Visão por Computador. Tipicamente, em aplicações ou cenários de videovigilância, existe uma grande preocupação no que diz respeito à privacidade das pessoas. As câmaras tradicionais que são utilizadas neste tipo de aplicações tem a capacidade de captar a aparência de um indivíduo, e este aspeto tem vindo a colocar uma barreira na aprovação da vigilância local por parte das pessoas. Não existe um consenso sobre qual é mais importante: privacidade ou segurança? As câmaras de eventos podem ajudar a resolver este problema, já que nenhuma informação relativa à aparência é captada por estas. Os eventos são despoletados por extremidades (do inglês, edges) em movimento, portanto, apenas é registada a silhueta de um indivíduo, tornando difícil a sua identificação. Para além disso, estas câmaras apresentam um desempenho eficaz em condições de baixa luminosidade, permitindo a sua utilização durante dias inteiros sem a necessidade de tecnologias suplementares, como câmaras de visão noturna através de radiação infravermelha. Outra vantagem desta tecnologia sobre as câmaras tradicionais reside no seu baixo consumo energético. Esta dissertação procura estudar o desempenho deste tipo de câmaras em situações de deteção de eventos ou atividades anómalas numa cena. No início do desenvolvimento deste trabalho, apenas tinham sido publicados dois artigos referentes a este tema. Esta dissertação segue a abordagem baseada no fluxo ótico e procura expandir esta última com novos algoritmos de aprendizagem e utilizando uma câmara de um modelo diferente.The development of camera sensors has had a great impact on people's lives, as several types of applications are backed by this technology. These can range from leisure applications to quality control and security applications, among many others. Over the past decade, a different type of camera sensor, designed in the end of the 1980's, started to gather the interest of the Computer Vision's research community. This camera has several denominations, including neuromorphic camera, silicon retina, dynamic vision sensor and the most used, event camera. Event cameras mimic the behaviour of the neuronal structures present in the human eye. Therefore, they capture brightness changes at pixel level, contrasting with the frame capturing performed by conventional cameras. This camera's characteristics have unlocked a new paradigm in the Computer Vision area of research. Typically, in surveillance applications or scenarios, there is a big concern with respect to people's privacy. Traditional cameras deployed in these applications are able to capture the appearance of an individual, and this aspect has created a barrier to people's approval of local surveillance. There is not a consensus over what is more important: privacy or security? Event cameras can help solve this issue, since no appearance information is gathered by them. Events are triggered by moving edges, thus, it only captures the individual's silhouette, making it very difficult to identify them. Moreover, these cameras are known for performing effectively in low light conditions, allowing usability through entire days without requiring supplementary technologies, such as infrared night vision cameras. Another advantage of this camera technology, over traditional cameras, lies in low power consumption. This dissertation aims at presenting how this specific camera sensor performs with regards to the detection of anomalous events or activities in a scene. At the beginning of the development of this work, only two articles concerning this subject had been published. This dissertation follows the optical flow-based approach and targets the expansion of the latter with new learning algorithms and by using a different camera model.2021-10-08info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesishttp://hdl.handle.net/10316/96136http://hdl.handle.net/10316/96136TID:202777570engSilva, Alessio Rivettiinfo:eu-repo/semantics/openAccessreponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãoinstacron:RCAAP2022-05-25T05:16:42Zoai:estudogeral.uc.pt:10316/96136Portal AgregadorONGhttps://www.rcaap.pt/oai/openaireopendoar:71602024-03-19T21:14:28.600625Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãofalse
dc.title.none.fl_str_mv Neuromorphic Event-based Activity and Anomaly Detection
Deteção Neuromórfica baseada em Eventos de Atividades Anómalas
title Neuromorphic Event-based Activity and Anomaly Detection
spellingShingle Neuromorphic Event-based Activity and Anomaly Detection
Silva, Alessio Rivetti
Câmaras de Eventos
Aprendizagem de Máquina
Visão por Computador
Visão Baseada em Eventos
Deteção de Eventos Anómalos
Event-based Vision
Anomalous Event Detection
Event Cameras
Machine Learning
Computer Vision
title_short Neuromorphic Event-based Activity and Anomaly Detection
title_full Neuromorphic Event-based Activity and Anomaly Detection
title_fullStr Neuromorphic Event-based Activity and Anomaly Detection
title_full_unstemmed Neuromorphic Event-based Activity and Anomaly Detection
title_sort Neuromorphic Event-based Activity and Anomaly Detection
author Silva, Alessio Rivetti
author_facet Silva, Alessio Rivetti
author_role author
dc.contributor.author.fl_str_mv Silva, Alessio Rivetti
dc.subject.por.fl_str_mv Câmaras de Eventos
Aprendizagem de Máquina
Visão por Computador
Visão Baseada em Eventos
Deteção de Eventos Anómalos
Event-based Vision
Anomalous Event Detection
Event Cameras
Machine Learning
Computer Vision
topic Câmaras de Eventos
Aprendizagem de Máquina
Visão por Computador
Visão Baseada em Eventos
Deteção de Eventos Anómalos
Event-based Vision
Anomalous Event Detection
Event Cameras
Machine Learning
Computer Vision
description Dissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e Tecnologia
publishDate 2021
dc.date.none.fl_str_mv 2021-10-08
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10316/96136
http://hdl.handle.net/10316/96136
TID:202777570
url http://hdl.handle.net/10316/96136
identifier_str_mv TID:202777570
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.source.none.fl_str_mv reponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron:RCAAP
instname_str Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron_str RCAAP
institution RCAAP
reponame_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
collection Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository.name.fl_str_mv Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
repository.mail.fl_str_mv
_version_ 1799134042152501248

Registros relacionados