An efficient model for identifying firearm threats in videos

Detalhes bibliográficos
Autor(a) principal: Regio, Murilo Santos
Data de Publicação: 2022
Tipo de documento: Dissertação
Idioma: eng
Título da fonte: Biblioteca Digital de Teses e Dissertações da PUC_RS
Texto Completo: https://tede2.pucrs.br/tede2/handle/tede/10593
Resumo: Para que uma sociedade prospere, seus membros devem se sentir seguros em suas vidas cotidianas; caso contrário, o medo começaria a tomar conta da população, causando estresse e pânico e, consequentemente, reduzindo a qualidade de vida. Diversas políticas e medidas costumam a ser adotadas para preservar a segurança das pessoas, mas a medida que a população cresce e armas de fogo se tornam mais acessíveis, a segurança da sociedade fica mais ameaçada. Preocupados com isso, diversos trabalhos buscaram explorar o uso de câmeras de segurança, uma das medidas de segurança mais utilizadas, e identificar um evento de ameaça. No entanto, esses trabalhos não possuem práticas comuns de comparação, conjuntos de dados padrão ou restrições para os conjuntos de dados usados. O principal objetivo deste trabalho é explorar métodos e estratégias para enfrentar o desafio da detecção de ameaça à mão armada, assumindo um cenário de sistema de vigilância com hardware limitado. Para atingir esse objetivo, buscamos redes neurais eficientes do estado da arte e técnicas de compressão de modelos para termos uma base sólida e estratégias bem desenvolvidas que pudessem melhorar ainda mais seu desempenho. Também propomos um novo conjunto de dados desafiador para identificar ameaças à mão armada que segue critérios rigorosos para garantir a qualidade dos dados utilizados. Até onde sabemos, o nosso é o maior conjunto de dados disponível na área com anotações para detecção de objetos e que usa apenas dados de mundo real. Nosso conjunto de dados está disponível online, juntamente com as ferramentas usadas para criá-lo, facilitando sua capacidade de expansão. Além disso, avaliamos o desempenho de alguns métodos do estado da arte nele, e os resultados obtidos corroboram sua dificuldade. Fornecemos um conjunto extenso de experimentos para demonstrar os pontos fortes e fracos de cada abordagem e seu impacto nas detecções. Também realizamos experimentos em diferentes ambientes para avaliar como essas abordagens se comportavam em diferentes condições de hardware. Também evidenciamos quais são mais vantajosas ou mais versáteis e que melhor funcionam em nossos cenários.
id P_RS_049c294310f67c541c57e744401fca47
oai_identifier_str oai:tede2.pucrs.br:tede/10593
network_acronym_str P_RS
network_name_str Biblioteca Digital de Teses e Dissertações da PUC_RS
repository_id_str
spelling Manssour, Isabel Harbhttp://lattes.cnpq.br/4904489502853690http://lattes.cnpq.br/8763053989946119Regio, Murilo Santos2023-01-12T14:23:12Z2022-03-07https://tede2.pucrs.br/tede2/handle/tede/10593Para que uma sociedade prospere, seus membros devem se sentir seguros em suas vidas cotidianas; caso contrário, o medo começaria a tomar conta da população, causando estresse e pânico e, consequentemente, reduzindo a qualidade de vida. Diversas políticas e medidas costumam a ser adotadas para preservar a segurança das pessoas, mas a medida que a população cresce e armas de fogo se tornam mais acessíveis, a segurança da sociedade fica mais ameaçada. Preocupados com isso, diversos trabalhos buscaram explorar o uso de câmeras de segurança, uma das medidas de segurança mais utilizadas, e identificar um evento de ameaça. No entanto, esses trabalhos não possuem práticas comuns de comparação, conjuntos de dados padrão ou restrições para os conjuntos de dados usados. O principal objetivo deste trabalho é explorar métodos e estratégias para enfrentar o desafio da detecção de ameaça à mão armada, assumindo um cenário de sistema de vigilância com hardware limitado. Para atingir esse objetivo, buscamos redes neurais eficientes do estado da arte e técnicas de compressão de modelos para termos uma base sólida e estratégias bem desenvolvidas que pudessem melhorar ainda mais seu desempenho. Também propomos um novo conjunto de dados desafiador para identificar ameaças à mão armada que segue critérios rigorosos para garantir a qualidade dos dados utilizados. Até onde sabemos, o nosso é o maior conjunto de dados disponível na área com anotações para detecção de objetos e que usa apenas dados de mundo real. Nosso conjunto de dados está disponível online, juntamente com as ferramentas usadas para criá-lo, facilitando sua capacidade de expansão. Além disso, avaliamos o desempenho de alguns métodos do estado da arte nele, e os resultados obtidos corroboram sua dificuldade. Fornecemos um conjunto extenso de experimentos para demonstrar os pontos fortes e fracos de cada abordagem e seu impacto nas detecções. Também realizamos experimentos em diferentes ambientes para avaliar como essas abordagens se comportavam em diferentes condições de hardware. Também evidenciamos quais são mais vantajosas ou mais versáteis e que melhor funcionam em nossos cenários.For a society to prosper, its members must feel safe in their everyday lives; otherwise, fear would start to take over the population, causing stress and panic and, consequently, reducing the quality of life. Several policies and measures are usually adopted to preserve people’s security, but as the population grows and firearms become more accessible, society’s security becomes more threatened. Concerned with this, several works sought to explore the use of security cameras, one of the most commonly used security measures, and identify when a threatening event occurs. However, these works do not have common comparison practices, standard datasets, or constraints for the datasets used. The main goal of this work is to explore methods and strategies to address the challenge of firearm threat detection while assuming a scenario of a surveillance system with limited hardware. To achieve this goal, we sought well-known efficient neural networks from the state-of-the-art and model-compression techniques to have a solid basis to start from and well-developed strategies that could further improve their performance. We also propose a new challenging dataset for identifying firearm threats that follows rigorous controls to ensure the quality of the data used. To the best of our best knowledge, ours is the largest dataset available in the area based on frame-level annotations and that uses only real-world data. Our dataset is available online, alongside the tools used to create it, making it easier to expand it further. Moreover, we evaluated the performance of some state-of-the-art methods on it, and the obtained results corroborate with its difficulty. We provide an extensive set of experiments to present clearly each approach’s strengths and weaknesses and their impact on the detection performance. We also conducted experiments on different environments to evaluate how these approaches performed on different hardware conditions. We also clarified which ones are most advantageous or are more versatile and work well on our scenarios.Submitted by PPG Ciência da Computação (ppgcc@pucrs.br) on 2023-01-07T17:23:38Z No. of bitstreams: 1 MURILO_SANTOS_REGIO_DIS.pdf: 2151020 bytes, checksum: 75333901955a16ec2150b95a1a4c25bb (MD5)Approved for entry into archive by Sarajane Pan (sarajane.pan@pucrs.br) on 2023-01-12T14:16:29Z (GMT) No. of bitstreams: 1 MURILO_SANTOS_REGIO_DIS.pdf: 2151020 bytes, checksum: 75333901955a16ec2150b95a1a4c25bb (MD5)Made available in DSpace on 2023-01-12T14:23:12Z (GMT). No. of bitstreams: 1 MURILO_SANTOS_REGIO_DIS.pdf: 2151020 bytes, checksum: 75333901955a16ec2150b95a1a4c25bb (MD5) Previous issue date: 2022-03-07application/pdfhttps://tede2.pucrs.br/tede2/retrieve/186231/MURILO_SANTOS_REGIO_DIS.pdf.jpgengPontifícia Universidade Católica do Rio Grande do SulPrograma de Pós-Graduação em Ciência da ComputaçãoPUCRSBrasilEscola PolitécnicaSurveillanceSecurity CameraComputer VisionWeapon Threat DetectionModel CompressionVigilânciaCâmeras de SegurançaVisão ComputacionalDetecção de Ameaça à Mão ArmadaCompressão de ModelosCIENCIA DA COMPUTACAO::TEORIA DA COMPUTACAOAn efficient model for identifying firearm threats in videosUm modelo eficiente para identificacao de eventos de ameaca a mao armada em videosinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisTrabalho não apresenta restrição para publicação-4570527706994352458500500-862078257083325301info:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da PUC_RSinstname:Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS)instacron:PUC_RSTHUMBNAILMURILO_SANTOS_REGIO_DIS.pdf.jpgMURILO_SANTOS_REGIO_DIS.pdf.jpgimage/jpeg5237https://tede2.pucrs.br/tede2/bitstream/tede/10593/4/MURILO_SANTOS_REGIO_DIS.pdf.jpgf3bf938247e835ccd70b543d21e51e93MD54TEXTMURILO_SANTOS_REGIO_DIS.pdf.txtMURILO_SANTOS_REGIO_DIS.pdf.txttext/plain124877https://tede2.pucrs.br/tede2/bitstream/tede/10593/3/MURILO_SANTOS_REGIO_DIS.pdf.txtac051d5fa8df9952372e035aa32b42ddMD53ORIGINALMURILO_SANTOS_REGIO_DIS.pdfMURILO_SANTOS_REGIO_DIS.pdfapplication/pdf2151020https://tede2.pucrs.br/tede2/bitstream/tede/10593/2/MURILO_SANTOS_REGIO_DIS.pdf75333901955a16ec2150b95a1a4c25bbMD52LICENSElicense.txtlicense.txttext/plain; charset=utf-8590https://tede2.pucrs.br/tede2/bitstream/tede/10593/1/license.txt220e11f2d3ba5354f917c7035aadef24MD51tede/105932023-01-12 20:00:19.314oai:tede2.pucrs.br:tede/10593QXV0b3JpemE/P28gcGFyYSBQdWJsaWNhPz9vIEVsZXRyP25pY2E6IENvbSBiYXNlIG5vIGRpc3Bvc3RvIG5hIExlaSBGZWRlcmFsIG4/OS42MTAsIGRlIDE5IGRlIGZldmVyZWlybyBkZSAxOTk4LCBvIGF1dG9yIEFVVE9SSVpBIGEgcHVibGljYT8/byBlbGV0cj9uaWNhIGRhIHByZXNlbnRlIG9icmEgbm8gYWNlcnZvIGRhIEJpYmxpb3RlY2EgRGlnaXRhbCBkYSBQb250aWY/Y2lhIFVuaXZlcnNpZGFkZSBDYXQ/bGljYSBkbyBSaW8gR3JhbmRlIGRvIFN1bCwgc2VkaWFkYSBhIEF2LiBJcGlyYW5nYSA2NjgxLCBQb3J0byBBbGVncmUsIFJpbyBHcmFuZGUgZG8gU3VsLCBjb20gcmVnaXN0cm8gZGUgQ05QSiA4ODYzMDQxMzAwMDItODEgYmVtIGNvbW8gZW0gb3V0cmFzIGJpYmxpb3RlY2FzIGRpZ2l0YWlzLCBuYWNpb25haXMgZSBpbnRlcm5hY2lvbmFpcywgY29ucz9yY2lvcyBlIHJlZGVzID9zIHF1YWlzIGEgYmlibGlvdGVjYSBkYSBQVUNSUyBwb3NzYSBhIHZpciBwYXJ0aWNpcGFyLCBzZW0gP251cyBhbHVzaXZvIGFvcyBkaXJlaXRvcyBhdXRvcmFpcywgYSB0P3R1bG8gZGUgZGl2dWxnYT8/byBkYSBwcm9kdT8/byBjaWVudD9maWNhLgo=Biblioteca Digital de Teses e Dissertaçõeshttp://tede2.pucrs.br/tede2/PRIhttps://tede2.pucrs.br/oai/requestbiblioteca.central@pucrs.br||opendoar:2023-01-12T22:00:19Biblioteca Digital de Teses e Dissertações da PUC_RS - Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS)false
dc.title.por.fl_str_mv An efficient model for identifying firearm threats in videos
dc.title.alternative.por.fl_str_mv Um modelo eficiente para identificacao de eventos de ameaca a mao armada em videos
title An efficient model for identifying firearm threats in videos
spellingShingle An efficient model for identifying firearm threats in videos
Regio, Murilo Santos
Surveillance
Security Camera
Computer Vision
Weapon Threat Detection
Model Compression
Vigilância
Câmeras de Segurança
Visão Computacional
Detecção de Ameaça à Mão Armada
Compressão de Modelos
CIENCIA DA COMPUTACAO::TEORIA DA COMPUTACAO
title_short An efficient model for identifying firearm threats in videos
title_full An efficient model for identifying firearm threats in videos
title_fullStr An efficient model for identifying firearm threats in videos
title_full_unstemmed An efficient model for identifying firearm threats in videos
title_sort An efficient model for identifying firearm threats in videos
author Regio, Murilo Santos
author_facet Regio, Murilo Santos
author_role author
dc.contributor.advisor1.fl_str_mv Manssour, Isabel Harb
dc.contributor.advisor1Lattes.fl_str_mv http://lattes.cnpq.br/4904489502853690
dc.contributor.authorLattes.fl_str_mv http://lattes.cnpq.br/8763053989946119
dc.contributor.author.fl_str_mv Regio, Murilo Santos
contributor_str_mv Manssour, Isabel Harb
dc.subject.eng.fl_str_mv Surveillance
Security Camera
Computer Vision
Weapon Threat Detection
Model Compression
topic Surveillance
Security Camera
Computer Vision
Weapon Threat Detection
Model Compression
Vigilância
Câmeras de Segurança
Visão Computacional
Detecção de Ameaça à Mão Armada
Compressão de Modelos
CIENCIA DA COMPUTACAO::TEORIA DA COMPUTACAO
dc.subject.por.fl_str_mv Vigilância
Câmeras de Segurança
Visão Computacional
Detecção de Ameaça à Mão Armada
Compressão de Modelos
dc.subject.cnpq.fl_str_mv CIENCIA DA COMPUTACAO::TEORIA DA COMPUTACAO
description Para que uma sociedade prospere, seus membros devem se sentir seguros em suas vidas cotidianas; caso contrário, o medo começaria a tomar conta da população, causando estresse e pânico e, consequentemente, reduzindo a qualidade de vida. Diversas políticas e medidas costumam a ser adotadas para preservar a segurança das pessoas, mas a medida que a população cresce e armas de fogo se tornam mais acessíveis, a segurança da sociedade fica mais ameaçada. Preocupados com isso, diversos trabalhos buscaram explorar o uso de câmeras de segurança, uma das medidas de segurança mais utilizadas, e identificar um evento de ameaça. No entanto, esses trabalhos não possuem práticas comuns de comparação, conjuntos de dados padrão ou restrições para os conjuntos de dados usados. O principal objetivo deste trabalho é explorar métodos e estratégias para enfrentar o desafio da detecção de ameaça à mão armada, assumindo um cenário de sistema de vigilância com hardware limitado. Para atingir esse objetivo, buscamos redes neurais eficientes do estado da arte e técnicas de compressão de modelos para termos uma base sólida e estratégias bem desenvolvidas que pudessem melhorar ainda mais seu desempenho. Também propomos um novo conjunto de dados desafiador para identificar ameaças à mão armada que segue critérios rigorosos para garantir a qualidade dos dados utilizados. Até onde sabemos, o nosso é o maior conjunto de dados disponível na área com anotações para detecção de objetos e que usa apenas dados de mundo real. Nosso conjunto de dados está disponível online, juntamente com as ferramentas usadas para criá-lo, facilitando sua capacidade de expansão. Além disso, avaliamos o desempenho de alguns métodos do estado da arte nele, e os resultados obtidos corroboram sua dificuldade. Fornecemos um conjunto extenso de experimentos para demonstrar os pontos fortes e fracos de cada abordagem e seu impacto nas detecções. Também realizamos experimentos em diferentes ambientes para avaliar como essas abordagens se comportavam em diferentes condições de hardware. Também evidenciamos quais são mais vantajosas ou mais versáteis e que melhor funcionam em nossos cenários.
publishDate 2022
dc.date.issued.fl_str_mv 2022-03-07
dc.date.accessioned.fl_str_mv 2023-01-12T14:23:12Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://tede2.pucrs.br/tede2/handle/tede/10593
url https://tede2.pucrs.br/tede2/handle/tede/10593
dc.language.iso.fl_str_mv eng
language eng
dc.relation.program.fl_str_mv -4570527706994352458
dc.relation.confidence.fl_str_mv 500
500
dc.relation.cnpq.fl_str_mv -862078257083325301
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Pontifícia Universidade Católica do Rio Grande do Sul
dc.publisher.program.fl_str_mv Programa de Pós-Graduação em Ciência da Computação
dc.publisher.initials.fl_str_mv PUCRS
dc.publisher.country.fl_str_mv Brasil
dc.publisher.department.fl_str_mv Escola Politécnica
publisher.none.fl_str_mv Pontifícia Universidade Católica do Rio Grande do Sul
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da PUC_RS
instname:Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS)
instacron:PUC_RS
instname_str Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS)
instacron_str PUC_RS
institution PUC_RS
reponame_str Biblioteca Digital de Teses e Dissertações da PUC_RS
collection Biblioteca Digital de Teses e Dissertações da PUC_RS
bitstream.url.fl_str_mv https://tede2.pucrs.br/tede2/bitstream/tede/10593/4/MURILO_SANTOS_REGIO_DIS.pdf.jpg
https://tede2.pucrs.br/tede2/bitstream/tede/10593/3/MURILO_SANTOS_REGIO_DIS.pdf.txt
https://tede2.pucrs.br/tede2/bitstream/tede/10593/2/MURILO_SANTOS_REGIO_DIS.pdf
https://tede2.pucrs.br/tede2/bitstream/tede/10593/1/license.txt
bitstream.checksum.fl_str_mv f3bf938247e835ccd70b543d21e51e93
ac051d5fa8df9952372e035aa32b42dd
75333901955a16ec2150b95a1a4c25bb
220e11f2d3ba5354f917c7035aadef24
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da PUC_RS - Pontifícia Universidade Católica do Rio Grande do Sul (PUCRS)
repository.mail.fl_str_mv biblioteca.central@pucrs.br||
_version_ 1799765358970667008