Monitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificial

Detalhes bibliográficos
Autor(a) principal: VALE, Juan Pablo do Nascimento
Data de Publicação: 2022
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da UFMA
Texto Completo: https://tedebc.ufma.br/jspui/handle/tede/tede/4055
Resumo: The main space launch base in Brazil is the Alcântara Launch Center, which, due to its territorial extension, sensitive work, and security requirements, requires an automated form of perimeter control. Currently, new forms of perimeter monitoring are emerging based on artificial intelligence technologies, the so-called Smart Surveillance. In this work, we propose an embedded intelligent monitoring system based on facial detection and recognition, to control critical regions of terrestrial space at the Alcântara Launch Center. Embedded hardware is responsible for capturing and transmitting images, while processing is done on a central server. For facial detection, the Viola-Jones and Multi-Task Cascade Convolutional Neural Network (MTCNN) algorithms are used, with F1-Score of 61.28% and 87.29% respectively in the DroneFaces database. In the facial recognition process, FaceNet was used to extract features, and the kNN, SVM and Random Forest models were compared for classification. In facial recognition quality tests, an ROC-AUC of 0.999 was achieved using the SVM classifier in the FaceScrub database, and using the Random Forest classifier in the DroneFace database, an F1-Score of 56.6% was reached. In real-time tests, the system averages 5.8 fps using Viola-Jones, Facenet and Random Forest, and an average of 2.3 fps using MTCNN, Facenet and Random Forest.
id UFMA_9154c651c1d55e35138c6623512b4d06
oai_identifier_str oai:tede2:tede/4055
network_acronym_str UFMA
network_name_str Biblioteca Digital de Teses e Dissertações da UFMA
repository_id_str 2131
spelling BARRADAS FILHO, Alex Oliveirahttp://lattes.cnpq.br/4766794669249883BRAZ JUNIOR, Geraldohttp://lattes.cnpq.br/8287861610873629BARRADAS FILHO, Alex Oliveirahttp://lattes.cnpq.br/4766794669249883BRAZ JUNIOR, . Geraldohttp://lattes.cnpq.br/8287861610873629BARROS FILHO, Allan Kardec Duailibehttp://lattes.cnpq.br/0492330410079141GOMES JÚNIOR, Daniel Limahttp://lattes.cnpq.br/4754106250302979Juan Pablo do Nascimento ValeVALE, Juan Pablo do Nascimento2022-09-01T21:21:45Z2022-02-24VALE, Juan Pablo do Nascimento. Monitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificial. 2022. 69 f. Dissertação (Programa de Pós-Graduação em Engenharia Aeroespacial/CCET) - Universidade Federal do Maranhão, São Luís, 2022.https://tedebc.ufma.br/jspui/handle/tede/tede/4055The main space launch base in Brazil is the Alcântara Launch Center, which, due to its territorial extension, sensitive work, and security requirements, requires an automated form of perimeter control. Currently, new forms of perimeter monitoring are emerging based on artificial intelligence technologies, the so-called Smart Surveillance. In this work, we propose an embedded intelligent monitoring system based on facial detection and recognition, to control critical regions of terrestrial space at the Alcântara Launch Center. Embedded hardware is responsible for capturing and transmitting images, while processing is done on a central server. For facial detection, the Viola-Jones and Multi-Task Cascade Convolutional Neural Network (MTCNN) algorithms are used, with F1-Score of 61.28% and 87.29% respectively in the DroneFaces database. In the facial recognition process, FaceNet was used to extract features, and the kNN, SVM and Random Forest models were compared for classification. In facial recognition quality tests, an ROC-AUC of 0.999 was achieved using the SVM classifier in the FaceScrub database, and using the Random Forest classifier in the DroneFace database, an F1-Score of 56.6% was reached. In real-time tests, the system averages 5.8 fps using Viola-Jones, Facenet and Random Forest, and an average of 2.3 fps using MTCNN, Facenet and Random Forest.A principal base de lançamentos espaciais do Brasil é o Centro de Lançamentos de Alcân tara, que devido a sua extensão territorial, trabalho de natureza sensível, e requisições de segurança, necessita de uma forma automatizada de controle de perímetro. Atualmente novas formas de monitoramento de perímetro surgem baseadas em tecnologias de inteli gência artificial, a chamada Smart Surveillance. Neste trabalho, propomos um sistema embarcado de monitoramento inteligente baseado em detecção e reconhecimento facial, para controle de regiões críticas do espaço terrestre do Centro de Lançamento de Alcântara. O hardware embarcado é responsável pela captura e transmissão das imagens, enquanto o processamento é feito em um servidor central. Para a detecção facial são utilizados os algoritmos de Viola-Jones e Multi-Task Cascade Convolutional Neural Network (MTCNN), com F1-Score de 61, 28% e 87, 29% respectivamente na base de dados DroneFaces. No processo de reconhecimento facial utilizou-se o FaceNet para extração de características, e para classificação foram comparados os modelos kNN, SVM e Random Forest. Em testes de qualidade de reconhecimento facial, atingiu-se ROC-AUC de 0, 999 utilizando o classificador SVM na base de dados FaceScrub, e utilizando o classificador Random Forest na base de dados DroneFace atingiu-se F1-Score de 56, 6%. Em testes de tempo real, o sistema atinge uma média de 5, 8 fps utilizando Viola-Jones, Facenet e Random Forest, e uma média de 2, 3 fps utilizando MTCNN, Facenet e Random Forest.Submitted by Daniella Santos (daniella.santos@ufma.br) on 2022-09-01T21:21:45Z No. of bitstreams: 1 JUANDOVALE.pdf: 1941515 bytes, checksum: 6e39f35b3afc36fd657a20e3822be698 (MD5)Made available in DSpace on 2022-09-01T21:21:45Z (GMT). No. of bitstreams: 1 JUANDOVALE.pdf: 1941515 bytes, checksum: 6e39f35b3afc36fd657a20e3822be698 (MD5) Previous issue date: 2022-02-24application/pdfporUniversidade Federal do MaranhãoPROGRAMA DE PÓS-GRADUAÇÃO EM ENGENHARIA AEROESPACIAL/CCETUFMABrasilDEPARTAMENTO DE ENGENHARIA DA ELETRICIDADE/CCETCentro de Lançamento de Alcântara;sistema de monitoramento;reconhecimento facial;Alcântara Launch Center;smart security;face recognition.Engenharia AeroespacialMonitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificialIntelligent monitoring of the Center's ground operational perimeter Alcântara launches using image processing and artificial intelligenceinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UFMAinstname:Universidade Federal do Maranhão (UFMA)instacron:UFMAORIGINALJUANDOVALE.pdfJUANDOVALE.pdfapplication/pdf1941515http://tedebc.ufma.br:8080/bitstream/tede/4055/2/JUANDOVALE.pdf6e39f35b3afc36fd657a20e3822be698MD52LICENSElicense.txtlicense.txttext/plain; charset=utf-82255http://tedebc.ufma.br:8080/bitstream/tede/4055/1/license.txt97eeade1fce43278e63fe063657f8083MD51tede/40552022-09-01 18:21:45.661oai:tede2:tede/4055IExJQ0VOw4dBIERFIERJU1RSSUJVScOHw4NPIE7Dg08tRVhDTFVTSVZBCgpDb20gYSBhcHJlc2VudGHDp8OjbyBkZXN0YSBsaWNlbsOnYSxvIGF1dG9yIChlcykgb3UgbyB0aXR1bGFyIGRvcyBkaXJlaXRvcyBkZSBhdXRvciBjb25jZWRlIMOgIFVuaXZlcnNpZGFkZSBGZWRlcmFsIGRvIE1hcmFuaMOjbyAoVUZNQSkgbyBkaXJlaXRvIG7Do28tZXhjbHVzaXZvIGRlIHJlcHJvZHV6aXIsIHRyYWR1emlyIChjb25mb3JtZSBkZWZpbmlkbyBhYmFpeG8pLCBlL291IGRpc3RyaWJ1aXIgYSBzdWEgdGVzZSBvdSBkaXNzZXJ0YcOnw6NvIChpbmNsdWluZG8gbyByZXN1bW8pIHBvciB0b2RvIG8gbXVuZG8gbm8gZm9ybWF0byBpbXByZXNzbyBlIGVsZXRyw7RuaWNvIGUgZW0gcXVhbHF1ZXIgbWVpbywgaW5jbHVpbmRvIG9zIGZvcm1hdG9zIMOhdWRpbyBvdSB2w61kZW8uCgpWb2PDqiBjb25jb3JkYSBxdWUgYSBVRk1BIHBvZGUsIHNlbSBhbHRlcmFyIG8gY29udGXDumRvLCB0cmFuc3BvciBhIHN1YSB0ZXNlIG91IGRpc3NlcnRhw6fDo28gcGFyYSBxdWFscXVlciBtZWlvIG91IGZvcm1hdG8gcGFyYSBmaW5zIGRlIHByZXNlcnZhw6fDo28uCgpWb2PDqiB0YW1iw6ltIGNvbmNvcmRhIHF1ZSBhIFVGTUEgcG9kZSBtYW50ZXIgbWFpcyBkZSB1bWEgY8OzcGlhIGRlIHN1YSB0ZXNlIG91IGRpc3NlcnRhw6fDo28gcGFyYSBmaW5zIGRlIHNlZ3VyYW7Dp2EsIGJhY2stdXAgZSBwcmVzZXJ2YcOnw6NvLgoKVm9jw6ogZGVjbGFyYSBxdWUgYSBzdWEgdGVzZSBvdSBkaXNzZXJ0YcOnw6NvIMOpIG9yaWdpbmFsIGUgcXVlIHZvY8OqIHRlbSBvIHBvZGVyIGRlIGNvbmNlZGVyIG9zIGRpcmVpdG9zIGNvbnRpZG9zIG5lc3RhIGxpY2Vuw6dhLiBWb2PDqiB0YW1iw6ltIGRlY2xhcmEgcXVlIG8gZGVww7NzaXRvIGRhIHN1YSB0ZXNlIG91IGRpc3NlcnRhw6fDo28gbsOjbywgcXVlIHNlamEgZGUgc2V1IGNvbmhlY2ltZW50bywgaW5mcmluZ2UgZGlyZWl0b3MgYXV0b3JhaXMgZGUgbmluZ3XDqW0uCgpDYXNvIGEgc3VhIHRlc2Ugb3UgZGlzc2VydGHDp8OjbyBjb250ZW5oYSBtYXRlcmlhbCBxdWUgdm9jw6ogbsOjbyBwb3NzdWkgYSB0aXR1bGFyaWRhZGUgZG9zIGRpcmVpdG9zIGF1dG9yYWlzLCB2b2PDqiBkZWNsYXJhIHF1ZSBvYnRldmUgYSBwZXJtaXNzw6NvIGlycmVzdHJpdGEgZG8gZGV0ZW50b3IgZG9zIGRpcmVpdG9zIGF1dG9yYWlzIHBhcmEgY29uY2VkZXIgw6AgVUZNQSBvcyBkaXJlaXRvcyBhcHJlc2VudGFkb3MgbmVzdGEgbGljZW7Dp2EsIGUgcXVlIGVzc2UgbWF0ZXJpYWwgZGUgcHJvcHJpZWRhZGUgZGUgdGVyY2Vpcm9zIGVzdMOhIGNsYXJhbWVudGUgaWRlbnRpZmljYWRvIGUgcmVjb25oZWNpZG8gbm8gdGV4dG8gb3Ugbm8gY29udGXDumRvIGRhIHRlc2Ugb3UgZGlzc2VydGHDp8OjbyBvcmEgZGVwb3NpdGFkYS4KCkNBU08gQSBURVNFIE9VIERJU1NFUlRBw4fDg08gT1JBIERFUE9TSVRBREEgVEVOSEEgU0lETyBSRVNVTFRBRE8gREUgVU0gUEFUUk9Dw41OSU8gT1UgQVBPSU8gREUgVU1BIEFHw4pOQ0lBIERFIEZPTUVOVE8gT1UgT1VUUk8gT1JHQU5JU01PIFFVRSBOw4NPIFNFSkEgQSBVRk1BLCBWT0PDiiBERUNMQVJBIFFVRSBSRVNQRUlUT1UgVE9ET1MgRSBRVUFJU1FVRVIgRElSRUlUT1MgREUgUkVWSVPDg08gQ09NTyBUQU1Cw4lNIEFTIERFTUFJUyBPQlJJR0HDh8OVRVMgRVhJR0lEQVMgUE9SIENPTlRSQVRPIE9VIEFDT1JETy4KCkEgVUZNQSBzZSBjb21wcm9tZXRlIGEgaWRlbnRpZmljYXIgY2xhcmFtZW50ZSBvIHNldSBub21lIG91IG8ocykgbm9tZShzKSBkbyhzKSBkZXRlbnRvcihlcykgZG9zIGRpcmVpdG9zIGF1dG9yYWlzIGRhIHRlc2Ugb3UgZGlzc2VydGHDp8OjbywgZSBuw6NvIGZhcsOhIHF1YWxxdWVyIGFsdGVyYcOnw6NvLCBhbMOpbSBkYXF1ZWxhcyBjb25jZWRpZGFzIHBvciBlc3RhIGxpY2Vuw6dhLgoKRGVjbGFyYSB0YW1iw6ltIHF1ZSB0b2RhcyBhcyBhZmlsaWHDp8O1ZXMgY29ycG9yYXRpdmFzIG91IGluc3RpdHVjaW9uYWlzIGUgdG9kYXMgYXMgZm9udGVzIGRlIGFwb2lvIGZpbmFuY2Vpcm8gYW8gdHJhYmFsaG8gZXN0w6NvIGRldmlkYW1lbnRlIGNpdGFkYXMgb3UgbWVuY2lvbmFkYXMgZSBjZXJ0aWZpY2EgcXVlIG7Do28gaMOhIG5lbmh1bSBpbnRlcmVzc2UgY29tZXJjaWFsIG91IGFzc29jaWF0aXZvIHF1ZSByZXByZXNlbnRlIGNvbmZsaXRvIGRlIGludGVyZXNzZSBlbSBjb25leMOjbyBjb20gbyB0cmFiYWxobyBzdWJtZXRpZG8uCgoKCgoKCgo=Biblioteca Digital de Teses e Dissertaçõeshttps://tedebc.ufma.br/jspui/PUBhttp://tedebc.ufma.br:8080/oai/requestrepositorio@ufma.br||repositorio@ufma.bropendoar:21312022-09-01T21:21:45Biblioteca Digital de Teses e Dissertações da UFMA - Universidade Federal do Maranhão (UFMA)false
dc.title.por.fl_str_mv Monitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificial
dc.title.alternative.eng.fl_str_mv Intelligent monitoring of the Center's ground operational perimeter Alcântara launches using image processing and artificial intelligence
title Monitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificial
spellingShingle Monitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificial
VALE, Juan Pablo do Nascimento
Centro de Lançamento de Alcântara;
sistema de monitoramento;
reconhecimento facial;
Alcântara Launch Center;
smart security;
face recognition.
Engenharia Aeroespacial
title_short Monitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificial
title_full Monitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificial
title_fullStr Monitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificial
title_full_unstemmed Monitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificial
title_sort Monitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificial
author VALE, Juan Pablo do Nascimento
author_facet VALE, Juan Pablo do Nascimento
author_role author
dc.contributor.advisor1.fl_str_mv BARRADAS FILHO, Alex Oliveira
dc.contributor.advisor1Lattes.fl_str_mv http://lattes.cnpq.br/4766794669249883
dc.contributor.advisor-co1.fl_str_mv BRAZ JUNIOR, Geraldo
dc.contributor.advisor-co1Lattes.fl_str_mv http://lattes.cnpq.br/8287861610873629
dc.contributor.referee1.fl_str_mv BARRADAS FILHO, Alex Oliveira
dc.contributor.referee1Lattes.fl_str_mv http://lattes.cnpq.br/4766794669249883
dc.contributor.referee2.fl_str_mv BRAZ JUNIOR, . Geraldo
dc.contributor.referee2Lattes.fl_str_mv http://lattes.cnpq.br/8287861610873629
dc.contributor.referee3.fl_str_mv BARROS FILHO, Allan Kardec Duailibe
dc.contributor.referee3Lattes.fl_str_mv http://lattes.cnpq.br/0492330410079141
dc.contributor.referee4.fl_str_mv GOMES JÚNIOR, Daniel Lima
dc.contributor.referee4Lattes.fl_str_mv http://lattes.cnpq.br/4754106250302979
dc.contributor.authorLattes.fl_str_mv Juan Pablo do Nascimento Vale
dc.contributor.author.fl_str_mv VALE, Juan Pablo do Nascimento
contributor_str_mv BARRADAS FILHO, Alex Oliveira
BRAZ JUNIOR, Geraldo
BARRADAS FILHO, Alex Oliveira
BRAZ JUNIOR, . Geraldo
BARROS FILHO, Allan Kardec Duailibe
GOMES JÚNIOR, Daniel Lima
dc.subject.por.fl_str_mv Centro de Lançamento de Alcântara;
sistema de monitoramento;
reconhecimento facial;
topic Centro de Lançamento de Alcântara;
sistema de monitoramento;
reconhecimento facial;
Alcântara Launch Center;
smart security;
face recognition.
Engenharia Aeroespacial
dc.subject.eng.fl_str_mv Alcântara Launch Center;
smart security;
face recognition.
dc.subject.cnpq.fl_str_mv Engenharia Aeroespacial
description The main space launch base in Brazil is the Alcântara Launch Center, which, due to its territorial extension, sensitive work, and security requirements, requires an automated form of perimeter control. Currently, new forms of perimeter monitoring are emerging based on artificial intelligence technologies, the so-called Smart Surveillance. In this work, we propose an embedded intelligent monitoring system based on facial detection and recognition, to control critical regions of terrestrial space at the Alcântara Launch Center. Embedded hardware is responsible for capturing and transmitting images, while processing is done on a central server. For facial detection, the Viola-Jones and Multi-Task Cascade Convolutional Neural Network (MTCNN) algorithms are used, with F1-Score of 61.28% and 87.29% respectively in the DroneFaces database. In the facial recognition process, FaceNet was used to extract features, and the kNN, SVM and Random Forest models were compared for classification. In facial recognition quality tests, an ROC-AUC of 0.999 was achieved using the SVM classifier in the FaceScrub database, and using the Random Forest classifier in the DroneFace database, an F1-Score of 56.6% was reached. In real-time tests, the system averages 5.8 fps using Viola-Jones, Facenet and Random Forest, and an average of 2.3 fps using MTCNN, Facenet and Random Forest.
publishDate 2022
dc.date.accessioned.fl_str_mv 2022-09-01T21:21:45Z
dc.date.issued.fl_str_mv 2022-02-24
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.citation.fl_str_mv VALE, Juan Pablo do Nascimento. Monitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificial. 2022. 69 f. Dissertação (Programa de Pós-Graduação em Engenharia Aeroespacial/CCET) - Universidade Federal do Maranhão, São Luís, 2022.
dc.identifier.uri.fl_str_mv https://tedebc.ufma.br/jspui/handle/tede/tede/4055
identifier_str_mv VALE, Juan Pablo do Nascimento. Monitoramento inteligente do perímetro operacional terrestre do Centro de Lançamentos de Alcântara utilizando processamento de imagens e inteligência artificial. 2022. 69 f. Dissertação (Programa de Pós-Graduação em Engenharia Aeroespacial/CCET) - Universidade Federal do Maranhão, São Luís, 2022.
url https://tedebc.ufma.br/jspui/handle/tede/tede/4055
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Federal do Maranhão
dc.publisher.program.fl_str_mv PROGRAMA DE PÓS-GRADUAÇÃO EM ENGENHARIA AEROESPACIAL/CCET
dc.publisher.initials.fl_str_mv UFMA
dc.publisher.country.fl_str_mv Brasil
dc.publisher.department.fl_str_mv DEPARTAMENTO DE ENGENHARIA DA ELETRICIDADE/CCET
publisher.none.fl_str_mv Universidade Federal do Maranhão
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da UFMA
instname:Universidade Federal do Maranhão (UFMA)
instacron:UFMA
instname_str Universidade Federal do Maranhão (UFMA)
instacron_str UFMA
institution UFMA
reponame_str Biblioteca Digital de Teses e Dissertações da UFMA
collection Biblioteca Digital de Teses e Dissertações da UFMA
bitstream.url.fl_str_mv http://tedebc.ufma.br:8080/bitstream/tede/4055/2/JUANDOVALE.pdf
http://tedebc.ufma.br:8080/bitstream/tede/4055/1/license.txt
bitstream.checksum.fl_str_mv 6e39f35b3afc36fd657a20e3822be698
97eeade1fce43278e63fe063657f8083
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da UFMA - Universidade Federal do Maranhão (UFMA)
repository.mail.fl_str_mv repositorio@ufma.br||repositorio@ufma.br
_version_ 1809926206306385920