Sumarização de vídeos de jogos de futebol baseada em características audiovisuais e biométricas

Detalhes bibliográficos
Autor(a) principal: Lourenço, David André da Silva
Data de Publicação: 2019
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
Texto Completo: http://hdl.handle.net/10400.21/11948
Resumo: Dissertação para obtenção do grau de mestre em Engenharia de Redes de Comunicação e Multimédia
id RCAP_7b8ed0219c73a8949666d51505503970
oai_identifier_str oai:repositorio.ipl.pt:10400.21/11948
network_acronym_str RCAP
network_name_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository_id_str 7160
spelling Sumarização de vídeos de jogos de futebol baseada em características audiovisuais e biométricasVariabilidade do ritmo cardíacoHeart rate variabilityProcessamento de vídeoVideo processingCaracterísticas audiovisuaisAudiovisual characteristicsSegmentaçãoShot segmentationClassificaçãoShot classificationDissertação para obtenção do grau de mestre em Engenharia de Redes de Comunicação e MultimédiaCom o passar dos anos tem-se vindo a tornar um desafio cada vez maior gerir a quantidade de dados gerados pelas várias indústrias tecnológicas, sendo uma das maiores produtoras de conteúdo a área de entretenimento desportivo. Tendo como exemplo o futebol, podemos verificar que é completamente impossível para o consumidor destes conteúdos visualizar todos os jogos, dada a quantidade de equipas existentes e a duração desses jogos. Existe a necessidade de sumarizar os jogos de futebol num conjunto de segmentos de vídeo que consigam, de forma resumida e estruturada, apresentar ao utilizador um resumo conciso do que de relevante ocorreu no jogo, ao fazer com que este não perca nenhum momento chave mas ao mesmo tempo garantindo que não existe uma sobre-exposição relativa a eventos que não apresentam interesse justificativo. Parte dos trabalhos existentes sobre a automatização da sumarização dos vídeos assentam apenas sobre o processamento de características audiovisuais que permitem a extração de semânticas relevantes e a sua consequente classificação. É proposto um sistema que adiciona novas características de classificação como a variabilidade do ritmo cardíaco e emoções anotadas manualmente pelo utilizador. Um dos problemas abordados pelo sistema proposto foi a correta e fiável captação da informação relativa à variabilidade do ritmo cardíaco e das emoções sentidas pelo utilizador a determinada altura do jogo. Para resolver este problema foi implementada como parte do sistema uma aplicação para ser executada exclusivamente em dispositivos móveis Android que permite ao utilizador gravar as suas emoções e informação de batimento cardíaco para depois poderem ser processados e utilizados na classificação dos planos.O sistema proposto incluí o processamento de características visuais para efetuar a segmentação do vídeo em planos, como o cálculo dos histogramas das várias imagens por forma a detetar transições instantâneas e graduais. Estas características são também utilizadas para inferir acontecimentos de relevância como a presença da grande área em determinado plano e a amostragem de cartões amarelos e vermelhos. Toda esta informação irá ser utilizada em conjunto para melhorar a fiabilidade e robustez dos algoritmos existentes de segmentação e classificação de planos em vídeos relativos a jogos de futebol.Over the years it has become increasingly challenging to manage the sheer amount of data generated by the many technological industries, one of the largest content producers being the sports entertainment area. Taking football as an example, we can see that it is completely impossible for the average consumer of these contents to visualize all the matches in which it has interest, given the number of existent teams and the long duration of a match. Given this cenario, there is the need to summarize the football matches in a set of video segments that can, in a short and structured way, tell the consumer of this type of content the "story" of the game to make sure it does not miss any key moments of the match but at the same time ensure that there is no overexposure relating to events that do not present justifying interest. Much of the existing work on automating video summarization rely only on audiovisual features processing wich allow the extraction of relevant semantics and their consequent classification. We propose a system that builds on these themes already studied adding new features such as heart rate variability and emotions manually entered by the user. One of the problems addressed by the proposed system is the correct and reliable captation of the information on the heart rate variability and the emotions felt by the user at a certain point in the match. To solve this problem a mobile Android application was developed as part of the proposed system that allows the user to record his emotions and heart rate information to be proccessed and used on the shot classification. The proposed system includes the processing of visual characteristics to perform segmentation of the video into shots, such as calculating the histograms of the various images to detect instantaneous and gradual transitions. These characteristics are also used to infer relevant events such as the presence of the penalty box and yellow and red cards on a shot. All of this information will then be combined and used to improve reliability and robustness of the existing algorithms regarding segmentation and classification of shots on football match videos.Instituto Superior de Engenharia de LisboaJesus, Rui Manuel Feliciano deLourenço, André RibeiroRCIPLLourenço, David André da Silva2020-06-26T15:20:51Z2019-04-292019-04-29T00:00:00Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttp://hdl.handle.net/10400.21/11948TID:202490149porLOURENÇO, David André da Silva - Sumarização de vídeos de jogos de futebol baseada em características audiovisuais e biométricas. Lisboa: Instituto Superior de Engenharia de Lisboa, 2019. Dissertação de mestrado.info:eu-repo/semantics/openAccessreponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãoinstacron:RCAAP2023-08-03T10:03:55Zoai:repositorio.ipl.pt:10400.21/11948Portal AgregadorONGhttps://www.rcaap.pt/oai/openaireopendoar:71602024-03-19T20:20:07.920655Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãofalse
dc.title.none.fl_str_mv Sumarização de vídeos de jogos de futebol baseada em características audiovisuais e biométricas
title Sumarização de vídeos de jogos de futebol baseada em características audiovisuais e biométricas
spellingShingle Sumarização de vídeos de jogos de futebol baseada em características audiovisuais e biométricas
Lourenço, David André da Silva
Variabilidade do ritmo cardíaco
Heart rate variability
Processamento de vídeo
Video processing
Características audiovisuais
Audiovisual characteristics
Segmentação
Shot segmentation
Classificação
Shot classification
title_short Sumarização de vídeos de jogos de futebol baseada em características audiovisuais e biométricas
title_full Sumarização de vídeos de jogos de futebol baseada em características audiovisuais e biométricas
title_fullStr Sumarização de vídeos de jogos de futebol baseada em características audiovisuais e biométricas
title_full_unstemmed Sumarização de vídeos de jogos de futebol baseada em características audiovisuais e biométricas
title_sort Sumarização de vídeos de jogos de futebol baseada em características audiovisuais e biométricas
author Lourenço, David André da Silva
author_facet Lourenço, David André da Silva
author_role author
dc.contributor.none.fl_str_mv Jesus, Rui Manuel Feliciano de
Lourenço, André Ribeiro
RCIPL
dc.contributor.author.fl_str_mv Lourenço, David André da Silva
dc.subject.por.fl_str_mv Variabilidade do ritmo cardíaco
Heart rate variability
Processamento de vídeo
Video processing
Características audiovisuais
Audiovisual characteristics
Segmentação
Shot segmentation
Classificação
Shot classification
topic Variabilidade do ritmo cardíaco
Heart rate variability
Processamento de vídeo
Video processing
Características audiovisuais
Audiovisual characteristics
Segmentação
Shot segmentation
Classificação
Shot classification
description Dissertação para obtenção do grau de mestre em Engenharia de Redes de Comunicação e Multimédia
publishDate 2019
dc.date.none.fl_str_mv 2019-04-29
2019-04-29T00:00:00Z
2020-06-26T15:20:51Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10400.21/11948
TID:202490149
url http://hdl.handle.net/10400.21/11948
identifier_str_mv TID:202490149
dc.language.iso.fl_str_mv por
language por
dc.relation.none.fl_str_mv LOURENÇO, David André da Silva - Sumarização de vídeos de jogos de futebol baseada em características audiovisuais e biométricas. Lisboa: Instituto Superior de Engenharia de Lisboa, 2019. Dissertação de mestrado.
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Instituto Superior de Engenharia de Lisboa
publisher.none.fl_str_mv Instituto Superior de Engenharia de Lisboa
dc.source.none.fl_str_mv reponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron:RCAAP
instname_str Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron_str RCAAP
institution RCAAP
reponame_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
collection Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository.name.fl_str_mv Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
repository.mail.fl_str_mv
_version_ 1799133469362618368