Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability

Detalhes bibliográficos
Autor(a) principal: Gomes, Pedro de Medeiros
Data de Publicação: 2019
Tipo de documento: Dissertação
Idioma: eng
Título da fonte: Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
Texto Completo: http://hdl.handle.net/10316/87839
Resumo: Dissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e Tecnologia
id RCAP_0b0ab1615aa93c00760cf59e78c95110
oai_identifier_str oai:estudogeral.uc.pt:10316/87839
network_acronym_str RCAP
network_name_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository_id_str 7160
spelling Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and ScalabilityCodificação e Representação de Imagens Light Field em pseudo-sequência para acesso aleatório e escalabilidade melhorados.Light FieldPseudo-SequenciaMV-HEVCAcceso AleatorioEscalabilidadeLight FieldPseudo-SequenceMV-HEVCRandom AccessScalabilityDissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e TecnologiaImagens Light Field contem uma representação visual mais rica do mundo. No entanto, o tamanho destas imagens acarreta custos significativos de armazenamento, transmissão e processamento. Por isso é atualmente necessário desenvolver novos métodos de compressão para imagens Light Field. Nesta dissertação propõe-se um novo método para comprimir eficazmente imagens Light Field. O novo método de compressão foi desenhado não só para comprimir eficientemente, mas também para melhorar o acesso aleatório e permitir escalabilidade.O método de compressão proposto é baseado em codificação de pseudo-sequências usando a extensão Multi-View do HEVC. O método primeiro decompõe a imagem Light Field em múltiplas vistas. Estas vistas são de seguida reordenadas, por ordem uma ordem de digitalização desenvolvida nesta dissertação ao qual chamamos Quadratic Sprial, onde várias pseudo-sequências são enviadas para um codificador de vídeo MV-HEVC. No codificador as pseudo-sequências são codificadas de acordo com uma estrutura de codificação. A estrutura de codificação foi desenhada especificamente para melhorar o acesso aleatório, sem deixar de explorar a correlação entre as vistas. O método de compressão desenvolvido permite também utilizar a estrutura em camadas do MV-HEVC, para descodificar imagens Light Field de forma escalável. No descodificador a imagem Light Field é representada de forma escalável, onde cada representação é composta por padrões periódicos de vistas. Estes padrões são gerados pela forma como a ordem de digitalização organiza as vistas em pseudo-sequências.Para avaliar o método de compressão desenvolvido, foram seguidas as condições de teste definidas pelo grupo JPEG Pleno. Os resultados experimentais obtidos demonstram que a ordem de digitalização Quadratic Spiral melhora o acesso aleatório. Foi também concluindo que o método desenvolvido comprime eficientemente imagens Light Field conseguindo alcançar um ganho médio PSNR de 7,5 dB comparado com JPEG de referência, o que está de acordo com melhores métodos de compressão atuais.Para finalizar, o método de compressão foi melhorado ajustando dinamicamente o parâmetro de quantização (QP) individualmente para cada trama. Para encontrar os melhores valores de QP para cada trama foram utilizados métodos heurísticos. Esta otimização do QP melhorou significativamente o método de compressão desenvolvido, permitindo comprimir uma imagem Light Field com menos 22% bits comparado com o método sem melhoramento.Light field images allow to capture richer visual information from our world. However, these images have large size which increase significantly storage, transmission, and processing costs. Therefore, new strategies to compress light field images are relevant and timely. This dissertation devises a new method to efficiently compress light field images. The compression method was designed to maximize the compression efficiency but also able to provide random access and scalability.The proposed compressing method is based on pseudo-sequence coding using the Multi-View extension of HEVC. The method first decomposes the light field image into sub-apertures, which are subsequently used by a novel scan order, denoted Quadratic Spiral, to form multiple pseudo- sequences to be encoded by an MV-HEVC encoder. In the encoder, the pseudo-sequences are encoded according to a coding structure. The proposed coding structure was specifically designed to improve the random access performance, while still exploiting the temporal and inter-view correlations. Furthermore, using the layered structure of the MV-HEVC, a scalable representation of the light field can be decoded. The scalable representation is composed of periodic patterns of sub-apertures, the patterns are generated by the way the scan order arranges the sub-apertures in pseudo-sequences.\newline \null \quad In order to evaluate the developed compression method, the test conditions defined by JPEG Pleno Group were followed. The experimental results demonstrate that the Quadratic Spiral scan order provides improved random access performance. It was concluded that the proposed method is an efficient compression method for light fields, as it achieves an average PSNR gain of 7.5 dB over reference JPEG, which is in accordance with the best current state-of-art methods.An optimization based on dynamically adjusting the quantization parameter (QP) individually for each frame was performed. Heuristic methods were used to find the best quantization parameter (QP) values of each frame. It was demonstrated that the QP optimization improves significantly the proposed compression method, as bitrate savings up to 22\%, were obtained.Outro - Financiado pela Fundação para a Ciência e a Tecnologia com titulo "FlexLiF" no ambito da unidade UID/EEA/50008/20192019-09-26info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesishttp://hdl.handle.net/10316/87839http://hdl.handle.net/10316/87839TID:202306410engGomes, Pedro de Medeirosinfo:eu-repo/semantics/openAccessreponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãoinstacron:RCAAP2021-05-12T11:52:50Zoai:estudogeral.uc.pt:10316/87839Portal AgregadorONGhttps://www.rcaap.pt/oai/openaireopendoar:71602024-03-19T21:08:40.422413Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãofalse
dc.title.none.fl_str_mv Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability
Codificação e Representação de Imagens Light Field em pseudo-sequência para acesso aleatório e escalabilidade melhorados.
title Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability
spellingShingle Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability
Gomes, Pedro de Medeiros
Light Field
Pseudo-Sequencia
MV-HEVC
Acceso Aleatorio
Escalabilidade
Light Field
Pseudo-Sequence
MV-HEVC
Random Access
Scalability
title_short Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability
title_full Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability
title_fullStr Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability
title_full_unstemmed Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability
title_sort Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability
author Gomes, Pedro de Medeiros
author_facet Gomes, Pedro de Medeiros
author_role author
dc.contributor.author.fl_str_mv Gomes, Pedro de Medeiros
dc.subject.por.fl_str_mv Light Field
Pseudo-Sequencia
MV-HEVC
Acceso Aleatorio
Escalabilidade
Light Field
Pseudo-Sequence
MV-HEVC
Random Access
Scalability
topic Light Field
Pseudo-Sequencia
MV-HEVC
Acceso Aleatorio
Escalabilidade
Light Field
Pseudo-Sequence
MV-HEVC
Random Access
Scalability
description Dissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e Tecnologia
publishDate 2019
dc.date.none.fl_str_mv 2019-09-26
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10316/87839
http://hdl.handle.net/10316/87839
TID:202306410
url http://hdl.handle.net/10316/87839
identifier_str_mv TID:202306410
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.source.none.fl_str_mv reponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron:RCAAP
instname_str Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron_str RCAAP
institution RCAAP
reponame_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
collection Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository.name.fl_str_mv Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
repository.mail.fl_str_mv
_version_ 1799133980158590976