Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability
Autor(a) principal: | |
---|---|
Data de Publicação: | 2019 |
Tipo de documento: | Dissertação |
Idioma: | eng |
Título da fonte: | Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) |
Texto Completo: | http://hdl.handle.net/10316/87839 |
Resumo: | Dissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e Tecnologia |
id |
RCAP_0b0ab1615aa93c00760cf59e78c95110 |
---|---|
oai_identifier_str |
oai:estudogeral.uc.pt:10316/87839 |
network_acronym_str |
RCAP |
network_name_str |
Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) |
repository_id_str |
7160 |
spelling |
Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and ScalabilityCodificação e Representação de Imagens Light Field em pseudo-sequência para acesso aleatório e escalabilidade melhorados.Light FieldPseudo-SequenciaMV-HEVCAcceso AleatorioEscalabilidadeLight FieldPseudo-SequenceMV-HEVCRandom AccessScalabilityDissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e TecnologiaImagens Light Field contem uma representação visual mais rica do mundo. No entanto, o tamanho destas imagens acarreta custos significativos de armazenamento, transmissão e processamento. Por isso é atualmente necessário desenvolver novos métodos de compressão para imagens Light Field. Nesta dissertação propõe-se um novo método para comprimir eficazmente imagens Light Field. O novo método de compressão foi desenhado não só para comprimir eficientemente, mas também para melhorar o acesso aleatório e permitir escalabilidade.O método de compressão proposto é baseado em codificação de pseudo-sequências usando a extensão Multi-View do HEVC. O método primeiro decompõe a imagem Light Field em múltiplas vistas. Estas vistas são de seguida reordenadas, por ordem uma ordem de digitalização desenvolvida nesta dissertação ao qual chamamos Quadratic Sprial, onde várias pseudo-sequências são enviadas para um codificador de vídeo MV-HEVC. No codificador as pseudo-sequências são codificadas de acordo com uma estrutura de codificação. A estrutura de codificação foi desenhada especificamente para melhorar o acesso aleatório, sem deixar de explorar a correlação entre as vistas. O método de compressão desenvolvido permite também utilizar a estrutura em camadas do MV-HEVC, para descodificar imagens Light Field de forma escalável. No descodificador a imagem Light Field é representada de forma escalável, onde cada representação é composta por padrões periódicos de vistas. Estes padrões são gerados pela forma como a ordem de digitalização organiza as vistas em pseudo-sequências.Para avaliar o método de compressão desenvolvido, foram seguidas as condições de teste definidas pelo grupo JPEG Pleno. Os resultados experimentais obtidos demonstram que a ordem de digitalização Quadratic Spiral melhora o acesso aleatório. Foi também concluindo que o método desenvolvido comprime eficientemente imagens Light Field conseguindo alcançar um ganho médio PSNR de 7,5 dB comparado com JPEG de referência, o que está de acordo com melhores métodos de compressão atuais.Para finalizar, o método de compressão foi melhorado ajustando dinamicamente o parâmetro de quantização (QP) individualmente para cada trama. Para encontrar os melhores valores de QP para cada trama foram utilizados métodos heurísticos. Esta otimização do QP melhorou significativamente o método de compressão desenvolvido, permitindo comprimir uma imagem Light Field com menos 22% bits comparado com o método sem melhoramento.Light field images allow to capture richer visual information from our world. However, these images have large size which increase significantly storage, transmission, and processing costs. Therefore, new strategies to compress light field images are relevant and timely. This dissertation devises a new method to efficiently compress light field images. The compression method was designed to maximize the compression efficiency but also able to provide random access and scalability.The proposed compressing method is based on pseudo-sequence coding using the Multi-View extension of HEVC. The method first decomposes the light field image into sub-apertures, which are subsequently used by a novel scan order, denoted Quadratic Spiral, to form multiple pseudo- sequences to be encoded by an MV-HEVC encoder. In the encoder, the pseudo-sequences are encoded according to a coding structure. The proposed coding structure was specifically designed to improve the random access performance, while still exploiting the temporal and inter-view correlations. Furthermore, using the layered structure of the MV-HEVC, a scalable representation of the light field can be decoded. The scalable representation is composed of periodic patterns of sub-apertures, the patterns are generated by the way the scan order arranges the sub-apertures in pseudo-sequences.\newline \null \quad In order to evaluate the developed compression method, the test conditions defined by JPEG Pleno Group were followed. The experimental results demonstrate that the Quadratic Spiral scan order provides improved random access performance. It was concluded that the proposed method is an efficient compression method for light fields, as it achieves an average PSNR gain of 7.5 dB over reference JPEG, which is in accordance with the best current state-of-art methods.An optimization based on dynamically adjusting the quantization parameter (QP) individually for each frame was performed. Heuristic methods were used to find the best quantization parameter (QP) values of each frame. It was demonstrated that the QP optimization improves significantly the proposed compression method, as bitrate savings up to 22\%, were obtained.Outro - Financiado pela Fundação para a Ciência e a Tecnologia com titulo "FlexLiF" no ambito da unidade UID/EEA/50008/20192019-09-26info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesishttp://hdl.handle.net/10316/87839http://hdl.handle.net/10316/87839TID:202306410engGomes, Pedro de Medeirosinfo:eu-repo/semantics/openAccessreponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãoinstacron:RCAAP2021-05-12T11:52:50Zoai:estudogeral.uc.pt:10316/87839Portal AgregadorONGhttps://www.rcaap.pt/oai/openaireopendoar:71602024-03-19T21:08:40.422413Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãofalse |
dc.title.none.fl_str_mv |
Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability Codificação e Representação de Imagens Light Field em pseudo-sequência para acesso aleatório e escalabilidade melhorados. |
title |
Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability |
spellingShingle |
Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability Gomes, Pedro de Medeiros Light Field Pseudo-Sequencia MV-HEVC Acceso Aleatorio Escalabilidade Light Field Pseudo-Sequence MV-HEVC Random Access Scalability |
title_short |
Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability |
title_full |
Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability |
title_fullStr |
Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability |
title_full_unstemmed |
Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability |
title_sort |
Pseudo-Sequence Light Field Image Representation and Encoding for Improved Random Access and Scalability |
author |
Gomes, Pedro de Medeiros |
author_facet |
Gomes, Pedro de Medeiros |
author_role |
author |
dc.contributor.author.fl_str_mv |
Gomes, Pedro de Medeiros |
dc.subject.por.fl_str_mv |
Light Field Pseudo-Sequencia MV-HEVC Acceso Aleatorio Escalabilidade Light Field Pseudo-Sequence MV-HEVC Random Access Scalability |
topic |
Light Field Pseudo-Sequencia MV-HEVC Acceso Aleatorio Escalabilidade Light Field Pseudo-Sequence MV-HEVC Random Access Scalability |
description |
Dissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e Tecnologia |
publishDate |
2019 |
dc.date.none.fl_str_mv |
2019-09-26 |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
format |
masterThesis |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
http://hdl.handle.net/10316/87839 http://hdl.handle.net/10316/87839 TID:202306410 |
url |
http://hdl.handle.net/10316/87839 |
identifier_str_mv |
TID:202306410 |
dc.language.iso.fl_str_mv |
eng |
language |
eng |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.source.none.fl_str_mv |
reponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação instacron:RCAAP |
instname_str |
Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação |
instacron_str |
RCAAP |
institution |
RCAAP |
reponame_str |
Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) |
collection |
Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) |
repository.name.fl_str_mv |
Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação |
repository.mail.fl_str_mv |
|
_version_ |
1799133980158590976 |