Detecção e remoção automática dos efeitos das sombras de áreas urbanas em imagens multiespectrais com alta resolução espacial

Detalhes bibliográficos
Autor(a) principal: Azevedo, Samara Calçado de [UNESP]
Data de Publicação: 2018
Tipo de documento: Tese
Idioma: por
Título da fonte: Repositório Institucional da UNESP
Texto Completo: http://hdl.handle.net/11449/155997
Resumo: Imagens orbitais com alta resolução espacial abriram uma nova era na extração de informações, especialmente em ambientes urbanos, em que valiosas informações sobre as superfícies tornaram-se disponíveis e de forma detalhada. No entanto, a obtenção de informação em áreas urbanas complexas pode ser comprometida pela presença de sombras, que chegam a ocupar uma parte significativa da imagem, causando sérias interferências na sua análise. A remoção de sombras é, portanto, um tema importante e ainda não resolvido devido à dificuldade da tarefa, sendo necessária na etapa de pré-processamento de diversas aplicações. Este trabalho propõe o desenvolvimento de uma nova abordagem automática para a restauração de áreas de sombras em imagens de satélite multiespectrais com alta resolução espacial. A abordagem se divide em três etapas principais e sequenciais, sendo a primeira o pré-processamento, que consiste na conversão das imagens para reflectância aparente e na fusão das bandas para a geração de índices espectrais. Na segunda etapa, a detecção das áreas de sombras é realizada pela combinação do top-hat por fechamento com a injunção de um parâmetro de área, calculado em função do índice de sombras NSDVI (Normalized Saturation-Value Difference Index). As regiões de sombras são refinadas para a geração da máscara de sombras, a qual é utilizada na terceira etapa, como guia na restauração pelo inpainting automático. A estratégia de restauração pelo inpainting híbrido, adaptado para o contexto multiespectral, combina a difusão anisotrópica, ordem de preenchimento definida a partir de uma imagem cartoon e equação de transporte, e o preenchimento baseado em blocos por amostragem local. A avaliação experimental do método proposto foi realizada em um conjunto de 215 imagens, fruto do recorte de duas cenas dos satélites WorldView-2 (WV-2) e Pléiades-1B (PL-1B) sobre a área urbana de São Paulo. Os resultados mostraram uma boa performance da detecção de sombras pelo método proposto, alcançando uma acurácia global média de 94,20% e de 90,84%, para as imagens WV-2 e PL-1B, respectivamente, sendo inclusive superior, quando comparado com outros dois métodos propostos na literatura. A remoção dos efeitos das sombras obtido pelo inpainting, proporcionou uma restauração satisfatória e coerente de feições como vias e telhados, que ficaram melhor discerníveis pelo inpainting. Além disso, quando quantidades substanciais de áreas não contamindas por sombras estão disponíveis, o inpainting aumentou as áreas úteis da imagem mais do que a restauração baseada em outras técnicas de transformação de intensidades, como o matching de histogramas. Assim, frente à necessidade de informações extraídas de imagens multiespectrais, espera-se que o método possa contribuir com a detecção e remoção automática dos efeitos de sombras em imagens multiespectrais com alta resolução espacial de áreas urbanas.
id UNSP_cc836ae77a1e613b8c17ed1c13f48a18
oai_identifier_str oai:repositorio.unesp.br:11449/155997
network_acronym_str UNSP
network_name_str Repositório Institucional da UNESP
repository_id_str 2946
spelling Detecção e remoção automática dos efeitos das sombras de áreas urbanas em imagens multiespectrais com alta resolução espacialAutomatic shadow detection and removal from urban areas in high resolution multispectral imagesDetecção automática de sombrasInpaintingMelhoria radiométricaMorfologia matemáticaImagens de alta resoluçãoAutomatic shadow detectionHybrid inpaintingHigh resolution imageryImagens orbitais com alta resolução espacial abriram uma nova era na extração de informações, especialmente em ambientes urbanos, em que valiosas informações sobre as superfícies tornaram-se disponíveis e de forma detalhada. No entanto, a obtenção de informação em áreas urbanas complexas pode ser comprometida pela presença de sombras, que chegam a ocupar uma parte significativa da imagem, causando sérias interferências na sua análise. A remoção de sombras é, portanto, um tema importante e ainda não resolvido devido à dificuldade da tarefa, sendo necessária na etapa de pré-processamento de diversas aplicações. Este trabalho propõe o desenvolvimento de uma nova abordagem automática para a restauração de áreas de sombras em imagens de satélite multiespectrais com alta resolução espacial. A abordagem se divide em três etapas principais e sequenciais, sendo a primeira o pré-processamento, que consiste na conversão das imagens para reflectância aparente e na fusão das bandas para a geração de índices espectrais. Na segunda etapa, a detecção das áreas de sombras é realizada pela combinação do top-hat por fechamento com a injunção de um parâmetro de área, calculado em função do índice de sombras NSDVI (Normalized Saturation-Value Difference Index). As regiões de sombras são refinadas para a geração da máscara de sombras, a qual é utilizada na terceira etapa, como guia na restauração pelo inpainting automático. A estratégia de restauração pelo inpainting híbrido, adaptado para o contexto multiespectral, combina a difusão anisotrópica, ordem de preenchimento definida a partir de uma imagem cartoon e equação de transporte, e o preenchimento baseado em blocos por amostragem local. A avaliação experimental do método proposto foi realizada em um conjunto de 215 imagens, fruto do recorte de duas cenas dos satélites WorldView-2 (WV-2) e Pléiades-1B (PL-1B) sobre a área urbana de São Paulo. Os resultados mostraram uma boa performance da detecção de sombras pelo método proposto, alcançando uma acurácia global média de 94,20% e de 90,84%, para as imagens WV-2 e PL-1B, respectivamente, sendo inclusive superior, quando comparado com outros dois métodos propostos na literatura. A remoção dos efeitos das sombras obtido pelo inpainting, proporcionou uma restauração satisfatória e coerente de feições como vias e telhados, que ficaram melhor discerníveis pelo inpainting. Além disso, quando quantidades substanciais de áreas não contamindas por sombras estão disponíveis, o inpainting aumentou as áreas úteis da imagem mais do que a restauração baseada em outras técnicas de transformação de intensidades, como o matching de histogramas. Assim, frente à necessidade de informações extraídas de imagens multiespectrais, espera-se que o método possa contribuir com a detecção e remoção automática dos efeitos de sombras em imagens multiespectrais com alta resolução espacial de áreas urbanas.High resolution satellite images has played an important role in information extraction especially in urban areas, since valuable information and higher level of details from surface become available with these images. Nevertheless, the task of extracting information from complex urban environment can be hampered by shadows, which can occupy a significant part into the image and, thus negatively affecting the image analysis. Therefore, due to the complexity of the problem, shadow removal is a crucial as one of the first pre-processing steps to enhance the performance of many subsequent steps and applications. The main goal of this thesis is to present a new automatic method for shadow removal in high spatial resolution satellite multispectral images. The proposed method comprises three main steps: the first one is the pre-processing, which includesthe conversion of the target image to the top of atmosphere (TOA) reflectance and the image pansherpening to spectral indices generation. Secondly, a shadow pixels candidates’ identification is performed, combining black-top-hat (BTH) transformation with area injunction driven by the normalized saturation-value difference index (NSDVI) mask. The obtained output is a shadow mask, which is used to properly guide our automatic inpainting-inspired strategy in the restoration step. In the third step, a hybrid inpainting-based strategy specifically adapted for the multispectral imagery context is applied to recover shadow areas, which unifies anisotropic diffusion, filling-in priority based on cartoon image representations, transport equation and block-based pixel replication using local dynamic sampling. The performance of our approach has been evaluated by taking 215 subset images from WorldView-2 (WV-2) and Pléiades-1B (PL-1B) that encompasses the city of São Paulo. The method achieves an overall accuracy on shadow detection up to 94.2%, for WV-2, and 90.84%, for PL-1B. The comparative results indicate that the proposed method outperforms two existing state-of-the-art methods. Shadow effects are mitigated by local inpainting method in which the satisfactory outputs demonstrate good coherence for highway and building rooftops recovery. Moreover, when largely non-contaminated areas are available in the image, the proposed approach improves significantly more areas of the image than the intensity-based transformation techniques, such as the histogram matching method. Once only multispectral imagery is required as input data, the approach can be suitable to support other remote sensing applications as well.Fundação de Amparo à Pesquisa do Estado de São Paulo (FAPESP)2013/25257-4Universidade Estadual Paulista (Unesp)Silva, Erivaldo Antonio da [UNESP]Universidade Estadual Paulista (Unesp)Azevedo, Samara Calçado de [UNESP]2018-09-17T13:46:15Z2018-09-17T13:46:15Z2018-08-30info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisapplication/pdfhttp://hdl.handle.net/11449/15599700090785433004129043P091035450045071350000-0002-7069-0479porinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UNESPinstname:Universidade Estadual Paulista (UNESP)instacron:UNESP2023-10-25T06:06:53Zoai:repositorio.unesp.br:11449/155997Repositório InstitucionalPUBhttp://repositorio.unesp.br/oai/requestopendoar:29462023-10-25T06:06:53Repositório Institucional da UNESP - Universidade Estadual Paulista (UNESP)false
dc.title.none.fl_str_mv Detecção e remoção automática dos efeitos das sombras de áreas urbanas em imagens multiespectrais com alta resolução espacial
Automatic shadow detection and removal from urban areas in high resolution multispectral images
title Detecção e remoção automática dos efeitos das sombras de áreas urbanas em imagens multiespectrais com alta resolução espacial
spellingShingle Detecção e remoção automática dos efeitos das sombras de áreas urbanas em imagens multiespectrais com alta resolução espacial
Azevedo, Samara Calçado de [UNESP]
Detecção automática de sombras
Inpainting
Melhoria radiométrica
Morfologia matemática
Imagens de alta resolução
Automatic shadow detection
Hybrid inpainting
High resolution imagery
title_short Detecção e remoção automática dos efeitos das sombras de áreas urbanas em imagens multiespectrais com alta resolução espacial
title_full Detecção e remoção automática dos efeitos das sombras de áreas urbanas em imagens multiespectrais com alta resolução espacial
title_fullStr Detecção e remoção automática dos efeitos das sombras de áreas urbanas em imagens multiespectrais com alta resolução espacial
title_full_unstemmed Detecção e remoção automática dos efeitos das sombras de áreas urbanas em imagens multiespectrais com alta resolução espacial
title_sort Detecção e remoção automática dos efeitos das sombras de áreas urbanas em imagens multiespectrais com alta resolução espacial
author Azevedo, Samara Calçado de [UNESP]
author_facet Azevedo, Samara Calçado de [UNESP]
author_role author
dc.contributor.none.fl_str_mv Silva, Erivaldo Antonio da [UNESP]
Universidade Estadual Paulista (Unesp)
dc.contributor.author.fl_str_mv Azevedo, Samara Calçado de [UNESP]
dc.subject.por.fl_str_mv Detecção automática de sombras
Inpainting
Melhoria radiométrica
Morfologia matemática
Imagens de alta resolução
Automatic shadow detection
Hybrid inpainting
High resolution imagery
topic Detecção automática de sombras
Inpainting
Melhoria radiométrica
Morfologia matemática
Imagens de alta resolução
Automatic shadow detection
Hybrid inpainting
High resolution imagery
description Imagens orbitais com alta resolução espacial abriram uma nova era na extração de informações, especialmente em ambientes urbanos, em que valiosas informações sobre as superfícies tornaram-se disponíveis e de forma detalhada. No entanto, a obtenção de informação em áreas urbanas complexas pode ser comprometida pela presença de sombras, que chegam a ocupar uma parte significativa da imagem, causando sérias interferências na sua análise. A remoção de sombras é, portanto, um tema importante e ainda não resolvido devido à dificuldade da tarefa, sendo necessária na etapa de pré-processamento de diversas aplicações. Este trabalho propõe o desenvolvimento de uma nova abordagem automática para a restauração de áreas de sombras em imagens de satélite multiespectrais com alta resolução espacial. A abordagem se divide em três etapas principais e sequenciais, sendo a primeira o pré-processamento, que consiste na conversão das imagens para reflectância aparente e na fusão das bandas para a geração de índices espectrais. Na segunda etapa, a detecção das áreas de sombras é realizada pela combinação do top-hat por fechamento com a injunção de um parâmetro de área, calculado em função do índice de sombras NSDVI (Normalized Saturation-Value Difference Index). As regiões de sombras são refinadas para a geração da máscara de sombras, a qual é utilizada na terceira etapa, como guia na restauração pelo inpainting automático. A estratégia de restauração pelo inpainting híbrido, adaptado para o contexto multiespectral, combina a difusão anisotrópica, ordem de preenchimento definida a partir de uma imagem cartoon e equação de transporte, e o preenchimento baseado em blocos por amostragem local. A avaliação experimental do método proposto foi realizada em um conjunto de 215 imagens, fruto do recorte de duas cenas dos satélites WorldView-2 (WV-2) e Pléiades-1B (PL-1B) sobre a área urbana de São Paulo. Os resultados mostraram uma boa performance da detecção de sombras pelo método proposto, alcançando uma acurácia global média de 94,20% e de 90,84%, para as imagens WV-2 e PL-1B, respectivamente, sendo inclusive superior, quando comparado com outros dois métodos propostos na literatura. A remoção dos efeitos das sombras obtido pelo inpainting, proporcionou uma restauração satisfatória e coerente de feições como vias e telhados, que ficaram melhor discerníveis pelo inpainting. Além disso, quando quantidades substanciais de áreas não contamindas por sombras estão disponíveis, o inpainting aumentou as áreas úteis da imagem mais do que a restauração baseada em outras técnicas de transformação de intensidades, como o matching de histogramas. Assim, frente à necessidade de informações extraídas de imagens multiespectrais, espera-se que o método possa contribuir com a detecção e remoção automática dos efeitos de sombras em imagens multiespectrais com alta resolução espacial de áreas urbanas.
publishDate 2018
dc.date.none.fl_str_mv 2018-09-17T13:46:15Z
2018-09-17T13:46:15Z
2018-08-30
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/11449/155997
000907854
33004129043P0
9103545004507135
0000-0002-7069-0479
url http://hdl.handle.net/11449/155997
identifier_str_mv 000907854
33004129043P0
9103545004507135
0000-0002-7069-0479
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Estadual Paulista (Unesp)
publisher.none.fl_str_mv Universidade Estadual Paulista (Unesp)
dc.source.none.fl_str_mv reponame:Repositório Institucional da UNESP
instname:Universidade Estadual Paulista (UNESP)
instacron:UNESP
instname_str Universidade Estadual Paulista (UNESP)
instacron_str UNESP
institution UNESP
reponame_str Repositório Institucional da UNESP
collection Repositório Institucional da UNESP
repository.name.fl_str_mv Repositório Institucional da UNESP - Universidade Estadual Paulista (UNESP)
repository.mail.fl_str_mv
_version_ 1799964690034458624