Generation of hyperspectral digital surface model in forest areas using hyperspectral 2D frame camera onboard RPAS

Detalhes bibliográficos
Autor(a) principal: Oliveira, Raquel Alves de [UNESP]
Data de Publicação: 2017
Tipo de documento: Tese
Idioma: eng
Título da fonte: Repositório Institucional da UNESP
Texto Completo: http://hdl.handle.net/11449/152245
Resumo: Recentemente, os sensores hiperespectrais miniaturizados entraram no mercado e alguns modelos adquirem bandas hiperespectrais com geometria de quadro, com a vantagem de serem também operados em veículos aéreos remotamente pilotados (VARP). As imagens deste tipo de câmara podem ser utilizadas para a geração de modelos digitais de superfície hiperespectral (MDSHs) de alta resolução, usando o VARP, sem a necessidade do registro de dados de diferentes sensores ou diferente datas de aquisição. MDSHs aumentam o conhecimento sobre os alvos, uma vez que permitem modelar a reflectância do alvo utilizando dados provenientes de diferentes direções. Neste trabalho, a câmara hiperespectral de quadro utilizada não adquire todas as bandas instantaneamente, causando um deslocamento entre as bandas devido ao movimento da plataforma. Os principais objetivos deste projeto foram estudar e desenvolver técnicas para a geração de MDSHs em áreas de florestas, investigando e avaliando as principais etapas para o processamento das imagens da câmara hiperespectral de quadro até a geração do MSDH. Considerando que a tecnologia da câmara baseia-se em filtros ajustáveis, o estudo avaliou: a auto-calibração da câmara, verificando o comportamento dos parâmetros de orientação interior em diferentes bandas espectrais; o corregistro das bandas através de transformações geométricas 2D; e a estimativa dos parâmetros de orientação exterior. Em relação à geração do MDS, uma abordagem baseada em correspondência de imagem no espaço do objeto foi desenvolvida, adaptando o método de busca em linha vertical (VLL) para a geração MDSH e foi nomeado como VLL hiperespectral (HVLL). Adicionalmente, o uso de imagens classificadas para a adaptação dos parâmetros de correspondência foi avaliado com o objetivo de melhorar o processo de correspondência para diferentes objetos (HVLLC). Posteriormente, foram utilizadas múltiplas bandas no processo de correspondência de imagens, dados como múltiplos ângulos de visada e informação espectral foram calculados simultaneamente ao processo de correspondência de imagens. A avaliação da qualidade foi realizada comparando-se os MDSs gerados com os produzidos por um software comercial e por dados Airborne Laser Scanning (ALS). Esta investigação demonstrou que a técnica proposta pode ser usada para a geração de modelos 3D integrados aos dados hiperespectrais multiangulares da câmara hiperespectral de quadro. A avaliação de todas as etapas demonstrou que esta tecnologia pode fornecer dados geométricos e espectrais precisos e os MDSHs resultantes possuem potencial para várias aplicações de sensoriamento remoto.
id UNSP_f96536557e3faa91dce31e5195699ceb
oai_identifier_str oai:repositorio.unesp.br:11449/152245
network_acronym_str UNSP
network_name_str Repositório Institucional da UNESP
repository_id_str 2946
spelling Generation of hyperspectral digital surface model in forest areas using hyperspectral 2D frame camera onboard RPASGeração de modelo digital de superfície hiperespectral, em áreas de floresta utilizando câmara hiperespectral de quadro embarcada em VANTImage matchingHyperspectral digital surface modelHyperspectral frame cameraForest point cloudCorrespondência de imagensModelo digital de superfície hiperespectralCâmara hiperespectral de quadroNuvem de pontos de florestaRecentemente, os sensores hiperespectrais miniaturizados entraram no mercado e alguns modelos adquirem bandas hiperespectrais com geometria de quadro, com a vantagem de serem também operados em veículos aéreos remotamente pilotados (VARP). As imagens deste tipo de câmara podem ser utilizadas para a geração de modelos digitais de superfície hiperespectral (MDSHs) de alta resolução, usando o VARP, sem a necessidade do registro de dados de diferentes sensores ou diferente datas de aquisição. MDSHs aumentam o conhecimento sobre os alvos, uma vez que permitem modelar a reflectância do alvo utilizando dados provenientes de diferentes direções. Neste trabalho, a câmara hiperespectral de quadro utilizada não adquire todas as bandas instantaneamente, causando um deslocamento entre as bandas devido ao movimento da plataforma. Os principais objetivos deste projeto foram estudar e desenvolver técnicas para a geração de MDSHs em áreas de florestas, investigando e avaliando as principais etapas para o processamento das imagens da câmara hiperespectral de quadro até a geração do MSDH. Considerando que a tecnologia da câmara baseia-se em filtros ajustáveis, o estudo avaliou: a auto-calibração da câmara, verificando o comportamento dos parâmetros de orientação interior em diferentes bandas espectrais; o corregistro das bandas através de transformações geométricas 2D; e a estimativa dos parâmetros de orientação exterior. Em relação à geração do MDS, uma abordagem baseada em correspondência de imagem no espaço do objeto foi desenvolvida, adaptando o método de busca em linha vertical (VLL) para a geração MDSH e foi nomeado como VLL hiperespectral (HVLL). Adicionalmente, o uso de imagens classificadas para a adaptação dos parâmetros de correspondência foi avaliado com o objetivo de melhorar o processo de correspondência para diferentes objetos (HVLLC). Posteriormente, foram utilizadas múltiplas bandas no processo de correspondência de imagens, dados como múltiplos ângulos de visada e informação espectral foram calculados simultaneamente ao processo de correspondência de imagens. A avaliação da qualidade foi realizada comparando-se os MDSs gerados com os produzidos por um software comercial e por dados Airborne Laser Scanning (ALS). Esta investigação demonstrou que a técnica proposta pode ser usada para a geração de modelos 3D integrados aos dados hiperespectrais multiangulares da câmara hiperespectral de quadro. A avaliação de todas as etapas demonstrou que esta tecnologia pode fornecer dados geométricos e espectrais precisos e os MDSHs resultantes possuem potencial para várias aplicações de sensoriamento remoto.Recently, miniaturized hyperspectral sensors, operable from small Remotely Piloted Aerial Systems (RPAS), have entered the market and some of these sensors acquire hyperspectral bands in frame geometry. Images of the lightweight hyperspectral 2D frame camera can be used to generate high-resolution hyperspectral digital surface models (HDSMs), without the registration of data from different sensors or different dates of acquisition. HSDMs increase the knowledge about the targets since it allows modeling the target reflectance using data coming from different directions. In this study, the hyperspectral 2D frame camera used does not acquire all bands instantaneously, causing band misalignment due to the platform motion. The main aims of this project were to study and develop techniques for the generation of HDSMs in forest areas, studying and assessing the main steps to process the hyperspectral 2D frame camera images until the HDSM generation. Considering that the camera technology is based on tunable filters, the study have assessed the orientation and DSM generation steps: the self-calibrating bundle adjustment to verify the behaviour of the interior orientation parameters using different spectral bands; the co-registration of the bands using 2D geometric transformation; the exterior orientation parameter estimation. Regarding to the DSM generation, an approach based on object space image matching was developed, adapting the vertical line locus (VLL) method for HDSM generation, and was named as hyperspectral VLL (HVLL). Additionally, the use of image classification data was investigated in order to adapt the image matching parameters and improve the process of image matching for different objects (hyperspectral VLL classes - HVLLC). Further, multiple bands were used and the spectral and multiangular viewing geometry were computed simultaneously to the image matching method. Quality assessment was performed by comparing to DSMs generated to those produced by commercial software and also by Airborne Laser Scanning (ALS) data. This investigation demonstrated that the proposed technique can be used to generate integrated 3D information and multiangular hyperspectral data from hyperspectral 2D frame camera. The assessment of all steps showed that the hyperspectral 2D frame technology can provide accurate geometric and spectral data and the resulting HDSMs have potential for several remote sensing applications.Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES)Fundação de Amparo à Pesquisa do Estado de São Paulo (FAPESP)FAPESP: 2013/17787-3FAPESP: 2013/14444-0FAPESP: 2014/24844-6Universidade Estadual Paulista (Unesp)Tommaselli, Antonio Maria Garcia [UNESP]Honkavaara, EijaUniversidade Estadual Paulista (Unesp)Oliveira, Raquel Alves de [UNESP]2017-12-07T11:22:23Z2017-12-07T11:22:23Z2017-06-29info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisapplication/pdfhttp://hdl.handle.net/11449/15224500089491633004129043P0enginfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UNESPinstname:Universidade Estadual Paulista (UNESP)instacron:UNESP2023-11-19T06:14:47Zoai:repositorio.unesp.br:11449/152245Repositório InstitucionalPUBhttp://repositorio.unesp.br/oai/requestopendoar:29462023-11-19T06:14:47Repositório Institucional da UNESP - Universidade Estadual Paulista (UNESP)false
dc.title.none.fl_str_mv Generation of hyperspectral digital surface model in forest areas using hyperspectral 2D frame camera onboard RPAS
Geração de modelo digital de superfície hiperespectral, em áreas de floresta utilizando câmara hiperespectral de quadro embarcada em VANT
title Generation of hyperspectral digital surface model in forest areas using hyperspectral 2D frame camera onboard RPAS
spellingShingle Generation of hyperspectral digital surface model in forest areas using hyperspectral 2D frame camera onboard RPAS
Oliveira, Raquel Alves de [UNESP]
Image matching
Hyperspectral digital surface model
Hyperspectral frame camera
Forest point cloud
Correspondência de imagens
Modelo digital de superfície hiperespectral
Câmara hiperespectral de quadro
Nuvem de pontos de floresta
title_short Generation of hyperspectral digital surface model in forest areas using hyperspectral 2D frame camera onboard RPAS
title_full Generation of hyperspectral digital surface model in forest areas using hyperspectral 2D frame camera onboard RPAS
title_fullStr Generation of hyperspectral digital surface model in forest areas using hyperspectral 2D frame camera onboard RPAS
title_full_unstemmed Generation of hyperspectral digital surface model in forest areas using hyperspectral 2D frame camera onboard RPAS
title_sort Generation of hyperspectral digital surface model in forest areas using hyperspectral 2D frame camera onboard RPAS
author Oliveira, Raquel Alves de [UNESP]
author_facet Oliveira, Raquel Alves de [UNESP]
author_role author
dc.contributor.none.fl_str_mv Tommaselli, Antonio Maria Garcia [UNESP]
Honkavaara, Eija
Universidade Estadual Paulista (Unesp)
dc.contributor.author.fl_str_mv Oliveira, Raquel Alves de [UNESP]
dc.subject.por.fl_str_mv Image matching
Hyperspectral digital surface model
Hyperspectral frame camera
Forest point cloud
Correspondência de imagens
Modelo digital de superfície hiperespectral
Câmara hiperespectral de quadro
Nuvem de pontos de floresta
topic Image matching
Hyperspectral digital surface model
Hyperspectral frame camera
Forest point cloud
Correspondência de imagens
Modelo digital de superfície hiperespectral
Câmara hiperespectral de quadro
Nuvem de pontos de floresta
description Recentemente, os sensores hiperespectrais miniaturizados entraram no mercado e alguns modelos adquirem bandas hiperespectrais com geometria de quadro, com a vantagem de serem também operados em veículos aéreos remotamente pilotados (VARP). As imagens deste tipo de câmara podem ser utilizadas para a geração de modelos digitais de superfície hiperespectral (MDSHs) de alta resolução, usando o VARP, sem a necessidade do registro de dados de diferentes sensores ou diferente datas de aquisição. MDSHs aumentam o conhecimento sobre os alvos, uma vez que permitem modelar a reflectância do alvo utilizando dados provenientes de diferentes direções. Neste trabalho, a câmara hiperespectral de quadro utilizada não adquire todas as bandas instantaneamente, causando um deslocamento entre as bandas devido ao movimento da plataforma. Os principais objetivos deste projeto foram estudar e desenvolver técnicas para a geração de MDSHs em áreas de florestas, investigando e avaliando as principais etapas para o processamento das imagens da câmara hiperespectral de quadro até a geração do MSDH. Considerando que a tecnologia da câmara baseia-se em filtros ajustáveis, o estudo avaliou: a auto-calibração da câmara, verificando o comportamento dos parâmetros de orientação interior em diferentes bandas espectrais; o corregistro das bandas através de transformações geométricas 2D; e a estimativa dos parâmetros de orientação exterior. Em relação à geração do MDS, uma abordagem baseada em correspondência de imagem no espaço do objeto foi desenvolvida, adaptando o método de busca em linha vertical (VLL) para a geração MDSH e foi nomeado como VLL hiperespectral (HVLL). Adicionalmente, o uso de imagens classificadas para a adaptação dos parâmetros de correspondência foi avaliado com o objetivo de melhorar o processo de correspondência para diferentes objetos (HVLLC). Posteriormente, foram utilizadas múltiplas bandas no processo de correspondência de imagens, dados como múltiplos ângulos de visada e informação espectral foram calculados simultaneamente ao processo de correspondência de imagens. A avaliação da qualidade foi realizada comparando-se os MDSs gerados com os produzidos por um software comercial e por dados Airborne Laser Scanning (ALS). Esta investigação demonstrou que a técnica proposta pode ser usada para a geração de modelos 3D integrados aos dados hiperespectrais multiangulares da câmara hiperespectral de quadro. A avaliação de todas as etapas demonstrou que esta tecnologia pode fornecer dados geométricos e espectrais precisos e os MDSHs resultantes possuem potencial para várias aplicações de sensoriamento remoto.
publishDate 2017
dc.date.none.fl_str_mv 2017-12-07T11:22:23Z
2017-12-07T11:22:23Z
2017-06-29
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/11449/152245
000894916
33004129043P0
url http://hdl.handle.net/11449/152245
identifier_str_mv 000894916
33004129043P0
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Estadual Paulista (Unesp)
publisher.none.fl_str_mv Universidade Estadual Paulista (Unesp)
dc.source.none.fl_str_mv reponame:Repositório Institucional da UNESP
instname:Universidade Estadual Paulista (UNESP)
instacron:UNESP
instname_str Universidade Estadual Paulista (UNESP)
instacron_str UNESP
institution UNESP
reponame_str Repositório Institucional da UNESP
collection Repositório Institucional da UNESP
repository.name.fl_str_mv Repositório Institucional da UNESP - Universidade Estadual Paulista (UNESP)
repository.mail.fl_str_mv
_version_ 1799964998109233152