Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos

Detalhes bibliográficos
Autor(a) principal: Kuhnen, Igor Antonio
Data de Publicação: 2016
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Repositório Institucional da UFMT
Texto Completo: http://ri.ufmt.br/handle/1/5697
Resumo: The monitoring and study of weather data can help public and private institutions to draw up plans for maximizing your production or even preserve life and public property in areas such as civil security, agricultural, energy. Brazil, especially the state of Mato Grosso, in this context, has greater responsibility by having in its territory three different biomes: Amazonia, Cerrado and Pantanal. A major problem for the development of research in climatology area is the availability and access to data, and also the reliability of the data, since tampering of the data remains for further research. Data Base Management Systems allow access to historical data from different sources for different users, integrating the data and providing security. The objective of this study is to identify efficient ways of storing and time series data recovery obtained from meteorological towers. The methodology used was based on the preparation of the computacional test environment and execution of tests on two different database: PostgreSQL and Cassandra using the Benchmarck YCSB with different workloads configurations commonly required for management of weather data. The results showed that the DB Cassandra has greater efficiency in the processing operations of insertion and selection of data with equivalent structure to the time series obtained from meteorological towers, when compared to the PostgreSQL relational database, with lower latency and increased data flow for all volume of operations tested . However, when dealing with operations of reading the DB PostgreSQL proved to be more efficient both for the latency and the data stream.
id UFMT_779d06283ec26a9fa316442487394aa3
oai_identifier_str oai:localhost:1/5697
network_acronym_str UFMT
network_name_str Repositório Institucional da UFMT
repository_id_str
spelling Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticosDados micrometeorológicosNoSQLBenchmarkCNPQ::CIENCIAS EXATAS E DA TERRA::FISICAMeteorological dataNoSQLBenchmarkThe monitoring and study of weather data can help public and private institutions to draw up plans for maximizing your production or even preserve life and public property in areas such as civil security, agricultural, energy. Brazil, especially the state of Mato Grosso, in this context, has greater responsibility by having in its territory three different biomes: Amazonia, Cerrado and Pantanal. A major problem for the development of research in climatology area is the availability and access to data, and also the reliability of the data, since tampering of the data remains for further research. Data Base Management Systems allow access to historical data from different sources for different users, integrating the data and providing security. The objective of this study is to identify efficient ways of storing and time series data recovery obtained from meteorological towers. The methodology used was based on the preparation of the computacional test environment and execution of tests on two different database: PostgreSQL and Cassandra using the Benchmarck YCSB with different workloads configurations commonly required for management of weather data. The results showed that the DB Cassandra has greater efficiency in the processing operations of insertion and selection of data with equivalent structure to the time series obtained from meteorological towers, when compared to the PostgreSQL relational database, with lower latency and increased data flow for all volume of operations tested . However, when dealing with operations of reading the DB PostgreSQL proved to be more efficient both for the latency and the data stream.CAPESO monitoramento e estudo de dados meteorológicos podem auxiliar instituições públicas e privadas a traçar planos para maximização de sua produção ou mesmo preservar a vida e o patrimônio público em diversas áreas como a segurança civil, agrícola, energética. O Brasil, e em especial o estado de Mato Grosso, dentro deste contexto, possui maior responsabilidade por possuir em seu território três diferentes biomas: Amazônia, Cerrado e Pantanal. Um grande problema para o desenvolvimento de pesquisas na área de climatologia está na disponibilização e acesso aos dados, e ainda na confiabilidade dos dados, uma vez que alterações indevidas dos dados permanecem para pesquisas posteriores. Sistemas Gerencia- dores de Banco de Dados permitem o acesso a dados históricos, provenientes de diferentes fontes, por diferentes usuários, integrando os dados e fornecendo segu- rança. O objetivo deste trabalho é identificar formas eficientes de armazenamento e recuperação de dados de séries temporais obtidos a partir de torres meteoro- lógicas. A metodologia utilizada se fundamentou na preparação do ambiente computacional de teste e execução dos testes em dois diferentes banco de dados: PostgreSQL e Cassandra, utilizando-se do Benchmarck YCSB, com configura- ção de diferentes cargas de trabalhos comumente requeridas para gerenciamento de dados meteorológicos. Os resultados mostraram que o BD Cassandra possui maior eficiência no processamento das operações de Inserção e Seleção dos dados com estrutura equivalente às séries temporais obtidos a partir de torres meteoro- lógicas, quando comparado ao banco de dados relacional PostgreSQL, com menor latência e maior fluxo de dados para todos os volumes de operações testados. No entanto, quando tratamos das operações de leitura, o BD PostgreSQL revelou-se mais eficiente, tanto quanto a latência quanto ao fluxo de dados.Universidade Federal de Mato GrossoBrasilInstituto de Física (IF)UFMT CUC - CuiabáPrograma de Pós-Graduação em Física AmbientalFigueiredo, Josiel Maimone dehttp://lattes.cnpq.br/1242386923227672Figueiredo, Josiel Maimone de568.019.391-49http://lattes.cnpq.br/1242386923227672Ventura, Thiago Meirelles004.845.441-95http://lattes.cnpq.br/5645243204926918568.019.391-49Pereira, Osvaldo Alves688.606.091-00http://lattes.cnpq.br/4202607809882017Kuhnen, Igor Antonio2024-08-12T17:41:52Z2016-08-292024-08-12T17:41:52Z2016-02-23info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisKUHNEN, Igor Antonio. Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos. 2016. 58 f. Dissertação (Mestrado em Física Ambiental) - Universidade Federal de Mato Grosso, Instituto de Física, Cuiabá, 2016.http://ri.ufmt.br/handle/1/5697porinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UFMTinstname:Universidade Federal de Mato Grosso (UFMT)instacron:UFMT2024-08-13T07:01:45Zoai:localhost:1/5697Repositório InstitucionalPUBhttp://ri.ufmt.br/oai/requestjordanbiblio@gmail.comopendoar:2024-08-13T07:01:45Repositório Institucional da UFMT - Universidade Federal de Mato Grosso (UFMT)false
dc.title.none.fl_str_mv Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos
title Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos
spellingShingle Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos
Kuhnen, Igor Antonio
Dados micrometeorológicos
NoSQL
Benchmark
CNPQ::CIENCIAS EXATAS E DA TERRA::FISICA
Meteorological data
NoSQL
Benchmark
title_short Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos
title_full Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos
title_fullStr Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos
title_full_unstemmed Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos
title_sort Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos
author Kuhnen, Igor Antonio
author_facet Kuhnen, Igor Antonio
author_role author
dc.contributor.none.fl_str_mv Figueiredo, Josiel Maimone de
http://lattes.cnpq.br/1242386923227672
Figueiredo, Josiel Maimone de
568.019.391-49
http://lattes.cnpq.br/1242386923227672
Ventura, Thiago Meirelles
004.845.441-95
http://lattes.cnpq.br/5645243204926918
568.019.391-49
Pereira, Osvaldo Alves
688.606.091-00
http://lattes.cnpq.br/4202607809882017
dc.contributor.author.fl_str_mv Kuhnen, Igor Antonio
dc.subject.por.fl_str_mv Dados micrometeorológicos
NoSQL
Benchmark
CNPQ::CIENCIAS EXATAS E DA TERRA::FISICA
Meteorological data
NoSQL
Benchmark
topic Dados micrometeorológicos
NoSQL
Benchmark
CNPQ::CIENCIAS EXATAS E DA TERRA::FISICA
Meteorological data
NoSQL
Benchmark
description The monitoring and study of weather data can help public and private institutions to draw up plans for maximizing your production or even preserve life and public property in areas such as civil security, agricultural, energy. Brazil, especially the state of Mato Grosso, in this context, has greater responsibility by having in its territory three different biomes: Amazonia, Cerrado and Pantanal. A major problem for the development of research in climatology area is the availability and access to data, and also the reliability of the data, since tampering of the data remains for further research. Data Base Management Systems allow access to historical data from different sources for different users, integrating the data and providing security. The objective of this study is to identify efficient ways of storing and time series data recovery obtained from meteorological towers. The methodology used was based on the preparation of the computacional test environment and execution of tests on two different database: PostgreSQL and Cassandra using the Benchmarck YCSB with different workloads configurations commonly required for management of weather data. The results showed that the DB Cassandra has greater efficiency in the processing operations of insertion and selection of data with equivalent structure to the time series obtained from meteorological towers, when compared to the PostgreSQL relational database, with lower latency and increased data flow for all volume of operations tested . However, when dealing with operations of reading the DB PostgreSQL proved to be more efficient both for the latency and the data stream.
publishDate 2016
dc.date.none.fl_str_mv 2016-08-29
2016-02-23
2024-08-12T17:41:52Z
2024-08-12T17:41:52Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv KUHNEN, Igor Antonio. Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos. 2016. 58 f. Dissertação (Mestrado em Física Ambiental) - Universidade Federal de Mato Grosso, Instituto de Física, Cuiabá, 2016.
http://ri.ufmt.br/handle/1/5697
identifier_str_mv KUHNEN, Igor Antonio. Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos. 2016. 58 f. Dissertação (Mestrado em Física Ambiental) - Universidade Federal de Mato Grosso, Instituto de Física, Cuiabá, 2016.
url http://ri.ufmt.br/handle/1/5697
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Universidade Federal de Mato Grosso
Brasil
Instituto de Física (IF)
UFMT CUC - Cuiabá
Programa de Pós-Graduação em Física Ambiental
publisher.none.fl_str_mv Universidade Federal de Mato Grosso
Brasil
Instituto de Física (IF)
UFMT CUC - Cuiabá
Programa de Pós-Graduação em Física Ambiental
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFMT
instname:Universidade Federal de Mato Grosso (UFMT)
instacron:UFMT
instname_str Universidade Federal de Mato Grosso (UFMT)
instacron_str UFMT
institution UFMT
reponame_str Repositório Institucional da UFMT
collection Repositório Institucional da UFMT
repository.name.fl_str_mv Repositório Institucional da UFMT - Universidade Federal de Mato Grosso (UFMT)
repository.mail.fl_str_mv jordanbiblio@gmail.com
_version_ 1813550372478779392