Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos
Autor(a) principal: | |
---|---|
Data de Publicação: | 2016 |
Tipo de documento: | Dissertação |
Idioma: | por |
Título da fonte: | Repositório Institucional da UFMT |
Texto Completo: | http://ri.ufmt.br/handle/1/5697 |
Resumo: | The monitoring and study of weather data can help public and private institutions to draw up plans for maximizing your production or even preserve life and public property in areas such as civil security, agricultural, energy. Brazil, especially the state of Mato Grosso, in this context, has greater responsibility by having in its territory three different biomes: Amazonia, Cerrado and Pantanal. A major problem for the development of research in climatology area is the availability and access to data, and also the reliability of the data, since tampering of the data remains for further research. Data Base Management Systems allow access to historical data from different sources for different users, integrating the data and providing security. The objective of this study is to identify efficient ways of storing and time series data recovery obtained from meteorological towers. The methodology used was based on the preparation of the computacional test environment and execution of tests on two different database: PostgreSQL and Cassandra using the Benchmarck YCSB with different workloads configurations commonly required for management of weather data. The results showed that the DB Cassandra has greater efficiency in the processing operations of insertion and selection of data with equivalent structure to the time series obtained from meteorological towers, when compared to the PostgreSQL relational database, with lower latency and increased data flow for all volume of operations tested . However, when dealing with operations of reading the DB PostgreSQL proved to be more efficient both for the latency and the data stream. |
id |
UFMT_779d06283ec26a9fa316442487394aa3 |
---|---|
oai_identifier_str |
oai:localhost:1/5697 |
network_acronym_str |
UFMT |
network_name_str |
Repositório Institucional da UFMT |
repository_id_str |
|
spelling |
Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticosDados micrometeorológicosNoSQLBenchmarkCNPQ::CIENCIAS EXATAS E DA TERRA::FISICAMeteorological dataNoSQLBenchmarkThe monitoring and study of weather data can help public and private institutions to draw up plans for maximizing your production or even preserve life and public property in areas such as civil security, agricultural, energy. Brazil, especially the state of Mato Grosso, in this context, has greater responsibility by having in its territory three different biomes: Amazonia, Cerrado and Pantanal. A major problem for the development of research in climatology area is the availability and access to data, and also the reliability of the data, since tampering of the data remains for further research. Data Base Management Systems allow access to historical data from different sources for different users, integrating the data and providing security. The objective of this study is to identify efficient ways of storing and time series data recovery obtained from meteorological towers. The methodology used was based on the preparation of the computacional test environment and execution of tests on two different database: PostgreSQL and Cassandra using the Benchmarck YCSB with different workloads configurations commonly required for management of weather data. The results showed that the DB Cassandra has greater efficiency in the processing operations of insertion and selection of data with equivalent structure to the time series obtained from meteorological towers, when compared to the PostgreSQL relational database, with lower latency and increased data flow for all volume of operations tested . However, when dealing with operations of reading the DB PostgreSQL proved to be more efficient both for the latency and the data stream.CAPESO monitoramento e estudo de dados meteorológicos podem auxiliar instituições públicas e privadas a traçar planos para maximização de sua produção ou mesmo preservar a vida e o patrimônio público em diversas áreas como a segurança civil, agrícola, energética. O Brasil, e em especial o estado de Mato Grosso, dentro deste contexto, possui maior responsabilidade por possuir em seu território três diferentes biomas: Amazônia, Cerrado e Pantanal. Um grande problema para o desenvolvimento de pesquisas na área de climatologia está na disponibilização e acesso aos dados, e ainda na confiabilidade dos dados, uma vez que alterações indevidas dos dados permanecem para pesquisas posteriores. Sistemas Gerencia- dores de Banco de Dados permitem o acesso a dados históricos, provenientes de diferentes fontes, por diferentes usuários, integrando os dados e fornecendo segu- rança. O objetivo deste trabalho é identificar formas eficientes de armazenamento e recuperação de dados de séries temporais obtidos a partir de torres meteoro- lógicas. A metodologia utilizada se fundamentou na preparação do ambiente computacional de teste e execução dos testes em dois diferentes banco de dados: PostgreSQL e Cassandra, utilizando-se do Benchmarck YCSB, com configura- ção de diferentes cargas de trabalhos comumente requeridas para gerenciamento de dados meteorológicos. Os resultados mostraram que o BD Cassandra possui maior eficiência no processamento das operações de Inserção e Seleção dos dados com estrutura equivalente às séries temporais obtidos a partir de torres meteoro- lógicas, quando comparado ao banco de dados relacional PostgreSQL, com menor latência e maior fluxo de dados para todos os volumes de operações testados. No entanto, quando tratamos das operações de leitura, o BD PostgreSQL revelou-se mais eficiente, tanto quanto a latência quanto ao fluxo de dados.Universidade Federal de Mato GrossoBrasilInstituto de Física (IF)UFMT CUC - CuiabáPrograma de Pós-Graduação em Física AmbientalFigueiredo, Josiel Maimone dehttp://lattes.cnpq.br/1242386923227672Figueiredo, Josiel Maimone de568.019.391-49http://lattes.cnpq.br/1242386923227672Ventura, Thiago Meirelles004.845.441-95http://lattes.cnpq.br/5645243204926918568.019.391-49Pereira, Osvaldo Alves688.606.091-00http://lattes.cnpq.br/4202607809882017Kuhnen, Igor Antonio2024-08-12T17:41:52Z2016-08-292024-08-12T17:41:52Z2016-02-23info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisKUHNEN, Igor Antonio. Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos. 2016. 58 f. Dissertação (Mestrado em Física Ambiental) - Universidade Federal de Mato Grosso, Instituto de Física, Cuiabá, 2016.http://ri.ufmt.br/handle/1/5697porinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UFMTinstname:Universidade Federal de Mato Grosso (UFMT)instacron:UFMT2024-08-13T07:01:45Zoai:localhost:1/5697Repositório InstitucionalPUBhttp://ri.ufmt.br/oai/requestjordanbiblio@gmail.comopendoar:2024-08-13T07:01:45Repositório Institucional da UFMT - Universidade Federal de Mato Grosso (UFMT)false |
dc.title.none.fl_str_mv |
Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos |
title |
Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos |
spellingShingle |
Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos Kuhnen, Igor Antonio Dados micrometeorológicos NoSQL Benchmark CNPQ::CIENCIAS EXATAS E DA TERRA::FISICA Meteorological data NoSQL Benchmark |
title_short |
Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos |
title_full |
Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos |
title_fullStr |
Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos |
title_full_unstemmed |
Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos |
title_sort |
Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos |
author |
Kuhnen, Igor Antonio |
author_facet |
Kuhnen, Igor Antonio |
author_role |
author |
dc.contributor.none.fl_str_mv |
Figueiredo, Josiel Maimone de http://lattes.cnpq.br/1242386923227672 Figueiredo, Josiel Maimone de 568.019.391-49 http://lattes.cnpq.br/1242386923227672 Ventura, Thiago Meirelles 004.845.441-95 http://lattes.cnpq.br/5645243204926918 568.019.391-49 Pereira, Osvaldo Alves 688.606.091-00 http://lattes.cnpq.br/4202607809882017 |
dc.contributor.author.fl_str_mv |
Kuhnen, Igor Antonio |
dc.subject.por.fl_str_mv |
Dados micrometeorológicos NoSQL Benchmark CNPQ::CIENCIAS EXATAS E DA TERRA::FISICA Meteorological data NoSQL Benchmark |
topic |
Dados micrometeorológicos NoSQL Benchmark CNPQ::CIENCIAS EXATAS E DA TERRA::FISICA Meteorological data NoSQL Benchmark |
description |
The monitoring and study of weather data can help public and private institutions to draw up plans for maximizing your production or even preserve life and public property in areas such as civil security, agricultural, energy. Brazil, especially the state of Mato Grosso, in this context, has greater responsibility by having in its territory three different biomes: Amazonia, Cerrado and Pantanal. A major problem for the development of research in climatology area is the availability and access to data, and also the reliability of the data, since tampering of the data remains for further research. Data Base Management Systems allow access to historical data from different sources for different users, integrating the data and providing security. The objective of this study is to identify efficient ways of storing and time series data recovery obtained from meteorological towers. The methodology used was based on the preparation of the computacional test environment and execution of tests on two different database: PostgreSQL and Cassandra using the Benchmarck YCSB with different workloads configurations commonly required for management of weather data. The results showed that the DB Cassandra has greater efficiency in the processing operations of insertion and selection of data with equivalent structure to the time series obtained from meteorological towers, when compared to the PostgreSQL relational database, with lower latency and increased data flow for all volume of operations tested . However, when dealing with operations of reading the DB PostgreSQL proved to be more efficient both for the latency and the data stream. |
publishDate |
2016 |
dc.date.none.fl_str_mv |
2016-08-29 2016-02-23 2024-08-12T17:41:52Z 2024-08-12T17:41:52Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
format |
masterThesis |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
KUHNEN, Igor Antonio. Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos. 2016. 58 f. Dissertação (Mestrado em Física Ambiental) - Universidade Federal de Mato Grosso, Instituto de Física, Cuiabá, 2016. http://ri.ufmt.br/handle/1/5697 |
identifier_str_mv |
KUHNEN, Igor Antonio. Análise de sistemas de gerenciamento de banco de dados para armazenamento de dados climáticos. 2016. 58 f. Dissertação (Mestrado em Física Ambiental) - Universidade Federal de Mato Grosso, Instituto de Física, Cuiabá, 2016. |
url |
http://ri.ufmt.br/handle/1/5697 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.publisher.none.fl_str_mv |
Universidade Federal de Mato Grosso Brasil Instituto de Física (IF) UFMT CUC - Cuiabá Programa de Pós-Graduação em Física Ambiental |
publisher.none.fl_str_mv |
Universidade Federal de Mato Grosso Brasil Instituto de Física (IF) UFMT CUC - Cuiabá Programa de Pós-Graduação em Física Ambiental |
dc.source.none.fl_str_mv |
reponame:Repositório Institucional da UFMT instname:Universidade Federal de Mato Grosso (UFMT) instacron:UFMT |
instname_str |
Universidade Federal de Mato Grosso (UFMT) |
instacron_str |
UFMT |
institution |
UFMT |
reponame_str |
Repositório Institucional da UFMT |
collection |
Repositório Institucional da UFMT |
repository.name.fl_str_mv |
Repositório Institucional da UFMT - Universidade Federal de Mato Grosso (UFMT) |
repository.mail.fl_str_mv |
jordanbiblio@gmail.com |
_version_ |
1813550372478779392 |