A model for distributed data aggregation in edge and cloud environments

Detalhes bibliográficos
Autor(a) principal: Carvalho, Otávio Moraes de
Data de Publicação: 2018
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da UFRGS
Texto Completo: http://hdl.handle.net/10183/189364
Resumo: A internet das coisas é responsável pela geração de quantidades de dados cada vez maiores, oriundas de dispositivos que vão de sensores de smartphones até implementações de sensores em larga escala para cidades inteligentes. Os recursos de hardware dos dispositivos de edge computing e fog computing apresentam poder de processamento que no passado só era encontrado em recursos de computação em nuvem. O aumento da capacidade de processamento habilita a possibilidade de agregar dados na borda da rede, evitando tráfego de rede que anteriormente era necessário para transmitir os dados para a nuvem. Por outro lado, a capacidade de alavancar nodos de borda cada vez mais poderosos, para descentralizar o processamento e agregação de dados, ainda é um desafio significante tanto para a indústria quanto para a academia. Ainda que nodos de borda poderosos e grandes instalações de sensores estejam disponíveis hoje em dia, as frameworks e padrões de processamento necessários para esses perfis de dados ainda são material de ativa pesquisa. Nesse trabalho, é analisado o impacto de um modelo para agregação de dados em um conjunto de dados para redes de energia inteligentes de larga escala. Os resultados obtidos mostram que, para a aplicação de testes desenvolvida, através da utilização de agragação na borda da rede e janelas de mensagens, foi possível atingir taxas de agregação acima de 400 milhões de medidas por segundo. Estes resultados foram obtidos utilizando máquinas em 15 regiões geográficas distintas na plataforma Microsoft Azure, totalizando 1366 máquinas no maior cenário de avaliação.
id URGS_a52091062cd8918ebde71dd2907310c4
oai_identifier_str oai:www.lume.ufrgs.br:10183/189364
network_acronym_str URGS
network_name_str Biblioteca Digital de Teses e Dissertações da UFRGS
repository_id_str 1853
spelling Carvalho, Otávio Moraes deNavaux, Philippe Olivier Alexandre2019-03-15T02:29:08Z2018http://hdl.handle.net/10183/189364001088223A internet das coisas é responsável pela geração de quantidades de dados cada vez maiores, oriundas de dispositivos que vão de sensores de smartphones até implementações de sensores em larga escala para cidades inteligentes. Os recursos de hardware dos dispositivos de edge computing e fog computing apresentam poder de processamento que no passado só era encontrado em recursos de computação em nuvem. O aumento da capacidade de processamento habilita a possibilidade de agregar dados na borda da rede, evitando tráfego de rede que anteriormente era necessário para transmitir os dados para a nuvem. Por outro lado, a capacidade de alavancar nodos de borda cada vez mais poderosos, para descentralizar o processamento e agregação de dados, ainda é um desafio significante tanto para a indústria quanto para a academia. Ainda que nodos de borda poderosos e grandes instalações de sensores estejam disponíveis hoje em dia, as frameworks e padrões de processamento necessários para esses perfis de dados ainda são material de ativa pesquisa. Nesse trabalho, é analisado o impacto de um modelo para agregação de dados em um conjunto de dados para redes de energia inteligentes de larga escala. Os resultados obtidos mostram que, para a aplicação de testes desenvolvida, através da utilização de agragação na borda da rede e janelas de mensagens, foi possível atingir taxas de agregação acima de 400 milhões de medidas por segundo. Estes resultados foram obtidos utilizando máquinas em 15 regiões geográficas distintas na plataforma Microsoft Azure, totalizando 1366 máquinas no maior cenário de avaliação.The Internet of Things generates each time larger amounts of data through devices that range from personal smartphones sensors to large scale smart cities sensor deployments. Edge Computing and Fog Computing hardware resources nowadays have processing power that in the past was only found on Cloud Computing resources. These capabilities enable the possibility of aggregating data directly on the edge of the network, avoiding network traffic that was previously necessary to transfer data to the cloud. However, the ability to leverage each time more powerful edge nodes to decentralize data processing and aggregation is still a significant challenge for both industry and academia. Although large scale sensor deployments and powerful edge nodes are now available, the proper frameworks and processing patterns for these profiles of data are still under active research. In this work, it is analyzed the impact of a model for data aggregation in a large scale smart grid application dataset. The results obtained show that the implemented testbed application, through the usage of edge node aggregation and messaging windows, was able to achieve data aggregation rates of above 400 million measurements per second. These results were obtained using machines on 15 distinct geographic regions on the Microsoft Azure platform, for a total of 1366 machines in the largest evaluation scenario.application/pdfporComputação em nuvemInternet das coisasComputação distribuidaEdge ComputingDistributed ComputingInternet of ThingsCloud ComputingFog ComputingA model for distributed data aggregation in edge and cloud environmentsUm modelo para agregação de dados distribuida em ambientes de edge e cloud info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisUniversidade Federal do Rio Grande do SulInstituto de InformáticaPrograma de Pós-Graduação em ComputaçãoPorto Alegre, BR-RS2019mestradoinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UFRGSinstname:Universidade Federal do Rio Grande do Sul (UFRGS)instacron:UFRGSTEXT001088223.pdf.txt001088223.pdf.txtExtracted Texttext/plain143412http://www.lume.ufrgs.br/bitstream/10183/189364/2/001088223.pdf.txtb3774f0433adea434915a58a427128e4MD52ORIGINAL001088223.pdfTexto completoapplication/pdf2068973http://www.lume.ufrgs.br/bitstream/10183/189364/1/001088223.pdf58616ee88cb2d527ca9f3e13f603c2f1MD5110183/1893642019-03-16 02:30:35.874158oai:www.lume.ufrgs.br:10183/189364Biblioteca Digital de Teses e Dissertaçõeshttps://lume.ufrgs.br/handle/10183/2PUBhttps://lume.ufrgs.br/oai/requestlume@ufrgs.br||lume@ufrgs.bropendoar:18532019-03-16T05:30:35Biblioteca Digital de Teses e Dissertações da UFRGS - Universidade Federal do Rio Grande do Sul (UFRGS)false
dc.title.pt_BR.fl_str_mv A model for distributed data aggregation in edge and cloud environments
dc.title.alternative.pt.fl_str_mv Um modelo para agregação de dados distribuida em ambientes de edge e cloud
title A model for distributed data aggregation in edge and cloud environments
spellingShingle A model for distributed data aggregation in edge and cloud environments
Carvalho, Otávio Moraes de
Computação em nuvem
Internet das coisas
Computação distribuida
Edge Computing
Distributed Computing
Internet of Things
Cloud Computing
Fog Computing
title_short A model for distributed data aggregation in edge and cloud environments
title_full A model for distributed data aggregation in edge and cloud environments
title_fullStr A model for distributed data aggregation in edge and cloud environments
title_full_unstemmed A model for distributed data aggregation in edge and cloud environments
title_sort A model for distributed data aggregation in edge and cloud environments
author Carvalho, Otávio Moraes de
author_facet Carvalho, Otávio Moraes de
author_role author
dc.contributor.author.fl_str_mv Carvalho, Otávio Moraes de
dc.contributor.advisor1.fl_str_mv Navaux, Philippe Olivier Alexandre
contributor_str_mv Navaux, Philippe Olivier Alexandre
dc.subject.por.fl_str_mv Computação em nuvem
Internet das coisas
Computação distribuida
topic Computação em nuvem
Internet das coisas
Computação distribuida
Edge Computing
Distributed Computing
Internet of Things
Cloud Computing
Fog Computing
dc.subject.eng.fl_str_mv Edge Computing
Distributed Computing
Internet of Things
Cloud Computing
Fog Computing
description A internet das coisas é responsável pela geração de quantidades de dados cada vez maiores, oriundas de dispositivos que vão de sensores de smartphones até implementações de sensores em larga escala para cidades inteligentes. Os recursos de hardware dos dispositivos de edge computing e fog computing apresentam poder de processamento que no passado só era encontrado em recursos de computação em nuvem. O aumento da capacidade de processamento habilita a possibilidade de agregar dados na borda da rede, evitando tráfego de rede que anteriormente era necessário para transmitir os dados para a nuvem. Por outro lado, a capacidade de alavancar nodos de borda cada vez mais poderosos, para descentralizar o processamento e agregação de dados, ainda é um desafio significante tanto para a indústria quanto para a academia. Ainda que nodos de borda poderosos e grandes instalações de sensores estejam disponíveis hoje em dia, as frameworks e padrões de processamento necessários para esses perfis de dados ainda são material de ativa pesquisa. Nesse trabalho, é analisado o impacto de um modelo para agregação de dados em um conjunto de dados para redes de energia inteligentes de larga escala. Os resultados obtidos mostram que, para a aplicação de testes desenvolvida, através da utilização de agragação na borda da rede e janelas de mensagens, foi possível atingir taxas de agregação acima de 400 milhões de medidas por segundo. Estes resultados foram obtidos utilizando máquinas em 15 regiões geográficas distintas na plataforma Microsoft Azure, totalizando 1366 máquinas no maior cenário de avaliação.
publishDate 2018
dc.date.issued.fl_str_mv 2018
dc.date.accessioned.fl_str_mv 2019-03-15T02:29:08Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10183/189364
dc.identifier.nrb.pt_BR.fl_str_mv 001088223
url http://hdl.handle.net/10183/189364
identifier_str_mv 001088223
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da UFRGS
instname:Universidade Federal do Rio Grande do Sul (UFRGS)
instacron:UFRGS
instname_str Universidade Federal do Rio Grande do Sul (UFRGS)
instacron_str UFRGS
institution UFRGS
reponame_str Biblioteca Digital de Teses e Dissertações da UFRGS
collection Biblioteca Digital de Teses e Dissertações da UFRGS
bitstream.url.fl_str_mv http://www.lume.ufrgs.br/bitstream/10183/189364/2/001088223.pdf.txt
http://www.lume.ufrgs.br/bitstream/10183/189364/1/001088223.pdf
bitstream.checksum.fl_str_mv b3774f0433adea434915a58a427128e4
58616ee88cb2d527ca9f3e13f603c2f1
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da UFRGS - Universidade Federal do Rio Grande do Sul (UFRGS)
repository.mail.fl_str_mv lume@ufrgs.br||lume@ufrgs.br
_version_ 1800309140089733120