Um estudo sobre a performance de aplicações big data em ambientes de névoa e de borda

Detalhes bibliográficos
Autor(a) principal: Silva Junior, Jorge Ximendes
Data de Publicação: 2019
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Biblioteca Digital de Teses e Dissertações da UFRGS
Texto Completo: http://hdl.handle.net/10183/193992
Resumo: O uso de processadores ARM para o processamento Big Data já é objeto de estudo de vários autores. Entretanto, a grande maioria desses autores leva em conta o processamento em lotes (batch) utilizando o framework Hadoop. Além disso, poucos trabalhos comparam o desempenho entre diferentes processadores ARM. Não há uma comparação de como diferentes arquiteturas influenciam na execução de aplicações Big Data. Desse modo, percebe-se a necessidade de um estudo que avalie o desempenho dos frameworks (e aplicações Big Data) sob ambos os modelos de processamento (em lotes e em tempo real). Além disso, torna-se importante avaliar o impacto de diferentes arquiteturas ARM sobre os frameworks e aplicações Big Data. Assim, esse trabalho apresenta uma avaliação experimental de processadores ARM para processamento Big Data. Os dois principais modelos de processamento Big Data foram avaliados neste trabalho (processamento em lotes e processamento em tempo real). Assim, como os frameworks Hadoop, Spark e Flink. Como representantes ARM foram avaliados a arquitetura ARMv7 com processador Cortex-A7 e a arquitetura ARMv8 com os processadores Cortex-A57 e Denver2. O benchmark utilizado neste trabalho foi o Hibench que apresenta aplicações que utilizam ambos os modelos de processamento e que suportam os frameworks citados. Os resultados mostraram que é possível utilizar processadores ARM no processamento Big Data e que a escolha da arquitetura e do processador a serem utilizados passa pelas necessidades da aplicação a ser processada, assim, como pelas características do ambiente de execução a ser construído.
id URGS_ceb080a2f21451b8623503bc87bb2008
oai_identifier_str oai:www.lume.ufrgs.br:10183/193992
network_acronym_str URGS
network_name_str Biblioteca Digital de Teses e Dissertações da UFRGS
repository_id_str 1853
spelling Silva Junior, Jorge XimendesGeyer, Claudio Fernando Resin2019-05-08T02:34:55Z2019http://hdl.handle.net/10183/193992001092825O uso de processadores ARM para o processamento Big Data já é objeto de estudo de vários autores. Entretanto, a grande maioria desses autores leva em conta o processamento em lotes (batch) utilizando o framework Hadoop. Além disso, poucos trabalhos comparam o desempenho entre diferentes processadores ARM. Não há uma comparação de como diferentes arquiteturas influenciam na execução de aplicações Big Data. Desse modo, percebe-se a necessidade de um estudo que avalie o desempenho dos frameworks (e aplicações Big Data) sob ambos os modelos de processamento (em lotes e em tempo real). Além disso, torna-se importante avaliar o impacto de diferentes arquiteturas ARM sobre os frameworks e aplicações Big Data. Assim, esse trabalho apresenta uma avaliação experimental de processadores ARM para processamento Big Data. Os dois principais modelos de processamento Big Data foram avaliados neste trabalho (processamento em lotes e processamento em tempo real). Assim, como os frameworks Hadoop, Spark e Flink. Como representantes ARM foram avaliados a arquitetura ARMv7 com processador Cortex-A7 e a arquitetura ARMv8 com os processadores Cortex-A57 e Denver2. O benchmark utilizado neste trabalho foi o Hibench que apresenta aplicações que utilizam ambos os modelos de processamento e que suportam os frameworks citados. Os resultados mostraram que é possível utilizar processadores ARM no processamento Big Data e que a escolha da arquitetura e do processador a serem utilizados passa pelas necessidades da aplicação a ser processada, assim, como pelas características do ambiente de execução a ser construído.The two main Big Data processing models were evaluated in this work (batch processing and real time processing), just as the Hadoop, Spark and Flink frameworks. Representing ARM, we evaluated the ARMv7 architecture with Cortex-A7 processor and the ARMv8 architecture with Cortex-A57 and Denver2 processors. The benchmark that was used in this work was HiBench, that contains applications that use both processing models, and that support the previously mentioned frameworks. The results showed that it is possible to use ARM processors in the Big Data processing, and also that both the choice of architecture and the processor that will be used are dependent on the application that will be processed, as well as it is dependent on the features of the execution environment to be built.application/pdfporBig dataARM processorsEnergy EfficiencyUm estudo sobre a performance de aplicações big data em ambientes de névoa e de bordainfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisUniversidade Federal do Rio Grande do SulInstituto de InformáticaPrograma de Pós-Graduação em ComputaçãoPorto Alegre, BR-RS2019mestradoinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UFRGSinstname:Universidade Federal do Rio Grande do Sul (UFRGS)instacron:UFRGSTEXT001092825.pdf.txt001092825.pdf.txtExtracted Texttext/plain272598http://www.lume.ufrgs.br/bitstream/10183/193992/2/001092825.pdf.txt1817265bb25402de20b38283cba68218MD52ORIGINAL001092825.pdfTexto completoapplication/pdf13886479http://www.lume.ufrgs.br/bitstream/10183/193992/1/001092825.pdfc3c4bf1607ab409f5a70c4e02a62b742MD5110183/1939922019-05-09 02:37:41.608546oai:www.lume.ufrgs.br:10183/193992Biblioteca Digital de Teses e Dissertaçõeshttps://lume.ufrgs.br/handle/10183/2PUBhttps://lume.ufrgs.br/oai/requestlume@ufrgs.br||lume@ufrgs.bropendoar:18532019-05-09T05:37:41Biblioteca Digital de Teses e Dissertações da UFRGS - Universidade Federal do Rio Grande do Sul (UFRGS)false
dc.title.pt_BR.fl_str_mv Um estudo sobre a performance de aplicações big data em ambientes de névoa e de borda
title Um estudo sobre a performance de aplicações big data em ambientes de névoa e de borda
spellingShingle Um estudo sobre a performance de aplicações big data em ambientes de névoa e de borda
Silva Junior, Jorge Ximendes
Big data
ARM processors
Energy Efficiency
title_short Um estudo sobre a performance de aplicações big data em ambientes de névoa e de borda
title_full Um estudo sobre a performance de aplicações big data em ambientes de névoa e de borda
title_fullStr Um estudo sobre a performance de aplicações big data em ambientes de névoa e de borda
title_full_unstemmed Um estudo sobre a performance de aplicações big data em ambientes de névoa e de borda
title_sort Um estudo sobre a performance de aplicações big data em ambientes de névoa e de borda
author Silva Junior, Jorge Ximendes
author_facet Silva Junior, Jorge Ximendes
author_role author
dc.contributor.author.fl_str_mv Silva Junior, Jorge Ximendes
dc.contributor.advisor1.fl_str_mv Geyer, Claudio Fernando Resin
contributor_str_mv Geyer, Claudio Fernando Resin
dc.subject.por.fl_str_mv Big data
topic Big data
ARM processors
Energy Efficiency
dc.subject.eng.fl_str_mv ARM processors
Energy Efficiency
description O uso de processadores ARM para o processamento Big Data já é objeto de estudo de vários autores. Entretanto, a grande maioria desses autores leva em conta o processamento em lotes (batch) utilizando o framework Hadoop. Além disso, poucos trabalhos comparam o desempenho entre diferentes processadores ARM. Não há uma comparação de como diferentes arquiteturas influenciam na execução de aplicações Big Data. Desse modo, percebe-se a necessidade de um estudo que avalie o desempenho dos frameworks (e aplicações Big Data) sob ambos os modelos de processamento (em lotes e em tempo real). Além disso, torna-se importante avaliar o impacto de diferentes arquiteturas ARM sobre os frameworks e aplicações Big Data. Assim, esse trabalho apresenta uma avaliação experimental de processadores ARM para processamento Big Data. Os dois principais modelos de processamento Big Data foram avaliados neste trabalho (processamento em lotes e processamento em tempo real). Assim, como os frameworks Hadoop, Spark e Flink. Como representantes ARM foram avaliados a arquitetura ARMv7 com processador Cortex-A7 e a arquitetura ARMv8 com os processadores Cortex-A57 e Denver2. O benchmark utilizado neste trabalho foi o Hibench que apresenta aplicações que utilizam ambos os modelos de processamento e que suportam os frameworks citados. Os resultados mostraram que é possível utilizar processadores ARM no processamento Big Data e que a escolha da arquitetura e do processador a serem utilizados passa pelas necessidades da aplicação a ser processada, assim, como pelas características do ambiente de execução a ser construído.
publishDate 2019
dc.date.accessioned.fl_str_mv 2019-05-08T02:34:55Z
dc.date.issued.fl_str_mv 2019
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10183/193992
dc.identifier.nrb.pt_BR.fl_str_mv 001092825
url http://hdl.handle.net/10183/193992
identifier_str_mv 001092825
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da UFRGS
instname:Universidade Federal do Rio Grande do Sul (UFRGS)
instacron:UFRGS
instname_str Universidade Federal do Rio Grande do Sul (UFRGS)
instacron_str UFRGS
institution UFRGS
reponame_str Biblioteca Digital de Teses e Dissertações da UFRGS
collection Biblioteca Digital de Teses e Dissertações da UFRGS
bitstream.url.fl_str_mv http://www.lume.ufrgs.br/bitstream/10183/193992/2/001092825.pdf.txt
http://www.lume.ufrgs.br/bitstream/10183/193992/1/001092825.pdf
bitstream.checksum.fl_str_mv 1817265bb25402de20b38283cba68218
c3c4bf1607ab409f5a70c4e02a62b742
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da UFRGS - Universidade Federal do Rio Grande do Sul (UFRGS)
repository.mail.fl_str_mv lume@ufrgs.br||lume@ufrgs.br
_version_ 1810085478234324992