Desenvolvimento de software no contexto Big Data
Autor(a) principal: | |
---|---|
Data de Publicação: | 2015 |
Tipo de documento: | Trabalho de conclusão de curso |
Idioma: | por |
Título da fonte: | Biblioteca Digital de Monografias da UnB |
Texto Completo: | http://bdm.unb.br/handle/10483/11335 |
Resumo: | Monografia (graduação)—Universidade de Brasília, Faculdade UnB Gama, Curso de Engenharia de Software, 2015. |
id |
UNB-2_13074de92bfad1e87862f0c58264c1fb |
---|---|
oai_identifier_str |
oai:bdm.unb.br:10483/11335 |
network_acronym_str |
UNB-2 |
network_name_str |
Biblioteca Digital de Monografias da UnB |
repository_id_str |
11571 |
spelling |
Bernardes, Guilherme de LimaCruz, Fernando WilliamBERNARDES, Guilherme de Lima. Desenvolvimento de software no contexto Big Data. 95 f., il. Monografia (Bacharelado em Engenharia de Software)—Universidade de Brasília, Brasília, 2015.http://bdm.unb.br/handle/10483/11335Monografia (graduação)—Universidade de Brasília, Faculdade UnB Gama, Curso de Engenharia de Software, 2015.O armazenamento de informações em formato digital tem crescido consideravelmente nos últimos anos. Não apenas pessoas são responsáveis por produzir dados, equipamentos eletrônicos também se tornaram grandes geradores de registros, como servidores, aparelhos de GPS, microcomputadores espalhados nos mais variados contextos, entre uma infinidade de aplicações. O termo Big Data se refere a toda esta quantidade de dados que se encontra na ordem de petabytes e não pode ser analisada pelos métodos tradicionais. Neste trabalho, apresenta-se um estudo sobre uma das mais conhecidas arquiteturas para solucionar esses problemas, o software Hadoop. O desenvolvimento para o paradigma MapReduce é abordado, assim como os projetos que são construídos no topo do sistema Hadoop, provendo serviços em um nível de abstração maior. Além da etapa de pesquisa, uma arquitetura de aplicação Big Data voltada para um estudo de caso real é definida e implementada, a qual envolve a extração e análise de publicações de redes sociais com foco na política brasileira.Submitted by Ruthlea Nascimento (ruthlea.nascimento@gmail.com) on 2015-10-26T17:14:01Z No. of bitstreams: 1 2015_GuilhermedeLimaBernardes.pdf: 2004593 bytes, checksum: 892111d551f570ab749b1ab27691bbcc (MD5)Approved for entry into archive by Ruthlea Nascimento(ruthlea.nascimento@gmail.com) on 2015-11-04T16:54:02Z (GMT) No. of bitstreams: 1 2015_GuilhermedeLimaBernardes.pdf: 2004593 bytes, checksum: 892111d551f570ab749b1ab27691bbcc (MD5)Made available in DSpace on 2015-11-04T16:54:02Z (GMT). No. of bitstreams: 1 2015_GuilhermedeLimaBernardes.pdf: 2004593 bytes, checksum: 892111d551f570ab749b1ab27691bbcc (MD5)The storage of information in digital format has grown considerably in recent years. Not only people are responsible for producing data, electronic equipment have also become major generators of records, such as servers, GPS devices, computers scattered in various contexts, among a multitude of applications. The term Big Data refers to all this amount of data that is on the order of petabytes and can not be analyzed by traditional methods. In this paper, we present a study of one of the most known architectures to solve these problems, Hadoop software. The development MapReduce paradigm is discussed, as well as designs that are built on top of Hadoop system providing service at a higher abstraction level. Beyond the research stage, an Big Data application architecture facing a real case study is defined and implemented, which involves the extraction and analysis of social networking publications focusing on Brazilian politics.Big DataHadoopDesenvolvimento de software no contexto Big Datainfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/bachelorThesis2015-11-04T16:54:02Z2015-11-04T16:54:02Z2015-11-04T16:54:02Z2015info:eu-repo/semantics/openAccessporreponame:Biblioteca Digital de Monografias da UnBinstname:Universidade de Brasília (UnB)instacron:UNBORIGINAL2015_GuilhermedeLimaBernardes.pdf2015_GuilhermedeLimaBernardes.pdfapplication/pdf2004593http://bdm.unb.br/xmlui/bitstream/10483/11335/1/2015_GuilhermedeLimaBernardes.pdf892111d551f570ab749b1ab27691bbccMD51CC-LICENSElicense_urllicense_urltext/plain46http://bdm.unb.br/xmlui/bitstream/10483/11335/2/license_url6f1da3ff281999354d4abd56d1551468MD52license_textlicense_textapplication/octet-stream0http://bdm.unb.br/xmlui/bitstream/10483/11335/3/license_textd41d8cd98f00b204e9800998ecf8427eMD53license_rdflicense_rdfapplication/octet-stream21889http://bdm.unb.br/xmlui/bitstream/10483/11335/4/license_rdf5f21d45308ffc58e8d263280cb61c64dMD54LICENSElicense.txtlicense.txttext/plain1859http://bdm.unb.br/xmlui/bitstream/10483/11335/5/license.txt1da460f1e3d0ca18e6e4a5b4f31c0655MD5510483/113352016-08-03 09:13:52.733oai:bdm.unb.br:10483/11335TGljZW5zZSBncmFudGVkIGJ5IFJ1dGhsZWEgTmFzY2ltZW50byAocnV0aGxlYS5uYXNjaW1lbnRvQGdtYWlsLmNvbSkgb24gMjAxNS0xMC0yNlQxNzoxNDowMVogKEdNVCk6CgrDiSBuZWNlc3PDoXJpbyBjb25jb3JkYXIgY29tIGEgbGljZW7Dp2EgZGUgZGlzdHJpYnVpw6fDo28gbsOjby1leGNsdXNpdmEsCmFudGVzIHF1ZSBvIGRvY3VtZW50byBwb3NzYSBhcGFyZWNlciBubyBSZXBvc2l0w7NyaW8uIFBvciBmYXZvciwgbGVpYSBhCmxpY2Vuw6dhIGF0ZW50YW1lbnRlLiBDYXNvIG5lY2Vzc2l0ZSBkZSBhbGd1bSBlc2NsYXJlY2ltZW50byBlbnRyZSBlbQpjb250YXRvIGF0cmF2w6lzIGRlOiBiZG1AYmNlLnVuYi5iciBvdSAzMTA3LTI2ODcuCgpMSUNFTsOHQSBERSBESVNUUklCVUnDh8ODTyBOw4NPLUVYQ0xVU0lWQQoKQW8gYXNzaW5hciBlIGVudHJlZ2FyIGVzdGEgbGljZW7Dp2EsIG8vYSBTci4vU3JhLiAoYXV0b3Igb3UgZGV0ZW50b3IgZG9zCmRpcmVpdG9zIGRlIGF1dG9yKToKCmEpIENvbmNlZGUgw6AgVW5pdmVyc2lkYWRlIGRlIEJyYXPDrWxpYSBvIGRpcmVpdG8gbsOjby1leGNsdXNpdm8gZGUKcmVwcm9kdXppciwgY29udmVydGVyIChjb21vIGRlZmluaWRvIGFiYWl4byksIGNvbXVuaWNhciBlL291CmRpc3RyaWJ1aXIgbyBkb2N1bWVudG8gZW50cmVndWUgKGluY2x1aW5kbyBvIHJlc3Vtby9hYnN0cmFjdCkgZW0KZm9ybWF0byBkaWdpdGFsIG91IGltcHJlc3NvIGUgZW0gcXVhbHF1ZXIgbWVpby4KCmIpIERlY2xhcmEgcXVlIG8gZG9jdW1lbnRvIGVudHJlZ3VlIMOpIHNldSB0cmFiYWxobyBvcmlnaW5hbCwgZSBxdWUKZGV0w6ltIG8gZGlyZWl0byBkZSBjb25jZWRlciBvcyBkaXJlaXRvcyBjb250aWRvcyBuZXN0YSBsaWNlbsOnYS4gRGVjbGFyYQp0YW1iw6ltIHF1ZSBhIGVudHJlZ2EgZG8gZG9jdW1lbnRvIG7Do28gaW5mcmluZ2UsIHRhbnRvIHF1YW50byBsaGUgw6kKcG9zc8OtdmVsIHNhYmVyLCBvcyBkaXJlaXRvcyBkZSBxdWFscXVlciBvdXRyYSBwZXNzb2Egb3UgZW50aWRhZGUuCgpjKSBTZSBvIGRvY3VtZW50byBlbnRyZWd1ZSBjb250w6ltIG1hdGVyaWFsIGRvIHF1YWwgbsOjbyBkZXTDqW0gb3MKZGlyZWl0b3MgZGUgYXV0b3IsIGRlY2xhcmEgcXVlIG9idGV2ZSBhdXRvcml6YcOnw6NvIGRvIGRldGVudG9yIGRvcwpkaXJlaXRvcyBkZSBhdXRvciBwYXJhIGNvbmNlZGVyIMOgIFVuaXZlcnNpZGFkZSBkZSBCcmFzw61saWEgb3MgZGlyZWl0b3MKcmVxdWVyaWRvcyBwb3IgZXN0YSBsaWNlbsOnYSwgZSBxdWUgZXNzZSBtYXRlcmlhbCBjdWpvcyBkaXJlaXRvcyBzw6NvIGRlCnRlcmNlaXJvcyBlc3TDoSBjbGFyYW1lbnRlIGlkZW50aWZpY2FkbyBlIHJlY29uaGVjaWRvIG5vIHRleHRvIG91CmNvbnRlw7pkbyBkbyBkb2N1bWVudG8gZW50cmVndWUuCgpTZSBvIGRvY3VtZW50byBlbnRyZWd1ZSDDqSBiYXNlYWRvIGVtIHRyYWJhbGhvIGZpbmFuY2lhZG8gb3UgYXBvaWFkbwpwb3Igb3V0cmEgaW5zdGl0dWnDp8OjbyBxdWUgbsOjbyBhIFVuaXZlcnNpZGFkZSBkZSBCcmFzw61saWEsIGRlY2xhcmEgcXVlCmN1bXByaXUgcXVhaXNxdWVyIG9icmlnYcOnw7VlcyBleGlnaWRhcyBwZWxvIHJlc3BlY3Rpdm8gY29udHJhdG8gb3UKYWNvcmRvLgoKQSBVbml2ZXJzaWRhZGUgZGUgQnJhc8OtbGlhIGlkZW50aWZpY2Fyw6EgY2xhcmFtZW50ZSBvKHMpIHNldSAocykgbm9tZSAocykKY29tbyBvIChzKSBhdXRvciAoZXMpIG91IGRldGVudG9yIChlcykgZG9zIGRpcmVpdG9zIGRvIGRvY3VtZW50bwplbnRyZWd1ZSwgZSBuw6NvIGZhcsOhIHF1YWxxdWVyIGFsdGVyYcOnw6NvLCBwYXJhIGFsw6ltIGRhcyBwZXJtaXRpZGFzIHBvcgplc3RhIGxpY2Vuw6dhLgo=Biblioteca Digital de Monografiahttps://bdm.unb.br/PUBhttp://bdm.unb.br/oai/requestbdm@bce.unb.br||patricia@bce.unb.bropendoar:115712016-08-03T12:13:52Biblioteca Digital de Monografias da UnB - Universidade de Brasília (UnB)false |
dc.title.en.fl_str_mv |
Desenvolvimento de software no contexto Big Data |
title |
Desenvolvimento de software no contexto Big Data |
spellingShingle |
Desenvolvimento de software no contexto Big Data Bernardes, Guilherme de Lima Big Data Hadoop |
title_short |
Desenvolvimento de software no contexto Big Data |
title_full |
Desenvolvimento de software no contexto Big Data |
title_fullStr |
Desenvolvimento de software no contexto Big Data |
title_full_unstemmed |
Desenvolvimento de software no contexto Big Data |
title_sort |
Desenvolvimento de software no contexto Big Data |
author |
Bernardes, Guilherme de Lima |
author_facet |
Bernardes, Guilherme de Lima |
author_role |
author |
dc.contributor.author.fl_str_mv |
Bernardes, Guilherme de Lima |
dc.contributor.advisor1.fl_str_mv |
Cruz, Fernando William |
contributor_str_mv |
Cruz, Fernando William |
dc.subject.keyword.en.fl_str_mv |
Big Data Hadoop |
topic |
Big Data Hadoop |
description |
Monografia (graduação)—Universidade de Brasília, Faculdade UnB Gama, Curso de Engenharia de Software, 2015. |
publishDate |
2015 |
dc.date.submitted.none.fl_str_mv |
2015 |
dc.date.accessioned.fl_str_mv |
2015-11-04T16:54:02Z |
dc.date.available.fl_str_mv |
2015-11-04T16:54:02Z |
dc.date.issued.fl_str_mv |
2015-11-04T16:54:02Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/bachelorThesis |
format |
bachelorThesis |
status_str |
publishedVersion |
dc.identifier.citation.fl_str_mv |
BERNARDES, Guilherme de Lima. Desenvolvimento de software no contexto Big Data. 95 f., il. Monografia (Bacharelado em Engenharia de Software)—Universidade de Brasília, Brasília, 2015. |
dc.identifier.uri.fl_str_mv |
http://bdm.unb.br/handle/10483/11335 |
identifier_str_mv |
BERNARDES, Guilherme de Lima. Desenvolvimento de software no contexto Big Data. 95 f., il. Monografia (Bacharelado em Engenharia de Software)—Universidade de Brasília, Brasília, 2015. |
url |
http://bdm.unb.br/handle/10483/11335 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.source.none.fl_str_mv |
reponame:Biblioteca Digital de Monografias da UnB instname:Universidade de Brasília (UnB) instacron:UNB |
instname_str |
Universidade de Brasília (UnB) |
instacron_str |
UNB |
institution |
UNB |
reponame_str |
Biblioteca Digital de Monografias da UnB |
collection |
Biblioteca Digital de Monografias da UnB |
bitstream.url.fl_str_mv |
http://bdm.unb.br/xmlui/bitstream/10483/11335/1/2015_GuilhermedeLimaBernardes.pdf http://bdm.unb.br/xmlui/bitstream/10483/11335/2/license_url http://bdm.unb.br/xmlui/bitstream/10483/11335/3/license_text http://bdm.unb.br/xmlui/bitstream/10483/11335/4/license_rdf http://bdm.unb.br/xmlui/bitstream/10483/11335/5/license.txt |
bitstream.checksum.fl_str_mv |
892111d551f570ab749b1ab27691bbcc 6f1da3ff281999354d4abd56d1551468 d41d8cd98f00b204e9800998ecf8427e 5f21d45308ffc58e8d263280cb61c64d 1da460f1e3d0ca18e6e4a5b4f31c0655 |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 MD5 MD5 MD5 |
repository.name.fl_str_mv |
Biblioteca Digital de Monografias da UnB - Universidade de Brasília (UnB) |
repository.mail.fl_str_mv |
bdm@bce.unb.br||patricia@bce.unb.br |
_version_ |
1813907855618605056 |