Data Lake em Viticultura: big data management na agricultura

Detalhes bibliográficos
Autor(a) principal: Pires, Francisco Miguel Marques
Data de Publicação: 2018
Tipo de documento: Dissertação
Idioma: por
Título da fonte: Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
Texto Completo: http://hdl.handle.net/10362/33951
Resumo: Project Work presented as the partial requirement for obtaining a Master's degree in Information Management, specialization in Information Systems and Technologies Management
id RCAP_cce97d5f42ad8d918b6f98b21f946173
oai_identifier_str oai:run.unl.pt:10362/33951
network_acronym_str RCAP
network_name_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository_id_str 7160
spelling Data Lake em Viticultura: big data management na agriculturaBig DataData LakeHadoopViticulturaPortugalProject Work presented as the partial requirement for obtaining a Master's degree in Information Management, specialization in Information Systems and Technologies ManagementO volume de dados criado pelas inúmeras fontes tem aumentado a um nível visivelmente crescente. No âmbito de Big Data, o setor vitícola não é exceção, englobando uma grande quantidade de dados de diferentes tipos para análise, desde dados meteorológicos, dados sensoriais ou até dados do mercado de venda. Com este projeto pretende-se implementar uma arquitetura moderna de dados cujo principal componente é o Data lake. A ideia base consiste em ter um único repositório com dados do setor vitícola, de forma a termos uma visão centrada dos dados numa única plataforma. Este desafio consiste em identificar as diferentes fontes de dados necessárias para a elaboração do data lake, as suas características, incluindo a conceção de desenho e implementação da arquitetura, os processos existentes no data lake, e a exploração das tecnologias pertencentes ao ecossistema Hadoop que melhor se adaptam aos dados.The volume of data created by innumerous sources has increased at an unprecedented rate. In Big Data, the wine sector is no exception, encompassing a large amount of data of different types for analysis, from meteorological data, sensory data or even wine market data. With this project, is intended to implement a modern data architecture whose main component is a Data lake. The basic idea is to have a single repository with data from the wine sector, so that we have a focused view of the data on a single platform. This challenge consists in identifying the different sources of data required for the elaboration of the data lake, its characteristics, including the design and implementation of the architecture, the existing processes in the data lake, and the exploitation of technologies belonging to the Hadoop ecosystem that best adapt to the data.Neto, Miguel de Castro Simões FerreiraRUNPires, Francisco Miguel Marques2018-04-06T16:48:34Z2018-04-042018-04-04T00:00:00Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttp://hdl.handle.net/10362/33951TID:201895544porinfo:eu-repo/semantics/openAccessreponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãoinstacron:RCAAP2024-03-11T04:18:41Zoai:run.unl.pt:10362/33951Portal AgregadorONGhttps://www.rcaap.pt/oai/openaireopendoar:71602024-03-20T03:30:06.881430Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãofalse
dc.title.none.fl_str_mv Data Lake em Viticultura: big data management na agricultura
title Data Lake em Viticultura: big data management na agricultura
spellingShingle Data Lake em Viticultura: big data management na agricultura
Pires, Francisco Miguel Marques
Big Data
Data Lake
Hadoop
Viticultura
Portugal
title_short Data Lake em Viticultura: big data management na agricultura
title_full Data Lake em Viticultura: big data management na agricultura
title_fullStr Data Lake em Viticultura: big data management na agricultura
title_full_unstemmed Data Lake em Viticultura: big data management na agricultura
title_sort Data Lake em Viticultura: big data management na agricultura
author Pires, Francisco Miguel Marques
author_facet Pires, Francisco Miguel Marques
author_role author
dc.contributor.none.fl_str_mv Neto, Miguel de Castro Simões Ferreira
RUN
dc.contributor.author.fl_str_mv Pires, Francisco Miguel Marques
dc.subject.por.fl_str_mv Big Data
Data Lake
Hadoop
Viticultura
Portugal
topic Big Data
Data Lake
Hadoop
Viticultura
Portugal
description Project Work presented as the partial requirement for obtaining a Master's degree in Information Management, specialization in Information Systems and Technologies Management
publishDate 2018
dc.date.none.fl_str_mv 2018-04-06T16:48:34Z
2018-04-04
2018-04-04T00:00:00Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10362/33951
TID:201895544
url http://hdl.handle.net/10362/33951
identifier_str_mv TID:201895544
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron:RCAAP
instname_str Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron_str RCAAP
institution RCAAP
reponame_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
collection Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository.name.fl_str_mv Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
repository.mail.fl_str_mv
_version_ 1799137925265358848

Registros relacionados