Cloud data warehousing solution in the banking sector
Autor(a) principal: | |
---|---|
Data de Publicação: | 2023 |
Tipo de documento: | Dissertação |
Idioma: | eng |
Título da fonte: | Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) |
Texto Completo: | http://hdl.handle.net/10400.5/28059 |
Resumo: | Mestrado Bolonha em Data Analytics for Business |
id |
RCAP_0490690c28b6c06965b7132e41fb18b3 |
---|---|
oai_identifier_str |
oai:repositorio.ul.pt:10400.5/28059 |
network_acronym_str |
RCAP |
network_name_str |
Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) |
repository_id_str |
7160 |
spelling |
Cloud data warehousing solution in the banking sectorData LakehouseData WarehouseBusiness IntelligenceCloud ComputingMestrado Bolonha em Data Analytics for BusinessThe Covid-19 pandemic brought about many changes in the business world, and one of the most significant was the accelerated adoption of digital technologies. Commercial banks were no exception, launching several IT projects to support remote work and digital customer experiences. However, this surge in IT projects led to an overload of project management issues. With limited resources and competing priorities, project managers struggled to keep up with the increased workload. To address this problem, banks searched for means to store and analyze important data that would allow them to improve their resource allocation and operational efficiency. Some of Portugal’s largest commercial banks substantially invested in data warehousing and analysis solutions to achieve these goals. The present study is a result of these investments and seeks to create a robust data warehousing solution in which data can be safely stored and develop a business intelligence report for data analysis purposes. The objective of this project is to combine these two components into a decision support system capable of providing up-to-date and accurate information that empowers the bank’s managers to make informed business decisions. This data warehousing solution is deployed on the cloud and involves the creation of an architecture that can handle massive amounts of data while remaining highly scalable. This architecture leverages the Data Lakehouse concept with Kimball's Data Bus principles to achieve its scalability and efficiency. Although some concerns were raised regarding its dependencies on external sources, the solution was implemented successfully and proved to be effective in this specific business context.A pandemia da Covid-19 proporcionou muitas mudanças no mercado de trabalho e uma das mais significativas foi a adoção acelerada das tecnologias digitais. Os bancos comerciais que naturalmente não foram exceção, lançaram diversos projetos de TI para apoio ao trabalho remoto e às ferramentas digitais disponibilizadas aos seus clientes. No entanto, a este aumento de projetos TI acresceram problemas na sua gestão. Com recursos limitados e outras prioridades, os gestores de projeto depararam-se com um exponencial aumento de trabalho. Para ultrapassar esses problemas, os bancos procuraram formas de armazenar e analisar dados essencias que permitissem uma melhor alocação de recursos e eficiência operacional. Assim, para atingir estes objetivos, alguns dos maiores bancos comerciais portugueses investiram de forma substancial em soluções de armazenamento e análise de dados. O presente estudo resulta desses investimentos e foca-se no desenvolvimento de um data warehouse, no qual os dados possam ser armazenados com segurança, bem como a construção de um relatório de análise de dados com recurso a um software de business intelligence. O objetivo deste projeto resulta da conjugação de ambos e tem o intuito de fornecer aos gerentes do banco informações atualizadas para a tomada de decisões. Esta solução de data warehousing é implementada na cloud e envolve uma arquitetura de altamente escalável e com elevada capacidade de armazenar grandes quantidades de dados. Para alcançar escalabilidade e eficiência, esta arquitetura combina o conceito de Data Lakehouse com os princípios do Data Bus de Kimball. Embora algumas preocupações tenham surgido quanto à sua dependência para com fontes de dados externas, esta solução provou ser eficaz quando aplicada ao contexto de negócio em questão.Instituto Superior de Economia e GestãoCosta, CarlosMiguel, RuiRepositório da Universidade de LisboaSilvestre, João Diogo Miguel2023-07-28T09:45:13Z2023-032023-03-01T00:00:00Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttp://hdl.handle.net/10400.5/28059engSilvestre, João Diogo Miguel (2023). “Cloud data warehousing solution in the banking sector”. Dissertação de Mestrado. Universidade de Lisboa. Instituto Superior de Economia e Gestãoinfo:eu-repo/semantics/openAccessreponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãoinstacron:RCAAP2024-11-20T18:41:27Zoai:repositorio.ul.pt:10400.5/28059Portal AgregadorONGhttps://www.rcaap.pt/oai/openairemluisa.alvim@gmail.comopendoar:71602024-11-20T18:41:27Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãofalse |
dc.title.none.fl_str_mv |
Cloud data warehousing solution in the banking sector |
title |
Cloud data warehousing solution in the banking sector |
spellingShingle |
Cloud data warehousing solution in the banking sector Silvestre, João Diogo Miguel Data Lakehouse Data Warehouse Business Intelligence Cloud Computing |
title_short |
Cloud data warehousing solution in the banking sector |
title_full |
Cloud data warehousing solution in the banking sector |
title_fullStr |
Cloud data warehousing solution in the banking sector |
title_full_unstemmed |
Cloud data warehousing solution in the banking sector |
title_sort |
Cloud data warehousing solution in the banking sector |
author |
Silvestre, João Diogo Miguel |
author_facet |
Silvestre, João Diogo Miguel |
author_role |
author |
dc.contributor.none.fl_str_mv |
Costa, Carlos Miguel, Rui Repositório da Universidade de Lisboa |
dc.contributor.author.fl_str_mv |
Silvestre, João Diogo Miguel |
dc.subject.por.fl_str_mv |
Data Lakehouse Data Warehouse Business Intelligence Cloud Computing |
topic |
Data Lakehouse Data Warehouse Business Intelligence Cloud Computing |
description |
Mestrado Bolonha em Data Analytics for Business |
publishDate |
2023 |
dc.date.none.fl_str_mv |
2023-07-28T09:45:13Z 2023-03 2023-03-01T00:00:00Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
format |
masterThesis |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
http://hdl.handle.net/10400.5/28059 |
url |
http://hdl.handle.net/10400.5/28059 |
dc.language.iso.fl_str_mv |
eng |
language |
eng |
dc.relation.none.fl_str_mv |
Silvestre, João Diogo Miguel (2023). “Cloud data warehousing solution in the banking sector”. Dissertação de Mestrado. Universidade de Lisboa. Instituto Superior de Economia e Gestão |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
application/pdf |
dc.publisher.none.fl_str_mv |
Instituto Superior de Economia e Gestão |
publisher.none.fl_str_mv |
Instituto Superior de Economia e Gestão |
dc.source.none.fl_str_mv |
reponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação instacron:RCAAP |
instname_str |
Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação |
instacron_str |
RCAAP |
institution |
RCAAP |
reponame_str |
Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) |
collection |
Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) |
repository.name.fl_str_mv |
Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação |
repository.mail.fl_str_mv |
mluisa.alvim@gmail.com |
_version_ |
1817549343144542208 |