Cloud data warehousing solution in the banking sector

Detalhes bibliográficos
Autor(a) principal: Silvestre, João Diogo Miguel
Data de Publicação: 2023
Tipo de documento: Dissertação
Idioma: eng
Título da fonte: Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
Texto Completo: http://hdl.handle.net/10400.5/28059
Resumo: Mestrado Bolonha em Data Analytics for Business
id RCAP_0490690c28b6c06965b7132e41fb18b3
oai_identifier_str oai:repositorio.ul.pt:10400.5/28059
network_acronym_str RCAP
network_name_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository_id_str 7160
spelling Cloud data warehousing solution in the banking sectorData LakehouseData WarehouseBusiness IntelligenceCloud ComputingMestrado Bolonha em Data Analytics for BusinessThe Covid-19 pandemic brought about many changes in the business world, and one of the most significant was the accelerated adoption of digital technologies. Commercial banks were no exception, launching several IT projects to support remote work and digital customer experiences. However, this surge in IT projects led to an overload of project management issues. With limited resources and competing priorities, project managers struggled to keep up with the increased workload. To address this problem, banks searched for means to store and analyze important data that would allow them to improve their resource allocation and operational efficiency. Some of Portugal’s largest commercial banks substantially invested in data warehousing and analysis solutions to achieve these goals. The present study is a result of these investments and seeks to create a robust data warehousing solution in which data can be safely stored and develop a business intelligence report for data analysis purposes. The objective of this project is to combine these two components into a decision support system capable of providing up-to-date and accurate information that empowers the bank’s managers to make informed business decisions. This data warehousing solution is deployed on the cloud and involves the creation of an architecture that can handle massive amounts of data while remaining highly scalable. This architecture leverages the Data Lakehouse concept with Kimball's Data Bus principles to achieve its scalability and efficiency. Although some concerns were raised regarding its dependencies on external sources, the solution was implemented successfully and proved to be effective in this specific business context.A pandemia da Covid-19 proporcionou muitas mudanças no mercado de trabalho e uma das mais significativas foi a adoção acelerada das tecnologias digitais. Os bancos comerciais que naturalmente não foram exceção, lançaram diversos projetos de TI para apoio ao trabalho remoto e às ferramentas digitais disponibilizadas aos seus clientes. No entanto, a este aumento de projetos TI acresceram problemas na sua gestão. Com recursos limitados e outras prioridades, os gestores de projeto depararam-se com um exponencial aumento de trabalho. Para ultrapassar esses problemas, os bancos procuraram formas de armazenar e analisar dados essencias que permitissem uma melhor alocação de recursos e eficiência operacional. Assim, para atingir estes objetivos, alguns dos maiores bancos comerciais portugueses investiram de forma substancial em soluções de armazenamento e análise de dados. O presente estudo resulta desses investimentos e foca-se no desenvolvimento de um data warehouse, no qual os dados possam ser armazenados com segurança, bem como a construção de um relatório de análise de dados com recurso a um software de business intelligence. O objetivo deste projeto resulta da conjugação de ambos e tem o intuito de fornecer aos gerentes do banco informações atualizadas para a tomada de decisões. Esta solução de data warehousing é implementada na cloud e envolve uma arquitetura de altamente escalável e com elevada capacidade de armazenar grandes quantidades de dados. Para alcançar escalabilidade e eficiência, esta arquitetura combina o conceito de Data Lakehouse com os princípios do Data Bus de Kimball. Embora algumas preocupações tenham surgido quanto à sua dependência para com fontes de dados externas, esta solução provou ser eficaz quando aplicada ao contexto de negócio em questão.Instituto Superior de Economia e GestãoCosta, CarlosMiguel, RuiRepositório da Universidade de LisboaSilvestre, João Diogo Miguel2023-07-28T09:45:13Z2023-032023-03-01T00:00:00Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttp://hdl.handle.net/10400.5/28059engSilvestre, João Diogo Miguel (2023). “Cloud data warehousing solution in the banking sector”. Dissertação de Mestrado. Universidade de Lisboa. Instituto Superior de Economia e Gestãoinfo:eu-repo/semantics/openAccessreponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãoinstacron:RCAAP2024-11-20T18:41:27Zoai:repositorio.ul.pt:10400.5/28059Portal AgregadorONGhttps://www.rcaap.pt/oai/openairemluisa.alvim@gmail.comopendoar:71602024-11-20T18:41:27Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informaçãofalse
dc.title.none.fl_str_mv Cloud data warehousing solution in the banking sector
title Cloud data warehousing solution in the banking sector
spellingShingle Cloud data warehousing solution in the banking sector
Silvestre, João Diogo Miguel
Data Lakehouse
Data Warehouse
Business Intelligence
Cloud Computing
title_short Cloud data warehousing solution in the banking sector
title_full Cloud data warehousing solution in the banking sector
title_fullStr Cloud data warehousing solution in the banking sector
title_full_unstemmed Cloud data warehousing solution in the banking sector
title_sort Cloud data warehousing solution in the banking sector
author Silvestre, João Diogo Miguel
author_facet Silvestre, João Diogo Miguel
author_role author
dc.contributor.none.fl_str_mv Costa, Carlos
Miguel, Rui
Repositório da Universidade de Lisboa
dc.contributor.author.fl_str_mv Silvestre, João Diogo Miguel
dc.subject.por.fl_str_mv Data Lakehouse
Data Warehouse
Business Intelligence
Cloud Computing
topic Data Lakehouse
Data Warehouse
Business Intelligence
Cloud Computing
description Mestrado Bolonha em Data Analytics for Business
publishDate 2023
dc.date.none.fl_str_mv 2023-07-28T09:45:13Z
2023-03
2023-03-01T00:00:00Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/10400.5/28059
url http://hdl.handle.net/10400.5/28059
dc.language.iso.fl_str_mv eng
language eng
dc.relation.none.fl_str_mv Silvestre, João Diogo Miguel (2023). “Cloud data warehousing solution in the banking sector”. Dissertação de Mestrado. Universidade de Lisboa. Instituto Superior de Economia e Gestão
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Instituto Superior de Economia e Gestão
publisher.none.fl_str_mv Instituto Superior de Economia e Gestão
dc.source.none.fl_str_mv reponame:Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
instname:Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron:RCAAP
instname_str Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
instacron_str RCAAP
institution RCAAP
reponame_str Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
collection Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos)
repository.name.fl_str_mv Repositório Científico de Acesso Aberto de Portugal (Repositórios Cientìficos) - Agência para a Sociedade do Conhecimento (UMIC) - FCT - Sociedade da Informação
repository.mail.fl_str_mv mluisa.alvim@gmail.com
_version_ 1817549343144542208