Disseny de fluxes ETL amb eines DBT i Snowflake
Sedó Galimany, Marc
Espinosa, Antonio, dir. (Universitat Autònoma de Barcelona. Departament d'Arquitectura de Computadors i Sistemes Operatius)
Universitat Autònoma de Barcelona. Escola d'Enginyeria

Títol variant:	Diseño de flujos ETL con herramientas DBT y Snowflake
Data:	2023
Resum:	Aquest Treball de Fi de Grau aborda el repte de identificar les causes de les pèrdues o retards dels paquets en una empresa de transports. L'objectiu és desenvolupar una solució integral aprofitant les tècniques d'enginyeria de dades i implementant un procés ELT (Extraer, Cargar, Transformar) per crear un model dimensional. El projecte utilitzarà dbt (Eina de creació de dades) i Snowflake per crear un esquema en estrella ben estructurat que permeti una anàlisi eficient de les dades d'enviament. En visualitzar i analitzar aquestes dades, s'extrauran coneixements valuosos per informar de les operacions de l'empresa. A més, el projecte emprarà tècniques de modelatge predictiu per pronosticar l'estat dels paquets, millorant la capacitat de l'empresa per prendre decisions basades en dades i millorar les operacions generals.
Resum:	Este Trabajo de Fin de Grado aborda el reto de identificar las causas de las pérdidas o retrasos de los paquetes en una empresa de transportes. El objetivo es desarrollar una solución integral aprovechando las técnicas de ingeniería de datos e implementando un proceso ELT (Extraer, Cargar, Transformar) para crear un modelo dimensional. El proyecto utilizará dbt (Herramienta de creación de datos) y Snowflake para crear un esquema en estrella bien estructurado que permita un análisis eficiente de los datos de envío. Al visualizar y analizar estos datos, se extraerán conocimientos valiosos para informar las operaciones de la empresa. Además, el proyecto empleará técnicas de modelado predictivo para pronosticar el estado de los paquetes, mejorando la capacidad de la empresa para tomar decisiones basadas en datos y mejorar las operaciones generales.
Resum:	This final degree project addresses the challenge of identifying the causes of package losses or delays in a shipping firm. The objective is to develop a comprehensive solution by leveraging data engineering techniques and implementing an ELT (Extract, Load, Transform) process to create a dimensional model. The project will utilize dbt (Data Build Tool) and Snowflake to build a well structured star schema that enables efficient analysis of shipping data. By visualizing and analyzing this data, valuable insi ghts will be extracted to inform the company's operations. Furthermore, the project will employ predictive modeling techniques to forecast package statuses, enhancing the company's ability to make data driven decisions and improve overall operations.
Drets:	Aquest document està subjecte a una llicència d'ús Creative Commons. Es permet la reproducció total o parcial i la comunicació pública de l'obra, sempre que no sigui amb finalitats comercials, i sempre que es reconegui l'autoria de l'obra original. No es permet la creació d'obres derivades.
Llengua:	Anglès
Titulació:	Grau en Enginyeria de Dades [2503758]
Pla d'estudis:	Enginyeria de Dades [1394]
Document:	Treball final de grau ; Text
Matèria:	Modelat de dades ; Model dimensional ; Esquema en estrella ; Dbt (eina de creació de dades) ; Snowflake ; Emmagatzematge de dades ; ETL (Extreure ; Transformar ; Carregar) ; Business Intelligence ; Enriquiment de dades externes ; Taula de fets ; Dimensió ; Modelado de datos ; Modelo dimensional ; Dbt (herramienta de creación de datos) ; Almacenamiento de datos ; ETL ; Enriquecimiento de datos externos ; Tabla de hechos ; Dimensión ; Data modeling ; Dimensional model ; Star schema ; Dbt (data build tool) ; Data warehousing ; ETL (Extract ; Transform ; Load) ; External data enrichment ; Fact table ; Dimension

13 p, 1.1 MB

El registre apareix a les col·leccions:
Documents de recerca > Treballs de Fi de Grau > Escola d'Enginyeria. TFG