Desarrollo de un pipeline ETL para la formación y validación de modelos de machine learning
Campo Cabrera, Marc
Cortés Fité, Ana, tut. (Universitat Autònoma de Barcelona. Departament d'Arquitectura de Computadors i Sistemes Operatius)
Universitat Autònoma de Barcelona. Escola d'Enginyeria

Additional title:	Desenvolupament d'una pipeline ETL per a l'entrenament i validació de models de machine learning
Additional title:	Development of an ETL pipeline for training and validating machine learning models
Date:	2025
Abstract:	El projecte "Desenvolupament d'un pipeline ETL per a la formació i validació de models de.
Abstract:	El proyecto "Desarrollo de un pipeline ETL para la formación y validación de modelos de.
Abstract:	The project "Development of an ETL pipeline for the training and validation of machine learning models" focuses on the first phase of the artificial intelligence model development process: data extraction, transformation, and loading (ETL). The main objective is to design an automated and structured ETL pipeline that allows for continuous data collection, validation, and storage. Specifically, in this project, the data to be processed are images. Therefore, small batches, such as groups of 20 images, will be used to optimize data flow and avoid bottlenecks. In addition, validation rules will be incorporated to ensure data integrity and quality, detecting potential inconsistencies before final storage.
Rights:	Aquest document està subjecte a una llicència d'ús Creative Commons. Es permet la reproducció total o parcial, la distribució, i la comunicació pública de l'obra, sempre que no sigui amb finalitats comercials, i sempre que es reconegui l'autoria de l'obra original. No es permet la creació d'obres derivades.
Language:	Castellà
Studies:	Enginyeria Informàtica [2502441]
Study plan:	Enginyeria Informàtica [958]
Document:	Treball final de grau ; Text
Subject area:	Menció Tecnologies de la Informació
Subject:	Machine learning ; Pipeline ; ETL ; Python ; Bases de dades ; Automatització ; Prefect ; CVAT ; Recol·lecció de dades ; Preprocessament d'imatges ; Validació de dades ; Anotació ; Bases de datos ; Automatización ; Recolección de datos ; Preprocesamiento de imágenes ; Validación de datos ; Anotación ; Databases ; Automation ; Data collection ; Image preprocessing ; Data validation ; Annotation

9 p, 545.1 KB

The record appears in these collections:
Research literature > Bachelor's degree final project > School of Engineering. TFG