Aplicació de Web Scraping en l’entorn immobiliari
Marti Zaragoza, David
Mata Parràga, Joan tut. (Universitat Autònoma de Barcelona. Departament d'Enginyeria de la Informació i de les Comunicacions)
Universitat Autònoma de Barcelona. Escola d'Enginyeria

Títol variant:	Application of Web Scraping in the real estate environment
Títol variant:	Aplicación de Web Scraping en el entorno inmobiliario
Data:	2026
Resum:	Aquest treball presenta el disseny d'un prototip de programari resilient per a l'extracció automatitzada (Web Scraping) de dades immobiliàries en entorns amb seguretat perimetral extrema (WAF). Es proposa una arquitectura híbrida que descarta l'automatització convencional i s'estructura sota Undetected-Chromedriver per a l'ofuscació de la signatura del navegador, i la llibreria HumanCursor per a la simulació cinemàtica i estocàstica del comportament humà (tecleig natural, desplaçaments fluids i interacció del ratolí). La persistència es consolida de manera atòmica per lots en un motor relacional SQLite local blindat contra fallades. El sistema s'ha validat en un entorn de producció real, extraient amb èxit i de forma completament indetectada 277 entrades del catàleg actiu, demostrant la viabilitat de la mimetització biomètrica davant de contramesures web comercials.
Resum:	This paper presents the design of a resilient software prototype for automated data extraction (Web Scraping) of real estate data in environments with extreme perimeter security (WAF). The proposed hybrid architecture discards conventional automation in favor of Undetected-Chromedriver for browser fingerprint obfuscation, and the HumanCursor library for kinematic and stochastic simulation of human behavior (natural typing, smooth scrolling, and mouse interaction). Data persistence is atomically consolidated in batches into a fault-tolerant local SQLite relational engine. The system was validated in a real production environment, successfully extracting 277 active listings completely undetected, thereby demonstrating the viability of biometric mimicking against commercial web countermeasures.
Resum:	Este trabajo presenta el diseño de un prototipo de software resiliente para la extracción automatizada (Web Scraping) de datos inmobiliarios en entornos con seguridad perimetral extrema (WAF). Se propone una arquitectura híbrida que descarta la automatización convencional y se estructura bajo Undetected-Chromedriver para la ofuscación de la firma del navegador, y la librería HumanCursor para la simulación cinemática y estocástica del comportamiento humano (tecleo natural, desplazamientos fluidos e interacción del ratón). La persistencia se consolida de forma atómica por lotes en un motor relacional SQLite local blindado contra fallos. El sistema se ha validado en un entorno de producción real, extrayendo con éxito y de forma completamente indetectada 277 entradas del catálogo activo, demostrando la viabilidad de la mimetización biométrica frente a contramedidas web comerciales.
Drets:	Aquest document està subjecte a una llicència d'ús Creative Commons. Es permet la reproducció total o parcial, la distribució, la comunicació pública de l'obra i la creació d'obres derivades, sempre i quan aquestes es distribueixin sota la mateixa llicència que regula l'obra original i es reconegui l'autoria.
Llengua:	Català
Titulació:	Enginyeria Informàtica [2502441]
Pla d'estudis:	Enginyeria Informàtica [958]
Document:	Treball final de grau
Àrea temàtica:	Menció Tecnologies de la Informació
Matèria:	Web Scraping ; Undetected-Chromedriver ; HumanCursor ; Seguretat Perimetral ; Comportament Biometric ; SQLite ; Perimeter Security ; Biometric Behavior ; Seguridad Perimetral ; Comportamiento Biométrico

9 p, 264.1 KB

El registre apareix a les col·leccions:
Documents de recerca > Treballs de final de grau > Escola d'Enginyeria. TFG