Ich werde eine Datenpipeline und einen Web Scraper mit Python, SQL, ETL, ELT und DBT erstellen.

Ich bin Datenbankingenieur mit nachweislicher Erfahrung im Aufbau robuster Automatisierungstools mit Python und Node.js. Ich spezialisiere mich auf das Extrahieren von strukturierten und unstrukturierten Daten aus APIs, internen Endpunkten und dynamischen Websites und deren Umwandlung in nutzbare Formate wie Excel, CSV und JSON. Meine Tools nutzen Cheerio, Axios, ExcelJS, Puppeteer, BeautifulSoup und Pandas, um Nullwerte zu handhaben, Requests zu drosseln und sich von Netzwerkproblemen zu erholen – alles bei gleichzeitiger Wahrung der Datenintegrität und Genauigkeit.

Neben dem Scraping entwerfe ich End-to-End-Datenpipelines, die die Datensammlung, -transformation und -speicherung für analysebereite Ausgaben automatisieren. Meine in Docker-Umgebungen laufenden Lösungen sorgen für Portabilität zwischen Systemen, und meine Arbeit mit HTML-Parsing, API-Interaktionen und strukturierten ETL-Flows bereitet Teams auf effizientes Skalieren vor. Wenn du manuelle Datensammlungen automatisieren, API-Feeds analysieren oder ein Scraping-System aufbauen möchtest, das in deinen Datenworkflow integriert wird, bin ich bereit, deine Daten zum Leben zu erwecken.