Ich baue, repariere oder optimiere deine python etl Datenpipeline
Senior Data Engineer und AI Produkt Engineer
Über diesen Service
Braucht deine Data-Pipeline einen Neubau, eine Reparatur oder eine Verbesserung?
Ich bin ein Senior Data Engineer mit Erfahrung in der Umsetzung von Produktions-Datasystemen in Banken, Bauwesen und Startups, inklusive Datenumwandlungsarbeiten bei der UBSCredit Suisse-Integration.
Ich kann dir helfen:
ETL/ELT-Pipelines aus APIs, Datenbanken oder Dateien erstellen
Bestehende Python-, SQL- oder PySpark-Pipelines debuggen und verbessern
APIs mit Datenbanken, Data Lakes oder Data Warehouses integrieren
Workflows in Databricks, Azure Data Factory oder Airflow aufbauen
Validierung, Datenqualitätschecks und Tests hinzufügen
Langsame oder teure Datenverarbeitung verbessern
Deine Pipeline dokumentieren, damit sie leicht wartbar ist
Ich arbeite mit Python, SQL, Databricks, PySpark, Delta Lake, Azure Data Factory, Airflow, PostgreSQL, SQL Server und Azure-Datenplattformen.
Jedes Projekt ist anders. Für alles, was über eine kleine Reparatur hinausgeht, schreib mir bitte vor der Bestellung. Ich helfe dir, den Umfang zu definieren und empfehle die einfachste Lösung.
Mein Portfolio
FAQ
Automatische Übersetzung
Was brauchst du von mir, bevor wir starten?
Eine Beschreibung des Problems, deine aktuellen Datenquellen und das Ziel sowie relevanten Code, Schemata oder API-Dokumentationen. Für größere Projekte schreib mir bitte vorher, damit wir den Umfang abstimmen können.
Kannst du eine bestehende Pipeline reparieren, anstatt eine neue zu bauen?
Ja. Ich kann Python-, SQL-, PySpark-, Databricks-, Azure Data Factory- und verwandte ETL-Pipelines troubleshootn, die Ursache eines Problems finden und eine Lösung umsetzen.
Mit welchen Datenquellen kannst du arbeiten?
Ich arbeite mit REST-APIs, SQL-Datenbanken, PostgreSQL, SQL Server, Dateien wie CSV/JSON/Parquet, Data Lakes und anderen gängigen Quellen. Schreib mir, wenn du ein weniger verbreitetes System hast.
Kannst du eine langsame oder teure Pipeline optimieren?
Ja. Ich kann die Architektur und den Code überprüfen, Engpässe erkennen und Bereiche wie Transformationen, Spark-Verarbeitung, Datenlayout, Parallelisierung und unnötige Berechnungen verbessern.
Kannst du mit Databricks und Azure arbeiten?
Ja. Data Engineering mit Databricks und Azure gehören zu meinen Kernkompetenzen, inklusive PySpark, Delta Lake, Azure Data Factory, ADLS und SQL-basierten Plattformen.
Soll ich Sie vor der Bestellung kontaktieren?
Beim Basic-Paket kann eine klar definierte kleine Aufgabe meist direkt bestellt werden. Für Standard, Premium oder alles, was den Umfang betrifft, schreib mir bitte vorher.
