Ich werde skalierbare Datenpipelines und ETL mit Python, SQL, Airflow und Databricks aufbauen
Data und AI Engineer
Über diesen Service
Benötigst du zuverlässige Datenpipelines, die einfach funktionieren? Ich bin Data Engineer mit einem M.Sc. in Data Science und Industry-Erfahrung bei Amazon und Tata Consultancy Services, wo ich Pipelines gebaut habe, die über 1TB Daten für mehr als 100 Analysten verarbeiten.
Was ich für dich bauen kann:
- ETL/ELT Pipelines in Python und SQL
- Datenintegration aus APIs, Datenbanken, CSV/Excel und Cloud-Speicher
- Geplante Workflows mit Apache Airflow
- Datenlager und dbt-Modelle
- Databricks- und PySpark-Verarbeitung für große Datensätze
- Datenbereinigung, Validierung und Qualitätskontrollen
- Pipelines auf AWS, GCP oder Databricks
Warum mit mir arbeiten:
- Bei Amazon habe ich die Pipeline-Verarbeitungszeit um 30 % reduziert und 95 % manueller Datenarbeit durch Automatisierung eliminiert
- Databricks Certified Data Engineer
- Sauberer, dokumentierter und getesteter Code, den du vollständig besitzt
- Klare Kommunikation und pünktliche Lieferung
So funktioniert es:
- Sende mir eine Nachricht mit deinen Datenquellen und deinem Ziel
- Ich bestätige den Umfang und das passende Paket
- Du erhältst funktionierenden Code, Dokumentation und eine Einführung
Unsicher, welches Paket passt? Schick mir vor der Bestellung eine Nachricht, und ich antworte schnell.
FAQ
Automatische Übersetzung
Was brauchst du von mir, um anzufangen?
Zugang zu oder Beispiele deiner Datenquellen, des Zielorts (Datenbank, Warehouse oder Dateien) und eine kurze Beschreibung des erwarteten Outputs. Zugangsdaten können nach Beginn der Bestellung sicher geteilt werden.
Mit welchen Tools und Plattformen arbeiten Sie?
Python, SQL, PySpark, Apache Airflow, dbt, Kafka und Databricks auf AWS, GCP oder PostgreSQL. Wenn du eine andere Technologie verwendest, schick mir zuerst eine Nachricht, und ich bestätige, ob ich helfen kann.
Werde ich der Eigentümer des Codes sein?
Ja. Du erhältst den vollständigen Quellcode, die Dokumentation und die Installationsanleitung, und alles gehört dir zur freien Nutzung und Modifikation.
Kannst du mit meinem bestehenden Pipeline oder Datenbank arbeiten?
Ja. Ich kann bestehende Pipelines erweitern, reparieren oder optimieren. Bitte teile mir vor der Bestellung Details mit, damit ich den Umfang richtig einschätzen kann.
Wie schützen Sie meine Daten?
Ich nutze nur den Zugriff, der für die Aufgabe notwendig ist, teile deine Daten nie außerhalb des Projekts und kann auch mit anonymisierten Beispieldaten arbeiten, wenn du möchtest.
Was, wenn mein Projekt nicht in ein Paket passt?
Schick mir eine Nachricht mit deinen Anforderungen, und ich erstelle ein individuelles Angebot, das zu deinem Umfang und Budget passt.

