Ich werde eine automatisierte Data-Pipeline mit Python und Airflow erstellen.
Daten- und Cloud-Ingenieur
Über diesen Service
Genug vom manuellen Kopieren und Säubern von Daten? Ich baue automatisierte Data-Pipelines, die deine Daten sammeln, säubern und in einer Datenbank speichern – und selbstständig nach einem Zeitplan laufen.
Was du bekommst:
- Python-Code, der Daten aus APIs oder Dateien zieht
- Datenbereinigung (Duplikate, falsche Formate, fehlende Werte)
- Speicherung in einer PostgreSQL-Datenbank
- Tägliche Planung mit Apache Airflow
- Docker-Paketierung, damit es überall gleich läuft
- Deployment auf AWS-Cloud-Server (Premium-Paket)
Ich habe selbst eine funktionierende Pipeline dieser Art gebaut und ausgerollt und kann dir Screenshots davon zeigen.
Bevor du bestellst, schick mir deine Datenquelle und was du mit den Daten vorhast, damit ich sicherstellen kann, dass es passt.
Technologie:
Apache-Funken
•
BigQuery
•
Python
•
SQL
•
Apache Airflow
Mein Portfolio
FAQ
Automatische Übersetzung
Arbeitest du mit Power BI oder Tableau?
Ja, ich mache das, aber der Fokus liegt auf der Data-Pipeline und der Datenbank. Ich bereite saubere Daten vor, damit dein Dashboard-Tool sie lesen kann.
Kannst du auf meinem eigenen AWS-Konto deployen?
Ja, wenn du mir Zugriff gibst. Andernfalls kann ich es auf meinem eigenen Server deployen.

