Ich werde Python ETL-Datenpipelines für APIs, SQL und CSV erstellen
Webentwickler und Data Engineer
Über diesen Service
Hast du Schwierigkeiten mit unordentlichen Daten, manuellen Berichten oder unzuverlässigen Datenworkflows, die Geschäftsentscheidungen verzögern?
Ich erstelle eine Python ETL / ELT-Datenpipeline, um Daten aus APIs, CSV/Excel-Dateien, SQL-Datenbanken, Cloud-Speicher oder CRMs für Dashboards, Berichte, Analysen, ML oder AI-fähige Workflows zu extrahieren, zu bereinigen, zu transformieren und zu laden.
Das bekommst du:
- ETL / ELT-Pipelines für automatischen Datenimport und -transformation
- Integrationen mit API, CSV, Excel, SQL-Datenbanken und Cloud-Speicher
- Batch-Pipelines, geplant stündlich, täglich, wöchentlich oder individuell
- Datenlade in Data Warehouses wie BigQuery, Redshift, PostgreSQL, Snowflake oder ClickHouse
- dbt-Modelle für Staging, inkrementelle Loads, Tests und Dokumentation
- Orchestrierung mit Airflow, Cloud Composer, cron oder Cloud-Schedulern
- Datenqualitätsprüfungen, Validierung, Logging und Fehlerbehandlung
Technologie-Stack:
- Python, SQL, dbt
- Airflow, Airbyte
- Kafka, Debezium
- BigQuery, Redshift, Snowflake, ClickHouse
- MySQL, PostgreSQL, MongoDB
- AWS Glue, Lambda, S3, Kinesis, DMS
- GCP Dataflow, Pub/Sub, Datastream
Schreib mir vor der Bestellung, damit ich deine Anforderungen verstehen kann.
FAQ
Automatische Übersetzung
Arbeitest du mit Python ETL-Skripten?
Ja. Ich kann Python ETL-Skripte für Datenextraktion, -bereinigung, -transformation, -validierung, -laden, -logging und Fehlerbehandlung erstellen.
Kannst du meine Datenpipeline nach einem Zeitplan automatisieren?
Ja. Ich kann deine Datenpipeline so planen, dass sie stündlich, täglich, wöchentlich oder nach einem individuellen Zeitplan läuft, mit Airflow, cron, Cloud Composer, Cloud Schedulers oder anderen Orchestrierungstools.
