Ich werde Datenpipelines mit Apache Airflow erstellen

Apache Airflow Starter Pack

Drei große Probleme bei Apache Airflow,

1. Die Infrastruktur aufbauen und zum Laufen bringen
2. Die besten Praktiken lernen und umsetzen, um das System schneller skalieren zu können
3. Ingestion umfasst das Bewegen von Daten zu/ von

• großen Dateien
• Webseiten/Anwendungen
• S3 oder GCS
• das Data Warehouse (Redshift, Oracle, MySQL, Postgres)
• externe Systeme (Instagram, Zapier, Twilio)

Ich arbeite seit drei Jahren als Softwareentwickler und Berater an Airflow-Systemen und kenne mich in und auswendig mit einem Airflow-System aus.

In diesem Starter Pack helfe ich dir dabei.

• Deine Airflow-Infrastruktur einrichten (Docker/Kubernetes/EC2, du kannst entscheiden)
• Grundlegendes Projektsetup, um neue Pipelines hinzuzufügen und Testzeiten zu testen
• Pipeline-Design und Entwicklung für drei Pipelines

Sende mir eine DM, und wir vereinbaren einen kostenlosen 40-minütigen Strategie-Call, um herauszufinden, was für dich am besten funktioniert.