Ich werde Apache Beam Datenpipelines mit Google Cloud Dataflow erstellen
Leitender Dateningenieur
Über diesen Service
Benötigst du eine zuverlässige Apache Beam oder Google Cloud Dataflow Pipeline?
Ich erstelle eine Python-basierte Datenpipeline mit Apache Beam und Google Cloud Dataflow nach deinen Vorgaben.
Wobei ich helfen kann:
Entwicklung von Apache Beam Pipelines
Google Cloud Dataflow Pipelines
Batch-Datenverarbeitung
Echtzeit- oder Streaming-Datenverarbeitung
Integration mit Google Cloud Storage
Integration mit BigQuery
Datenumwandlung und Validierung
Python ETL-Entwicklung
Pipeline-Debugging und Troubleshooting
Unit-Tests und Dokumentation
Ich verfüge über professionelle Erfahrung in der Entwicklung skalierbarer ETL-Pipelines mit Python und Apache Beam auf der Google Cloud Platform, inklusive Services wie Dataflow, BigQuery, Pub/Sub und Cloud Storage. Außerdem habe ich an Batch- und Echtzeit-Datenverarbeitung, Tests und Produktionsbereitstellung gearbeitet.
Zuerst werde ich deine Quellen-, Ziel- und Transformationsanforderungen verstehen und dann eine saubere und wartbare Lösung umsetzen.
Bitte kontaktiere mich vor der Bestellung, damit ich deine Anforderungen prüfen und den Umfang bestätigen kann.
Zielplattform:
Google BigQuery
•
Google Cloud Storage
Tools und Plattformen:
Google Cloud Dataflow
•
Andere

