Ich werde deine GCP-Datenplattform mit BigQuery, Airflow, dbt und Iceberg aufbauen
Dateningenieur
Über diesen Service
Benötigst du zuverlässige Datenpipelines auf Google Cloud, ohne ein Vollzeit-Team zu beschäftigen? Ich baue produktionsreife BigQuery-Pipelines, auf die deine Analysten vertrauen können.
Ich habe 5 Jahre Erfahrung mit Telco-Datenplattformen. Ich war an der Analytics-Migration von Vodafone Ungarn zu Google Cloud beteiligt und an der souveränen Apache Iceberg Lakehouse-Lösung von Deutsche Telekom auf GCP, beide in öffentlichen Google Cloud Fallstudien vorgestellt.
Was ich baue:
- Ingestion aus APIs, Datenbanken, Dateien, GA4, Anzeigen und SaaS-Tools in BigQuery
- Orchestrierung mit Apache Airflow oder Cloud Composer
- dbt-Modelle (Staging, Zwischenstufen, Marts) mit Tests und Dokumentation
- Medallion- und Lakehouse-Layouts auf GCS, BigQuery und Iceberg
- Datenqualitätsprüfungen, Alarmierung und CI/CD (GitLab oder GitHub)
- Kostenoptimierung: Partitionierung, Clustering, Abfrageoptimierung
So arbeite ich:
1. Du teilst mir deine Ziele, Quellen und Zugänge zu deinem GCP-Projekt mit
2. Ich bestätige den Umfang mit einem einfachen Architekturdiagramm
3. Ich baue, teste und dokumentiere in deinem Repository
4. Übergabegespräch und schriftliches Runbook
Du besitzt den gesamten Code. EU-basiert, GDPR-konform, NDA auf Anfrage.
Bitte schreibe mir vor der Bestellung, damit ich deine Quellen und den Umfang bestätigen kann.
Warehouse-Plattform:
Snowflake
•
BigQuery
•
Databricks
Projektart:
New Build
Mein Portfolio
FAQ
Automatische Übersetzung
Was muss ich bereitstellen?
Ein GCP-Projekt mit Abrechnung, IAM-Zugriff für mich, Zugangsdaten für jede Quelle und eine kurze Beschreibung der Fragen, die die Daten beantworten sollen.
Wer trägt die Google Cloud-Kosten?
Du, in deinem eigenen Projekt. Ich plane auf niedrige Kosten (Partitionierung, inkrementelle Modelle) und schätze die monatlichen Ausgaben bei Übergabe ab.
Bekomme ich den Code?
Ja. Alles läuft in deinem Git-Repository: Pipelines, dbt-Projekt, Dokumente und Runbook.
Kannst du mit Snowflake, Databricks oder DuckDB arbeiten?
Ja, aber Google Cloud ist meine Spezialität. Schreib mir mit deinem Stack, und ich bestätige vor deiner Bestellung.
Kann ich vorherige Arbeiten sehen?
Fallstudie: cloud.google.com/blog/topics/customers/engineering-deutsche-telekoms-sovereign-data-platform · Portfolio: balintdecsi.dev
Wie gehen Sie mit sensiblen Daten um?
Minimalprivilegierter Zugriff, keine Daten außerhalb deines Projekts kopiert, NDA auf Anfrage. Ich bin EU-basiert und an GDPR-konforme Telco-Daten gewöhnt.
Was zählt als Überarbeitung?
Änderungen innerhalb des vereinbarten Umfangs. Neue Quellen oder Modelle sind Extras oder ein individuelles Angebot.
Ich brauche nur eine Überprüfung meines aktuellen Setups.
Schreib mir: Ich biete eine 3-tägige Architektur-, Kosten- und Zuverlässigkeitsüberprüfung mit priorisiertem Fahrplan an.

