Ich bin dein erfahrener databricks- und pyspark-Dateningenieur für ETL-Pipelines

Einige Informationen wurden automatisch übersetzt.

Großbritannien

Ich spreche Englisch

Senior Data- und AI-Engineer, Databricks-zertifiziert, 11 Jahre

Ich bin ein erfahrener Profi mit über 11 Jahren in Software- und Data-Engineering. Ich habe nachweislich Teams agil geführt, ETL-Prozesse und Infrastruktur automatisiert, Datenpipelines optimiert und ...
Über diesen Service

Brauche zuverlässige Databricks-Pipelines, die um 3 Uhr morgens nicht zusammenbrechen? Du bist hier genau richtig.

Ich bin ein zertifizierter Databricks Data Engineer (Professional) mit über 10 Jahren Erfahrung im Aufbau von Produktionsdaten-Systemen für Energiehandel, Banken, Einzelhandel und Krypto-Analytics-Unternehmen, darunter OVO Energy, Bank of America und Sainsbury's.

Was ich für dich erstelle:

  1. ️Skalierbare PySpark / Scala Spark Pipelines auf Databricks
  2. DeltaLake-Architektur (bronze/silber/gold Medaille)
  3. Streaming + Batch ETL mit Kafka, Auto Loader oder Structured Streaming
  4. Kostenoptimierte Cluster-Konfigurationen (ich habe über 80.000 Pfund an jährlichen Cloud-Einsparungen erzielt)
  5. Sauberer, getesteter und dokumentierter Code, den du deinem Team übergeben kannst

Mein Stack: Databricks, PySpark, Scala, DeltaLake, Airflow, Kafka, Snowflake, BigQuery, Terraform, AWS, GCP.

Mein Prozess: Discovery-Call -> Architekturfreigabe -> Aufbau -> Test -> Durchlauf -> Übergabe. Keine Überraschungen, kein Scope Creep.

Schreib mir vor der Bestellung, damit ich dein Projekt richtig einschätzen und die Passung bestätigen kann. Ich antworte innerhalb von 1 Stunde während der britischen Geschäftszeiten.

Lass uns etwas Solides aufbauen.

Expertise:

API-Integration

Automatisierungen

Big Data

Datenfluss

Technologie:

Apache Kafka

Apache-Funken

Python

Snowflake