Ich werde eine End-to-End Azure Data Pipeline mit adf und databricks aufbauen

Einige Informationen wurden automatisch übersetzt.
Soban M

Pakistan

Ich spreche Englisch

Cloud-Dateningenieur

Ich bin ein Cloud Data Engineer, spezialisiert auf den Aufbau skalierbarer ETL/ELT-Pipelines mit Azure Data Factory, Databricks, Delta Lake und Azure Synapse Analytics. Ich verwandle Rohdaten in analy...
Mehr lesen
Über diesen Service

Ich werde eine End-to-End-Lösung für Data Engineering entwickeln, um deine Daten zu erfassen, zu transformieren, zu verarbeiten und für Analysen vorzubereiten.

Ich spezialisiere mich auf Azure, Azure Data Factory, Azure Databricks, PySpark, Python, SQL, ADLS Gen2 und Delta Lake.

Was ich bauen kann:

  • ETL/ELT-Datenpipelines
  • API-, CSV-, Excel- und SQL-Datenaufnahme
  • Azure Data Factory Orchestrierung
  • ADLS Gen2 Data Lake-Lösungen
  • Databricks- und PySpark-Transformationen
  • Delta Lake & Medallion-Architektur
  • Batch- und inkrementelle Datenverarbeitung
  • SCD Typ 1 / Typ 2
  • Datenmodellierung & analytics-fertige Datensätze
  • Datenqualität und Validierung
  • Power BI-fertige Datenschichten

Typische Architektur:

Quelle ADF ADLS Databricks/PySpark Delta Lake Gold Layer Analytics

Ob du eine neue Pipeline, eine optimierte bestehende Pipeline oder eine komplette Datenplattform brauchst, ich kann die Lösung nach deinen Anforderungen gestalten.

Hast du ein Projekt im Kopf? Kontaktiere mich vor der Bestellung, damit ich deine Anforderungen verstehe und die passende Lösung empfehlen kann.

Mehr lesen
build end to end azure data pipeline using adf and databricks
Vollbild
build end to end azure data pipeline using adf and databricks
Vollbild
Vollbild
build end to end azure data pipeline using adf and databricksbuild end to end azure data pipeline using adf and databricksbuild end to end azure data pipeline using adf and databricks

Zielplattform:

Snowflake

•

Azure Synapse Analytics

+3 mehr

Tools und Plattformen:

Azure Data Factory

Mein Portfolio

Verwandte Tags