Ich baue und optimiere ETL-Pipelines mit Azure Data Factory und Databricks

Einige Informationen wurden automatisch übersetzt.
Carlos R

Portugal

Ich spreche Portugiesisch, Englisch
Entwickelte ADF-Pipelines zur Optimierung der Datenverarbeitung. Transformierte Daten mit Databricks/Snowflake unter Verwendung von SQL & Python. Gewährleistete Datenintegrität in Power BI und führte ...
Mehr lesen
Über diesen Service

Beschreibung:

Ich erstelle und implementiere eine einfache ETL-Pipeline, um Daten mit Azure Data Factory oder Databricks zu extrahieren, zu transformieren und zu laden. Dazu gehört die Verbindung zu einer Datenquelle, einfache Transformationen und das Laden der Daten in ein Ziel (z.B. SQL-Datenbank, CSV oder Snowflake).

Was enthalten ist:

  • Einrichtung einer ETL-Pipeline
  • Quell-zu-Ziel-Mapping
  • Einfache Datenumwandlung (Filtern, Spalten umbenennen usw.)
  • Laden in ein Ziel
  • Dokumentation des Prozesses


Ich gehe davon aus, dass du bereits eine Azure/Databricks-Infrastruktur hast.

Mehr lesen
build and optimize etl pipelines using azure data factory and databricks
Vollbild
build and optimize etl pipelines using azure data factory and databricks

Sprache:

Englisch

•

Portugiesisch

Technische Expertise:

Databricks

•

Snowflake

+3 mehr

Expertise:

Datenpipelines

•

ETL-Entwicklung

•

Data-Warehousing

+1 mehr

Industrie:

Andere

Verwandte Tags