Kategorien durchsuchen
Entdecken
Fiverr Pro
Deutsch
$
USD
Ich werde Datenengineering-Lösungen mit Azure erstellen
Web Scraper und Data Engineer
Ich bringe über 4 Jahre professionelle Erfahrung im Bereich Python-Webscraping mit und habe mehr als 300 individuelle Crawler für verschiedenste Websites entwickelt. Ich bin sehr versiert in Scrapy, S...
Level 2
Hat hohe Leistungskriterien erfüllt und verfügt über eine nachgewiesene Erfolgsbilanz bei der Erfüllung von Kundenerwartungen.
Über diesen Service
Suchst du nach einem Dateningenieur, der zuverlässige ETL-Pipelines auf Azure baut? Ich entwerfe und implementiere End-to-End-Datenlösungen mit Azure Data Factory (ADF), Azure Databricks und Medallion Architecture, um deine Daten effizient zu ingestieren, zu transformieren und zu verwalten.
Meine Leistungen:
- Datenaufnahme: APIs, CSV, Excel, Datenbanken, Cloud-Speicher
- Datenumwandlung: Databricks (PySpark/SQL), ADF Data Flows (Filtern, Aggregieren, Auswählen, Abgeleitete Spalte, Zeile ändern, Joins)
- ETL-Pipelines mit Medallion Architecture (Bronze, Silver, Gold)
- ADF-Aktivitäten: Daten kopieren, ForEach, Lookup, Web, Stored Procedures
- Planung & Trigger: Zeitbasiert, speicherbasiert und ereignisgesteuert
Warum ich?
- Fundierte Expertise in ADF & Azure Databricks
- Optimierte, skalierbare ETL-Pipelines
Tools und Plattformen:
Azure Data Factory
•
Andere
Mein Portfolio
FAQ
Automatische Übersetzung
Was benötigen Sie von mir, um zu beginnen?
Ich benötige Zugriff auf dein Azure-Abonnement (oder eine dedizierte Ressourcengruppe), Details zu deinen Datenquellen (APIs, Datenbanken, Dateien usw.) und deine Anforderungen an Transformationen und Speicherung.
Kannst du sowohl einfache als auch komplexe ETL-Pipelines einrichten?
Ja! Ich kann alles von einer grundlegenden ADF-Pipeline mit geplanten Triggern bis hin zu fortgeschrittenen Azure Databricks ETL-Workflows mit Medallion Architecture (Bronze, Silver, Gold) bauen.
Übernimmst du auch Datenumwandlungen?
Absolut. Ich nutze ADF Data Flows (Filtern, Aggregieren, Joins, abgeleitete Spalten, Zeile ändern usw.) und Databricks (PySpark/SQL) für individuelle Transformationen.
Kannst du mit meinen bestehenden Datenbanken oder APIs integrieren?
Ja. Ich kann Daten aus APIs, CSV, Excel, SQL-Datenbanken und Cloud-Speicher in Azure ingestieren und so eine reibungslose Integration mit deinen bestehenden Systemen gewährleisten.
