Ich werde eine Databricks Data-Pipeline mit Delta Lake aufbauen
Data Engineer, Databricks und Fabric zertifiziert, 4 Jahre Erfahrung
Über diesen Service
Brauchst du eine produktionsbereite Databricks-Pipeline, die von einem zertifizierten Ingenieur gebaut wurde?
Databricks Certified Data Engineer Associate mit 4 Jahren Erfahrung, darunter 2 Jahre im UK. Ich baue skalierbare Pipelines nach bewährten Unternehmensstandards.
WAS DU BEKOMMST:
Medallion-Architektur (Bronze-Silber-Gold)
Delta Lake für ACID-Transaktionen
Unity Catalog Governance
Automatisierte Workflows
Datenqualitäts-Tests
Performance-Optimierung
Komplette Dokumentation
TECHNISCHE FÄHIGKEITEN:
- Vollständige Medallion-Pipeline-Implementierung
- Delta Live Tables
- Echtzeit-Streaming mit Spark
- Integration mehrerer Datenquellen
- PySpark-Transformationen
- Fehlerbehandlung und Überwachung
- Deployment auf Azure Databricks
Datenquellen:
CSV, JSON, Parquet, Azure Blob/ADLS, SQL-Datenbanken, REST-APIs, Streaming (Kafka, Event Hubs)
WARUM ICH:
- Databricks & Fabric Zertifizierung
- 4 Jahre Berufserfahrung
- Im UK ausgebildete Unternehmensstandards
- Produktionsqualität
- Support nach der Lieferung
Ich habe mehr als 5 produktionsreife Databricks-Pipelines gebaut, die täglich Millionen von Datensätzen verarbeiten.
Schreib mir vor der Bestellung, um die Anforderungen zu besprechen!
Tools und Plattformen:
Azure Data Factory
•
Andere
Mein Portfolio
Meine weiteren Dienstleistungen im Bereich Datentechnik
FAQ
Automatische Übersetzung
Was muss ich für den Einstieg bereitstellen?
Deine Datenquellen (Dateien, Datenbankzugangsdaten oder API-Details), Geschäftsanforderungen, gewünschte Transformationen und alle spezifischen KPIs, die du verfolgen möchtest. Ich leite dich durch den Rest und entwerfe die Architektur.
Stellst du den Databricks-Code und die Notebooks bereit?
Ja! Du erhältst alle Databricks-Notebooks, Workflow-Konfigurationen und vollständige Dokumentation. Alles gehört dir zur Modifikation und Wartung.
Kannst du mit meiner bestehenden Azure-Infrastruktur arbeiten?
Absolut! Ich kann mit deinen bestehenden Azure-Ressourcen (Storage Accounts, SQL-Datenbanken, Event Hubs usw.) integrieren und die Standards sowie Sicherheitsrichtlinien deiner Organisation einhalten.
Was ist im Unity Catalog Setup enthalten?
Die Konfiguration des Unity Catalog umfasst die Einrichtung des Workspaces, die Erstellung des Metastore, Daten-Governance-Richtlinien, Zugriffskontrollen und Linienverfolgung. Verfügbar in Standard- und Premium-Paketen.
Bieten Sie Support nach der Lieferung an?
Ja! Alle Pakete beinhalten Support nach der Lieferung. Standard umfasst 30 Tage, Premium 60 Tage. Ich stehe bereit, um Fragen zu beantworten und bei kleineren Anpassungen zu helfen.

