Ich werde dein Databricks-, Azure- und GCP-Dateningenieur

Einige Informationen wurden automatisch übersetzt.

Hamza Amin

Pakistan

Ich spreche Urdu, Englisch

14 Aufträge abgeschlossen

Ein Data Engineer, um komplexe Probleme zu lösen

Data Engineer Hallo, als erfahrener Data Engineer bringe ich eine Menge Erfahrung im Aufbau und der Verbesserung von end-to-end Datenpipelines mit. Mit einem soliden Hintergrund in ETL und Data Wareh...

Über diesen Service

Zuverlässige, skalierbare und cloud-native Datenpipelines | Azure- und Databricks-Spezialist

Hast du Schwierigkeiten, deine Daten zuverlässig zu verschieben, zu transformieren oder zu skalieren? Ich erstelle End-to-End-Datenpipelines in Produktionsqualität, die Ingestion, Transformation, Validierung und Deployment vollständig cloud-native und CI/CD-gesteuert automatisieren.

Ich bringe praktische Erfahrung in PySpark, Spark SQL, Python, SQL, Databricks, Azure und GCP mit, um rohe, unordentliche Daten in saubere, vertrauenswürdige und analysebereite Datensätze umzuwandeln.

Was ich anbiete:

ETL- und ELT-Pipeline-Design (Batch & Streaming)
PySpark- und Spark SQL-basierte Datenumwandlung in großem Maßstab
Databricks-Entwicklung mit Databricks Asset Bundles (DAB) für wiederholbare, versionskontrollierte Deployments
CI/CD-Pipeline-Setup mit Azure DevOps (Build, Release, automatisierte Tests & Deployment)
Sichere Integration mit Service Principals für Authentifizierung über Umgebungen hinweg
Cloud-native Deployment: Azure Data Factory, Azure Data Lake, Azure SQL, Databricks, GCP Dataflow, BigQuery
API-, Datenbank- und Cloud-Speicher-Integrationen
Echtzeit-Streaming-Architektur (Kafka / Event Hubs / Pub-Sub)
End-to-End-DevOps-Praktiken: Versionskontrolle, Umgebungsförderung