Ich werde Daten-Engineering-Pipelines für Big Data Projekte aufbauen
Leitender Dateningenieur
Über diesen Service
Stelle zuverlässige, skalierbare und cloud-fähige Datenpipelines mit einem Daten-Engineering-Profi mit über 10 Jahren Erfahrung her.
Ich spezialisiere mich auf die Entwicklung von End-to-End ETL- und ELT-Pipelines, die Datenaufnahme, Transformation, Validierung und Laden in Cloud- und On-Premises-Umgebungen automatisieren.
Meine Dienstleistungen umfassen:
- ETL/ELT-Pipeline-Entwicklung
- Batch- und inkrementelle Datenverarbeitung
- API-, Datenbank- und Dateiintegration
- Datenbereinigung und Transformation
- Datenqualitätsprüfungen und Validierung
- Data Lake- und Data Warehouse-Integration
- Pipeline-Orchestrierung, Logging und Fehlerbehandlung
- Cloud-Migration und Architekturdesign
Technologien: Python, SQL, Pyspark, GraphDB (Neo4j), Databricks, Azure Data Factory, Azure Data Lake Storage, AWS Glue, Amazon S3, BigQuery und relationale Datenbanken.
Ich liefere saubere, wartbare und gut dokumentierte Lösungen, die auf deine Projektanforderungen zugeschnitten sind.
Bitte kontaktiere mich, bevor du bestellst, damit ich deine Datenquellen, Anforderungen und Projektkomplexität verstehen kann.
Tools und Plattformen:
Azure Data Factory
FAQ
Automatische Übersetzung
Welche Informationen benötigen Sie, um zu beginnen?
Bitte teile deine Datenquellen, Zielsystem, Beispiel-Daten oder Schema, Transformationsanforderungen, bevorzugte Technologie und erwartetes Ergebnis mit.
Welche Arten von Datenquellen unterstützt du?
Ich arbeite mit Datenbanken, REST-APIs, CSV, JSON, Excel, Cloud-Speicher sowie strukturierten oder semi-strukturierten Daten.
Mit welchen Technologien und Cloud-Plattformen kannst du arbeiten?
Ich arbeite mit Python, SQL, Pyspark, Databricks, Azure Data Factory, Azure Data Lake, AWS Glue, Amazon S3, BigQuery und relationalen Datenbanken.
Kannst du inkrementelle oder Echtzeit-Pipelines bauen?
Ja. Ich kann Batch-, Inkremental- und Echtzeit-Pipelines entwickeln, basierend auf deinem Datenvolumen, den Geschäftsanforderungen und dem Technologiestack.
Soll ich Sie kontaktieren, bevor Sie eine Bestellung aufgeben?
Ja. Bitte kontaktiere mich vor der Bestellung, damit ich den Umfang, die Komplexität, das Datenvolumen, die erforderlichen Integrationen und den Lieferzeitraum deines Projekts prüfen kann.
