Ich baue ETL-Datenpipelines mit Python, SQL, Spark, Azure und Palantir Foundry auf
Data Engineer, Palantir Foundry, Spark, Azure und Python
Über diesen Service
Ich entwerfe, baue und verbessere zuverlässige Datenpipelines für Analysen, Berichte und operative Anwendungsfälle.
Ich kann bei folgendem helfen:
ETL- und ELT-Pipeline-Entwicklung
Transformations mit Python, SQL, Spark und PySpark
Azure- und Databricks-Datenworkflows
Palantir Foundry Pipelines, Datenmodellierung und Ontologie-Arbeiten
API- und dateibasierte Datenaufnahme
Datenvalidierung, -transformation und Qualitätsprüfungen
Pipeline-Debugging und Leistungsoptimierung
Technische Dokumentation und wartbarer Quellcode
Power BI-fähige Datensätze und Reporting-Schichten
Bevor du bestellst, teile bitte das Geschäftsobjektiv, die Quell- und Zielsysteme, Beispielschema oder Daten, erwartetes Volumen und Frequenz, erforderliche Transformationen, Plattformbeschränkungen und Liefererwartungen. Ich werde den Umfang prüfen und das passende Paket empfehlen.
Zugriff auf private Systeme muss über sichere, genehmigte Methoden erfolgen.
Tools und Plattformen:
Azure Data Factory
•
Andere
Mein Portfolio
FAQ
Automatische Übersetzung
Arbeiten Sie mit großen Datensätzen?
Ja. Ich kann Spark- und PySpark-Transformationen für große Datensätze entwerfen. Bitte teile mir das ungefähre Volumen, die Häufigkeit, die Umgebung und die Leistungsanforderungen mit, damit ich den Umfang bestätigen kann.
Kannst du den ETL-Prozess automatisieren?
Ja. Ich kann geplante ETL- oder ELT-Workflows automatisieren, die auf der vereinbarten Plattform basieren, einschließlich Azure Data Factory, Databricks oder Palantir Foundry, wo es passend ist.
Umfasst dieses Gig auch Machine-Learning-Workflows?
Ich kann den Daten-Pipeline um ein ML-Workflow vorbereiten und automatisieren. Modellentwicklung oder MLOps müssen separat geprüft und im Rahmen der Daten, Plattform und Deployment-Bedürfnisse festgelegt werden.
Kannst du Daten für Power BI oder Berichte vorbereiten?
Ja. Ich kann validierte, reporting-fertige Datensätze und Transformationsebenen für Power BI erstellen. Dashboard-Entwicklung kann bei Vereinbarung im Umfang enthalten sein.

