Kategorien durchsuchen
Entdecken
Fiverr Pro
Deutsch
$
USD
Ich werde PySpark- und Databricks-Datenpipelines erstellen
Unternehmensdateningenieur, der automatisierte Pipelines aufbaut und SQL optimiert
Data Engineer | Python | SQL | ETL | Spark Ich erstelle produktionsbereite Datenpipelines, ETL-Workflows und Datenlösungen mit Python, SQL, PySpark, Apache Spark, Airflow, Databricks, Snowflake, Trino...
Über diesen Service
Brauchst du Hilfe bei der Verarbeitung großer Datensätze mit PySpark oder Databricks?
Ich erstelle skalierbare Datenpipelines mit PySpark, Apache Spark und Databricks für Datenumwandlung, Verarbeitung und Analyse.
Ich kann bei folgenden Aufgaben helfen:
- PySpark-Datenumwandlungen und -bereinigungen
- Databricks-Notebooks und Workflows
- ETL/ELT-Pipeline-Entwicklung
- Groß angelegte Datenverarbeitung
- Joins, Aggregationen, Filterung und Duplikatentfernung
- Inkrementelle und Batch-Verarbeitung
- Datenvalidierung und Qualitätskontrollen
- Performance-Optimierung
- Daten in Data Warehouses und Datenbanken laden
Ich lege Wert auf saubere, wartbare und effiziente Pipelines mit klarer Dokumentation.
Kontaktiere mich vor der Bestellung bei komplexen Projekten, damit ich deine Daten und Anforderungen besser verstehe.
Warehouse-Plattform:
Snowflake
•
Azure Synapse
•
Databricks
Projektart:
New Build
Mein Portfolio
Meine weiteren Dienstleistungen im Bereich Datentechnik
FAQ
Automatische Übersetzung
Arbeitest du mit Databricks?
Ja. Ich kann PySpark-Notebooks, Transformationen, ETL-Workflows und Datenverarbeitungs-Pipelines in Databricks erstellen.
Kannst du große Datensätze verarbeiten?
Ja. PySpark ist für verteilte Verarbeitung konzipiert, und ich kann Pipelines für große Datensätze bauen.
Kannst du eine bestehende Spark-Pipeline optimieren?
Ja. Ich kann langsame Jobs untersuchen und Transformationen, Joins, Partitionen und Spark-Workloads optimieren.
Kannst du inkrementelle Pipelines bauen?
Ja. Ich kann inkrementelle/batchbasierte Verarbeitung basierend auf deinen Anforderungen und verfügbaren Daten umsetzen.
Welche Datenquellen kannst du verwenden?
Ich kann mit Dateien, APIs, Datenbanken, Cloud-Speicher und Data Warehouses arbeiten, je nach Projekt.
Kannst du mit Snowflake oder anderen Warehouses arbeiten?
Ja. Ich kann Pipelines bauen, die Daten transformieren und in Plattformen wie Snowflake und andere unterstützte Warehouses laden.
Stellen Sie Unterlagen zur Verfügung?
Ja. Die Dokumentation ist entsprechend dem gewählten Paket enthalten.
Soll ich Sie vor der Bestellung kontaktieren?
Ja, vor allem bei komplexen Projekten. Bitte teile mir deine Datenquellen, erwartete Transformationen, Ziel und ungefähres Datenvolumen mit.
