Ich erstelle Pyspark-ETL-Pipelines für Batch- und Streaming-Daten auf AWS

Einige Informationen wurden automatisch übersetzt.

Pakistan

Ich spreche Urdu, Englisch

1 Auftrag abgeschlossen

Dateningenieur für PySpark, AWS und QuickSight

Ich bin Muhammad Zeeshan, Data Engineer und arbeite Vollzeit an AWS-Dataplattformen. Ich erstelle PySpark ETL-Pipelines (Batch und Streaming) auf Amazon EMR, richte S3-Datenlakes ein und verwandle die...
Über diesen Service

Braucht du einen zuverlässigen PySpark-Job oder eine komplette ETL-Pipeline? Ich bin Vollzeit-Dateningenieur, und das Erstellen von Batch- und Streaming-Pipelines mit PySpark auf AWS ist mein Alltag.


Was ich für dich tun kann:

- PySpark ETL-Jobs schreiben: Ingest, Bereinigung, Transformation, Laden

- Große Datensätze in Batch auf Amazon EMR verarbeiten

- Streaming-Jobs für Echtzeitdaten bauen

- Deine Jobs mit Apache Hive und Apache Hudi integrieren

- Einen Data Lake auf Amazon S3 einrichten oder organisieren

- Bestehenden PySpark-Code optimieren oder debuggen


Was du bekommst:

- Sauberer, kommentierter Code

- Kurze Hinweise, wie man es ausführt und plant

- Antworten in der Regel innerhalb einer Stunde


So funktioniert's:

1. Schick mir deine Datenquelle, dein Ziel und die Transformation, die du brauchst

2. Ich bestätige Umfang, Preis und Zeitrahmen

3. Ich liefere den Code und passe ihn basierend auf deinem Feedback an


Bitte schreib mir vor der Bestellung, damit wir zuerst den Umfang festlegen können.

Expertise:

Big Data

•

Datenmanipulation

•

etl

•

Transformation

•

SQL

•

NoSQL

Technologie:

Apache Hadoop

•

Apache-Funken

•

Excel

•

Python

•

SQL

•

NoSQL