Ich werde ETL-Datenpipelines auf AWS oder Azure mit Pyspark erstellen und optimieren

Einige Informationen wurden automatisch übersetzt.

Indien

Ich spreche Englisch, Russisch, Französisch, Deutsch

AWS- und Azure-Data-Engineer für Pyspark, ETL und Datenpipelines

Data Engineer mit fast 5 Jahren Erfahrung im Aufbau von Produktionspipelines auf AWS und Azure, aktuell bei einem SEBI-regulierten Fintech. AWS Certified Data Engineer - Associate. Ich erstelle und r...
Über diesen Service

Brauchst du zuverlässige Datenpipelines, ohne einen Vollzeit-Ingenieur einstellen zu müssen?


Ich bin Data Engineer mit fast 5 Jahren Erfahrung auf AWS und Azure, aktuell in einem regulierten Fintech. AWS Certified Data Engineer - Associate.


Was ich für dich tun kann:

  • ETL/ELT-Pipelines mit PySpark, Python und SQL bauen
  • - AWS: Glue, Lambda, S3, Redshift, Athena
  • - Azure: Data Factory, Synapse, Databricks, plus Snowflake
  • - Daten von Altsystemen oder Dateien in ein Cloud-Warehouse migrieren
  • - Langsame Abfragen und Pipelines beschleunigen (ich habe 30-40% Leistungssteigerung erreicht)
  • - Datenqualitätsprüfungen hinzufügen, damit schlechte Daten nie in deine Berichte gelangen
  • - Orchestrieren mit Airflow oder ADF

So arbeiten wir: Du teilst Zugriff oder Beispiel-Daten, ich sende einen kurzen Plan, baue es und übergebe funktionierenden Code plus Dokumentation.


Bitte schreibe mir vor der Bestellung, damit ich den Umfang bestätigen kann.

Zielplattform:

Snowflake

•

Amazon Redshift

•

Azure Synapse Analytics

Tools und Plattformen:

Azure Data Factory

•

Andere