Ich repariere und optimiere ETL-Datenpipelines mit airflow oder nifi

Einige Informationen wurden automatisch übersetzt.

Pakistan

Ich spreche Englisch, Urdu, Punjabi, Deutsch

Big-Data-Ingenieur

Senior Data Engineer mit über 7 Jahren Erfahrung beim Aufbau von produktionsreifen Datenpipelines und Lakehouses für Unternehmenskunden. Ich spezialisiere mich auf Apache NiFi, Airflow, Spark ETL und ...

Über diesen Service

Ist deine Datenpipeline unzuverlässig, langsam oder noch gar nicht gebaut? Ich entwerfe und liefere eine produktionsbereite Pipeline, die auf deine Architektur zugeschnitten ist.

Was ich anbiete:

Apache NiFi Pipeline-Design und Deployment (Docker oder Kubernetes)
Airflow DAG-Entwicklung, Planung, Wiederholungen, Alarmierung, Abhängigkeiten
PySpark- und Spark SQL-ETL-Jobs für groß angelegte Datenumwandlung
Ingestion aus REST-APIs, SAP OData, S3/MinIO, Datenbanken und Flachdateien
Maßgeschneiderte NiFi-Processor in Java für komplexe Geschäftslogik

Warum mit mir arbeiten:

Mehr als 7 Jahre echte Unternehmenerfahrung beim Aufbau von Pipelines für deutsche Firmenkunden
Ich habe Pipelines gebaut, die Millionen von Datensätzen in komplexen Multi-Source-Architekturen verarbeiten
Jede Lieferung umfasst Fehlerbehandlung, Logging und Dokumentation, nicht nur funktionierenden Code

Ich mache NICHT: