Ich werde AWS Data Engineering Pipelines mit Python, Pyspark, SQL und Glue aufbauen
Leitender Dateningenieur
Über diesen Service
Suchst du einen erfahrenen Data Engineer, der zuverlässige und skalierbare Datenpipelines erstellt?
Ich entwickle und optimiere AWS Data Engineering, ETL/ELT und Datenverarbeitungs-Lösungen mit Python, Pyspark, SQL, AWS Glue, S3, Redshift, Athena und Databricks.
Wobei ich dir helfen kann:
- AWS Glue ETL/ELT Pipelines
- Python & Pyspark Datenumwandlung
- AWS S3 Data Lake Lösungen
- SQL Abfragen und Optimierung
- Amazon Redshift Data Warehouse
- Athena externe Tabellen und Analysen
- Databricks & Delta Lake Pipelines
- API- und Datenbankdatenaufnahme
- Datenbereinigung, -transformation & -validierung
- ETL-Fehlerbehebung und Leistungsoptimierung
- Batch-Datenverarbeitung und inkrementelle Pipelines
Ich konzentriere mich darauf, saubere, skalierbare, wartbare und produktionsbereite Datenlösungen basierend auf deinen Geschäftsanforderungen zu erstellen.
Egal, ob du eine neue Datenpipeline brauchst, eine bestehende Arbeitsweise optimieren möchtest oder Hilfe bei der Fehlerbehebung deines Data Engineering Projekts benötigst – ich kann dir helfen.
Technologien: AWS | Python | Pyspark | SQL | Glue | S3 | Redshift | Athena | Databricks | Delta Lake
Expertise:
CI/CD
•
Monitoring & Logging
•
Automatisierungen
Cloud-Provider:
Amazon Web Services
