Diese Dienstleistung ist vorübergehend nicht verfügbar
Ich werde deine Nextgen Big Data Services skalieren
Großbritannien
5 Aufträge abgeschlossen
Über diesen Service
Willkommen in der Welt der Data Lakes! Ich bin Ali Reza und helfe dir dabei, deine Data Lake Infrastruktur zu entwerfen, aufzubauen und zu verwalten. Ob HDFS, AWS S3 oder Azure Data Lake Storage, ich bin für dich da.
Ich arbeite als Big Data Systemanalyst und kenne die Probleme, mit denen Kunden beim Einsatz von HDFS, AWS S3 oder Azure Data Lake für ihre CI/CD-Pipelines konfrontiert sind. Das ETL von Streams ist rechenintensiv und in Bezug auf Effizienz und Laufzeit bei der Erfassung, Transformation und Laden in verteilten Systemen wie IoT-Geräten auf API schwieriger. Fehlfunktionen können auftreten, insbesondere bei gleichzeitiger Redundanz im Heap-Speicher bei Testarten. Ich bin versiert im Umgang mit folgenden Technologien/Tools:
1. Apache Spark
2. Apache Flink
3. Apache Kafka
4. PyFlink
5. PySpark
6. Data Warehousing
7. Hive und verwandte Sprachen
8. Hadoop Engineering
9. HDFS und andere Dateisysteme für Big Data
10. Github-Containerisierung durch Pushen von Container-Images zu Docker Hub
11. Umgang mit verschiedenen Dateiformaten wie JSON, CSV, Textdateien, Sequence Files usw. oder anderen unbekannten Schemen

