Kategorien durchsuchen
Entdecken
Fiverr Pro
Deutsch
$
USD
Ich werde ETL-Datenpipelines mit PySpark und Databricks erstellen
Dateningenieur
Ich bin ein Data & Backend Engineer mit über 5 Jahren Erfahrung beim Aufbau skalierbarer ETL-Pipelines, Cloud-Datenplattformen und robuster Backend-Systeme. Meine Expertise umfasst Python, PySpark, SQ...
Über diesen Service
Hallo, ich bin Arbind Sah, und ich kann dir dabei helfen, skalierbare ETL-Pipelines aufzubauen, Big Data zu verarbeiten oder cloud-basierte Systeme zu optimieren.
Ich spezialisiere mich auf Python, SQL und cloud-native Tools, um Datenintegration, Automatisierung und Analysen für Unternehmen jeder Größe zu vereinfachen.
Wobei ich dir helfen kann:
-ETL- & Data-Pipelines Design und Optimierung von ETL/ELT-Workflows mit PySpark und Databricks für zuverlässige, produktionsreife Datenumwandlung. Lösungen Nutze Redshift, BigQuery, Spark und Databricks, um große Datensätze effizient zu verarbeiten.
-Cloud-Infrastruktur: Infrastruktur auf AWS (EC2, RDS, S3, Lambda) und GCP aufbauen und verwalten, inklusive containerisierter Deployments mit Docker.
-Datenbank-Optimierung & Sicherheit Verbesserung der Abfrageleistung, Implementierung robuster Sicherheitsmaßnahmen und Einhaltung von Branchenstandards.
-Datenmigration & Schema Abgleich Migration und Konsolidierung von Daten über PostgreSQL, MySQL und Cloud-Plattformen, inklusive Umgang mit Typ-Mismatches, Null-Werten und komplexem Schema-Mapping.
Mit starkem Fokus auf Cloud-Computing, Datenautomatisierung und Analytik sorge ich für skalierbare, sichere und leistungsstarke Datenlösungen.
Kontaktiere mich, um deine Daten-Workflows zu optimieren und maximale Effizienz zu erreichen!
Mein Portfolio
FAQ
Automatische Übersetzung
Welche Informationen benötigen Sie von mir, um loslegen zu können?
Idealerweise hast du deine Quelldaten (oder ein Muster), das Zielsystem/das Format und was "Erfolg" bei der Migration oder Pipeline bedeutet. Wenn du dir unsicher bist, schreib mir eine Nachricht und ich helfe dir, den Umfang zu bestimmen.
Kannst du mit unübersichtlichen oder inkonsistenten Daten arbeiten?
Ja — den Umgang mit Nullwerten, Typeninkonsistenzen und uneinheitlichen Formaten gehört zu meinem Kernaufgaben, kein Randfall, den ich meide.
Stellst du Dokumentation mit der gelieferten Pipeline bereit?
Ja, alle Pipelines kommen mit klarer Dokumentation, damit dein Team die Arbeit nach der Lieferung warten und erweitern kann.
Was ist, wenn meine Datenquelle oder mein Ziel nicht in deinen Spezialgebieten gelistet ist?
Schick mir zuerst eine Nachricht mit den Details — ich arbeite hauptsächlich mit PostgreSQL, MySQL, PySpark/Databricks und AWS/GCP, bin aber auch offen für andere Stacks, bevor du bestellst.
Kannst du eine bestehende Pipeline reparieren oder optimieren, anstatt eine neue zu bauen?
Ja — das Debuggen und Optimieren bestehender ETL-Pipelines gehört zu meinen regelmäßigen Aufgaben, nicht nur das Neubauen.
Wie gehen Sie mit großen Datenmengen um?
Ich nutze PySpark und Databricks für verteilte Verarbeitung, damit große Datenmengen effizient verarbeitet werden, anstatt eine einzelne Skript zu überlasten.
Wie lange dauert ein typisches Projekt?
Das hängt vom Datenvolumen und der Komplexität ab — für einen klaren Zeitplan schick mir vor der Bestellung eine Nachricht mit deinen Projekt-Details.
Unterzeichnen Sie NDAs?
Ja, ich bin gerne bereit, eine NDA zu unterschreiben, falls dein Projekt eine erfordert — schick sie einfach rüber, bevor wir starten.
