Ich baue eine ETL-Pipeline auf, bereinige Daten und reiche sie an

Einige Informationen wurden automatisch übersetzt.

China

Ich spreche Chinesisch, Englisch

Data Engineer, ETL, APIs und BI-Automatisierung

Hi, ich bin Jay — ein Data Engineering und Automation Spezialist mit Erfahrung in der Leitung eines Teams von über 15 Data Engineers. Ich unterstütze Unternehmen beim Aufbau skalierbarer Datenlösunge...
Über diesen Service

Was ich machen kann

Ich helfe Unternehmen dabei, ihre Daten-Workflows von der Sammlung bis zum Reporting zu automatisieren, zu organisieren und zu optimieren.


Meine Dienstleistungen umfassen:

SQL-Abfrageentwicklung und -optimierung

Automatisierte Daten-Workflows und Berichtssysteme

Batch-Datenverarbeitung mit skalierbaren Lösungen

Echtzeit-Datenverarbeitung und Streaming-Pipelines

Datenbereinigung, -transformation und -integration

API-Integration und automatisierte Datensynchronisation

Datenbank- und Data Warehouse-Design

Business-Reporting- und Dashboard-Lösungen

Power BI und Tableau Datenvisualisierung

End-to-End-Datenautomatisierungslösungen für Startups und Unternehmen


  • Erfahrung in der Migration von Daten aus Altsystemen (On-Premise) und APIs zu Azure Data Lake, inklusive komplexer Transformationen mit DataBricks (Python und PySpark), sowie der Übertragung der verarbeiteten Daten zu SQL Server / PostgreSQL / Data oder Delta Lake.


  • Erfahrung in der Implementierung skalierbarer, end-to-end optimierter Workflows auf Azure Data Factory / Databricks, um Daten aus verschiedenen Quellen zu extrahieren, zu verarbeiten und zu speichern.

Technologie:

Apache Hadoop

Apache Kafka

Java

Python

Scala

Expertise:

API-Integration

Datenerfassung

Datenextraktion

Mein Portfolio

Meine weiteren Dienstleistungen im Bereich Datenverarbeitung