Ich baue Snowflake-Datenpipelines mit Snowpipe, Streams, Tasks und dynamischen Tabellen auf
Dateningenieur
Über diesen Service
Brauchst du Daten in Snowflake, die sich selbst laden, nur das aktualisieren, was sich geändert hat, und doppelte Zählungen vermeiden? Ich baue Pipelines in Snowflake mit einfachem SQL, sodass keine zusätzlichen Tools bezahlt oder gewartet werden müssen.
Was ich erstelle:
- Ingestion: Stages, Dateiformate und Snowpipe Auto-Ingest von S3, Azure Blob oder Google Cloud Storage
- Change capture: Streams + Tasks mit MERGE Upserts und Duplikatentfernung
- History: SCD Typ 2 Dimensionen für Kunden, Produkte oder Konten
- Reporting-Schicht: Dynamische Tabellen für tägliche und monatliche Märkte
- Datenqualität: Checks auf Nullwerte, Duplikate, verwaiste Keys und Aktualität
- Monitoring: Task-Historie, Fehlerbenachrichtigungen per E-Mail und Kostenkontrolle
So arbeite ich:
- Wir einigen uns auf die Quellen, Tabellen und Aktualisierungszeiten
- Ich erstelle im Dev-Schema und teste mit deinen Beispiel-Daten
- Du überprüfst die Ergebnisse und die Laufhistorie
- Übergabe mit einem Runbook und Diagramm
Du erhältst versionierten SQL-Code, ein Pipeline-Diagramm, Testergebnisse und Dokumentation.
Schon Fivetran, ADF oder SSIS im Einsatz? Ich kann die Daten dort abholen, wo sie landen.
Mein Portfolio
Meine weiteren Dienstleistungen im Bereich Datentechnik
FAQ
Automatische Übersetzung
Warum baut man Pipelines in Snowflake statt in einem anderen Tool?
Snowpipe, Streams, Tasks und Dynamic Tables laufen in deinem Account, also brauchst du keine extra Lizenz oder Server. Sie sind gut geeignet, wenn die Quellen Dateien ablegen können oder die Daten schon in Snowflake sind.
Kannst du direkt von APIs oder Datenbanken laden?
Ja. Für Datenbanken und APIs nutze ich dein bestehendes Tool (ADF, Fivetran, SSIS) oder ein kleines geplantes Script, um Dateien in eine Stage zu laden. Dann übernimmt Snowflake den Rest.
Wie aktuell sind meine Daten?
Snowpipe lädt Dateien in der Regel innerhalb von Minuten nach Ankunft. Tasks können jede Minute laufen, und Dynamic Tables folgen dem von dir gewählten Zielverzug, zum Beispiel 15 Minuten oder 1 Stunde.
Wird das meine Snowflake-Rechnung erhöhen?
Tasks wecken das Warehouse nur, wenn ein Stream neue Daten hat, und ich nutze das kleinste Warehouse, das die Zeitvorgaben erfüllt. Vor dem Go-live bekommst du eine Schätzung der täglichen Credits.
Was passiert, wenn ein Load fehlschlägt?
Fehlgeschlagene Tasks schicken eine E-Mail-Benachrichtigung, der Stream speichert die unprocessed changes, und beim nächsten Lauf werden sie aufgegriffen. Das Runbook erklärt, wie man jeden Schritt überprüft und erneut ausführt.
1 Bewertungen für diesen Service
| (1) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Zusammensetzung der Bewertung
- Kommunikation
- Qualität der Lieferung
- Preis-Leistungs-Verhältnis der Lieferung
Sortieren nach:
A adityapons

Vereinigte Staaten
Laufende Zusammenarbeitdelivered high quality work with strong understanding of business requirements
200 $-400 $
Preis
1 Tag
Dauer
A 
Antwort des Freelancers
Hilfreich?
1 Bewertungen für diesen Service
| (1) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Zusammensetzung der Bewertung
- Kommunikation
- Qualität der Lieferung
- Preis-Leistungs-Verhältnis der Lieferung
Sortieren nach:
A adityapons

Vereinigte Staaten
Laufende Zusammenarbeitdelivered high quality work with strong understanding of business requirements
200 $-400 $
Preis
1 Tag
Dauer
A 
Antwort des Freelancers
Hilfreich?

