Ich habe Erfahrung in der Datenmigration von beliebigen relationalen oder nicht-relationalen (Datei-basierten, CSV) Datenquellen zu relationalen Datenbanken wie SQL Server oder Oracle. Ich habe Live-Daten sowohl im medizinischen Bereich (USA) als auch im Leasingbereich (Nissan Mexiko, Toyota Leasing Thailand) migriert.
Im Fall des Leasingbereichs habe ich etwa 8 GB Daten migriert, was etwa 10 Jahren entspricht.
Ich werde die folgenden Schritte bei der Durchführung deiner ETL-Operationen verwenden.
1. Analyse des Quell- und Ziel-Datenbankschemas.
2. Feldzuordnung.
3. Identifikation der Geschäftsregeln.
4. Erstellung der Staging-Datenbank.
5. Erstellung der Migrationsroutinen mit SQL-Skripten.
6. Datenbereinigung.
7. Erstellung der Ziel-Datenbank ohne Constraints.
8. Ausführung der Routinen.
9. Aktivierung der Constraints.
10. Überprüfung der migrierten Daten mit den Quelldaten anhand von Verifizierungsberichten.