Zurück zu Projekten

Logistik · Data Engineering

Legacy-Migration zu dbt & Snowflake

Ergebnis

Deutlich bessere Wartbarkeit und Skalierbarkeit. Modernes, nachvollziehbares Setup, das im Team eigenständig weitergetragen werden kann.

dbtSnowflakeTalendAnalytics EngineeringETL Migration

Ausgangslage

Die bestehende Datenverarbeitung lief über Legacy-ETL-Prozesse in Talend – mit wachsenden Problemen bei Wartbarkeit und Skalierbarkeit. Die Weiterentwicklung und Anpassung von Pipelines war langsam, fehleranfällig und zunehmend von Einzelwissen abhängig.

Vorgehen

Ich habe die Backend-Datenverarbeitung mit dbt und Snowflake umgesetzt und die Legacy-ETL-Prozesse von Talend nach dbt migriert. Damit verschiebt sich die Logik von einem schwer wartbaren Tool hin zu einem versionierbaren, testbaren Analytics-Engineering-Setup, das das Team eigenständig besitzen und erweitern kann.

Ergebnis

  • Deutlich bessere Wartbarkeit und Skalierbarkeit der Datenstrecken.
  • Modernes, nachvollziehbares Setup, das im Team weitergetragen werden kann.