Wer denkt beim Aufbau einer Datenplattform nicht an ewig lange Projektlaufzeiten, Knebelverträge mit Cloud-Anbietern und horrende Berater-Budgets? Dass es heute auch anders geht, zeigen wir in diesem Vortrag. Wir stellen euch den bei uns selbst genutzten Data Stack vor: dlt und dbt für Datenintegration und -transformation innerhalb eines Duck Lakes. Orchestriert von Dagster. Visualisiert in Superset. Alles betrieben auf einem einzelnen RaspberryPi!
Ein kompletter Data Stack, von der Daten-Integration bis hin zur Visualisierung. Auf Hardware, die in jede Schublade passt, angetrieben durch Open Source Tools, die problemlos auf Enterprise-Niveau skalieren können. So kann ein effizienter Prototyp problemlos zu einer produktionsfähigen Datenplattform heranwachsen.