Das automatisierte Data Warehouse
Data Vault Generator
In einem Data Warehouse kommen Daten aus unterschiedlichsten Quellen zusammen. Daten, die für ein erfolgreiches Business unverzichtbar sind – die Unternehmen aufgrund ihrer schieren Masse und Heterogenität aber gleichzeitig vor komplexe Herausforderungen stellen. Denn im Laufe der Zeit entstehen immer mehr Abhängigkeiten, insbesondere zwischen Liefersystemen und Datenkonsument:innen. Schon die kleinste Änderung kann gravierende Konsequenzen nach sich ziehen. Aus diesem Grund arbeiten wir mit einer stringenten Modellierungsmethode: Data Vault 2.0. Durch Entkopplung vermeidet sie Abhängigkeiten zwischen verschiedenen Liefersystemen und ist aufgrund ihrer hochgradigen Standardisierung bestens zur Automatisierung geeignet. Mit DVG bieten wir einen komfortablen Data-Warehouse-Builder, der als Browser-Anwendung unseren Kund:innen das Leben enorm erleichtert.
Das Grundprinzip des DVG ist es, komplexe Aufgabenstellungen in möglichst kleine und einfache Schritte zu zerlegen und diese dann automatisiert umzusetzen. Dabei unterstützt der DVG auf ideale Weise agile Vorgehensmodelle, zum Beispiel durch Features wie die automatische technische und fachliche Migration (von Strukturen/Daten) und seine Integrationsfähigkeit in Entwicklungs-Pipelines. So gelingt es, immer größere Datenmengen und eine stetig wachsende Zahl an Prozessen nachhaltig zu beherrschen, Abhängigkeiten zu vermeiden und jedes Datenmodell agil und kostengünstig anzupassen. Der DVG generiert vollständig automatisiert Code, SQL-Skripte, Dokumentationen, Data-Lineage-Informationen und die Prozesssteuerung für den Produktionsbetrieb. Fehleingaben vermeidet der DVG dabei durch implementierte Validierungen.
Für unsere Kund:innen analysieren wir zunächst, welche Datenarchitektur für sie am geeignetsten ist. Eignet sie sich für den DVG, bieten wir das Tool in einer SaaS- oder On-Premise-Variante an. Dann unterstützen wir bei der Integration des DVG in die Systemlandschaft, ergänzen ihn in maßgeschneiderten Modulen und stehen unseren Auftraggeber:innen während des kompletten Projektverlaufs zur Seite.
Nie war es einfacher, ein Data Warehouse zu bauen und flexibel weiterzuentwickeln.
Die Deutsche DataVault User Group hat als herstellerunabhängiger Verein verschiedene Automatisierungstools für DataVault verglichen.
Unter https://dwa-compare.info/produkt/crossnative-2/ findest du technische Details, wie der DVG typische Anforderungen in einem Datenprojekt umsetzt. Es besteht auch die Möglichkeit, den DVG mit anderen Tools direkt zu vergleichen. Dieser direkte Vergleich zeigt, dass der DVG das einzige Tool ist, welches:
- komplett ohne Entwickler auskommt
- wirklich alle Schritte eines Projektes automatisiert und sich nicht nur auf die Erstellung von Code fokussiert
- sehr leichtgewichtig ist und mit minimalen Eingaben auskommt
Hier gibt es noch mehr spannende Infos zum Thema DVG:
- Blogbeitrag: Wie viel Zeit spare ich im Data Warehouse mit Automatisierung?
- Blogbeitrag: "Data Warehouse Kennzahlen von heute auf morgen ändern - Dank Automatisierung mit dem DVG"
- Blogbeitrag: DWH-Änderungen schnell und risikolos produktiv setzen
- Blogbeitrag: "Multienvironmentumgebungen im Data Warehouse"
- Blogbeitrag: Data-Mesh – unterstützt durch eine automatisierte Daten-Plattform
- Blogbeitrag: bitemporale Historie - warum sie so irre wichtig ist!
- Blogbeitrag: DataVault Generator (DVG) - Die Zukunft der DataWarehouse Automatisierung
