An Themen wie Data Analytics oder (de-)zentraler Datenhaltung kommt heute kein Unternehmen mehr vorbei. Doch während die globalen Player ihre geradezu Unmengen an Daten kanalisieren und ordnen müssen, haben kleine und mittlere Unternehmen (KMUs) eher eine überschaubare Datenlage. Zu wenig für eine effektive Datenanalyse? Ganz und gar nicht!
Sie erinnern sich doch noch: Data Lakehouse ist ein modernes Datenmanagement, das Kosteneffizienz und Flexibilität (Data Lake) mit strukturierten und schnellen Abfragen (Data Warehouse) vereint. Mit der heute beginnenden Reihe zeigen wir Ihnen, wie schnell und unkompliziert auch Sie Data Lakehouse in Ihrem Unternehmen implementieren können. Den Start macht ein Beispiel mit unserem «Light»-Ansatz. Denn auch ohne eine umfassende Datenbasis lässt sich ganz hervorragend von den Vorteilen eines Data Lakehouse profitieren. Wir zeigen Ihnen wie!
Die meisten Unternehmen arbeiten bereits mit Kassen- oder Transaktionssystemen wie ERP. Deren Analysemöglichkeiten sind in der Regel jedoch sehr begrenzt. Auf der anderen Seite scheuen viele den Einsatz von Analyse-Tools mit hohem Funktionsumfang, wie etwa Power BI, das schnelle Einsichten in Geschäftsprozesse ermöglicht. Denn die Bereitstellung der benötigten Daten kann durchaus herausfordernd sein: Alle Informationen müssen erst gesammelt, gespeichert, aufbereitet und auf ihre Qualität geprüft werden.
Traditionelle Datenbanklösungen können allerdings schnell komplex werden. Sie erfordern spezielle ETL-Ansätze, Skripte, Programmierung und Datenbankspezialisten. Ausserdem müssen moderne Anwendungen zunehmend mit No-SQL Technologien umgehen können: Daten werden nicht mehr nur in Datenbanken gespeichert, sondern auch als Textdateien im JSON-Format und gestreamt.
Von einer modernen Datenplattform kann man heute erwarten, dass sie sowohl strukturierte als auch unstrukturierte Datenformate verarbeitet und das ohne langwierige Prozesse. Denn weder können noch wollen Unternehmen monatelang auf die Beantwortung brennender Fragen warten. Da bietet Data Lakehouse als hybrides Datenmanagement-System die Lösung. Daten lassen sich aus verschiedenen Quellen zusammenführen und aufbereiten – auch schlechte oder unzureichende Datenqualität wird im Zuge dessen bewältigt.
Und das Beste daran: In der Data Lakehouse Light-Version funktioniert die Einrichtung einer modernen Datenarchitektur schnell, unkompliziert und auch ohne grosse Daten-Ressourcen bereits in nur wenigen Wochen.
In einem konkreten Fall bat uns ein Kunde, innerhalb von nur vier Wochen Umsatzberichte aus einem brandneuen Kassensystem zu generieren, das täglich Verkaufstransaktionen aus insgesamt 28 verschiedenen Filialen im JSON-Format erzeugte. Aufgrund der Dringlichkeit bot sich eine «Data Lakehouse Light» Architektur an. Zuerst wurde innerhalb kürzester Zeit ein Data Lake aufgebaut, das die JSON-Dateien im Rohformat aufnahm und so aufbereitete, dass sie in einem logischen Data-Layer abrufbar waren. Anschliessend konnten die Daten in einen Power BI Datamart geladen und für Reporting-Zwecke bereitgestellt werden. Power BI Berichte auf Basis der nun vorliegenden Daten zu erstellen war schliesslich ganz einfach. Das Team konnte dadurch innerhalb kürzester Zeit seine Umsatzstatistiken auf dem neuen Kassensystem aufbauen.
Die traditionelle Medaillen-Architektur (Bronze, Silber, Gold) kam hier nicht zum Einsatz. Stattdessen konnten wir dank Synapse Analytics sehr schnell einen semantischen Layer auf den JSON-Dateien aufbauen. Beim so genannten «Data Lakehouse Light» Ansatz steht eine semantische Sicht auf semi-strukturierten Daten im Vordergrund und man kann diese Daten schnell für Analysezwecke nutzen.
Dieses Praxisbeispiel zeigt ein mögliches Einsatzszenario eines «Data Lakehouse Light». Haben Unternehmen jedoch höhere Anforderungen an die Datenanalyse (z.B. Historisierung der Daten, Time Travel, Master Data Management, Data Mesh etc.), stösst dieser Ansatz bald an seine Grenzen. Um komplexere Projekte umsetzen zu können, ist ein Enterprise-ready Ansatz notwendig, der so genannte «Data Lakehouse Pro». Diesen werden wir in einem der kommenden Blogbeiträge vorstellen.
Wenn Sie selbst unter Anleitung ein Data Lakehouse aufsetzen möchten, empfehlen wir Ihnen unseren Workshop «Creating a Data Lakehouse», den mein Kollege Nicolas Rehder und ich am 22.06.2023 im Rahmen der «IEEE Swiss Conference on Data Science» (SDS2023) in Zürich halten. Weitere Informationen dazu finden Sie hier.
Wer steckt eigentlich hinter Allgeier? Marina verstärkt bei Allgeier seit Juli 2023 das Finanzteam. Im Interview erfahren wir mehr über ihre beruflichen Herausforderungen, worauf es in ihrem Job ankommt und wo man sie in ihrer Freizeit findet.
Ausgestattet mit modernster KI-Technologie, bietet die Plattform eine optimierte Verwaltung und Analyse digitaler Inhalte.
Kann AR die Produktion revolutionieren? Wo liegen mögliche Einsatzfelder und konkrete Vorteile? Im vierten Blog der Smart Maintenance Reihe werfen wir einen Blick in die Zukunft.
Smart Maintenance ist kein Trend, sondern eine Notwendigkeit, um wettbewerbsfähig zu bleiben. Doch welche Phasen durchläuft die Implementierung einer intelligenten Wartung?
Dass Smart Maintenance nicht nur für die Industrie relevant ist, zeigte der Vortrag von Mirko Maurer bei der maintenance Schweiz. Was Resilienz damit zu tun hat, erfahren Sie hier.
KI goes Microsoft 365: Was der intelligente Assistent Copilot kann und wie er die Zusammenarbeit auf neue Beine stellt.
Smarte Technologien, wertvolle Daten und vernetzte Mitarbeiter: Von der Herausforderung Smart Maintenance zu implementieren und wie man sie bewältigt. Alles im aktuellen Blog!
Vernetzt, automatisiert und mit Echtzeit-Daten gespickt – das sind die Kennzeichen von Industrie 4.0. Doch welche Rolle spielt Smart Maintenance dabei konkret? Wie kann es zur Effizienzsteigerung und Kostenreduktion führen – das verraten wir im neuen Blogbeitrag.
Zwischen Flexibilität und Festungsanlage: Wie Unternehmen in der modernen Arbeitswelt Sicherheit gewährleisten können. Ein Expertengespräch mit Christian Dunkel über Secure Workplace.
