Young Stock Trader Shows To The Executive Managers Cryptocurrency And Trade Market Correlation Pointing At The Wall Tv.

Wie initiiert man ein Data Mesh? – Teil 2 – Das Entwicklungsteam und die Datenplattform für das Pilotprojekt zusammenstellen 

April 15, 2024
April 15, 2024
15 April 2024

Die Literatur zum Data Mesh ist zwar umfangreich, beschreibt aber oft einen Endzustand und selten, wie man diesen in der Praxis erreicht. Es stellt sich also die Frage:

Welche Vorgehensweise sollten Sie wählen, um das Datenmanagement zu transformieren und ein Data Mesh einzurichten?

In dieser Artikelreihe finden Sie Auszüge aus unserem Praxisleitfaden Data Mesh, in dem wir ein iteratives Vorgehen für die Einführung eines Data Mesh in Ihrer Organisation vorschlagen. Dieser Ansatz basiert auf seinen vier Schlüsselprinzipien (Domain-oriented Decentralized Data Ownership and Architecture, Data as a Product, Self-serve Data Infrastructure as a Platform und Federated Computational Governance) und stützt sich auf die vorhandenen personellen und technologischen Ressourcen.

Im Laufe dieser Artikelreihe und zur Veranschaulichung dieses iterativen Vorgehens bei der Einrichtung eines Data Mesh werden wir ein Fallbeispiel verwenden: das fiktive Unternehmen Premium Offices – eine Gesellschaft für Gewerbeimmobilien, die Immobilien erwirbt und an Unternehmen vermietet.

Im vorherigen Artikel haben wir uns mit den Voraussetzungen für Ihr Pilotprojekt zur Dezentralisierung der Datenverwaltung befasst: wir haben den Umfang festgelegt, die Domänen identifiziert und einen ersten Anwendungsfall ausgewählt. In diesem Artikel erläutern wir, wie Sie ein Entwicklungsteam und eine Datenplattform zusammenstellen.

Ein Team für die Entwicklung des Pilotprojekts zusammenstellen

 

Zur Erinnerung: Der erste Schritt unseres Vorgehens besteht darin, einen ersten Use Case zu identifizieren, aber vor allem darin, ihn zu entwickeln, indem wir die vier Prinzipien des Data Mesh mit den vorhandenen Ressourcen umsetzen. Dazu muss das Team zur Entwicklung des Pilotprojektes zusammengestellt werden, mit dem das erste Prinzip des Data Mesh, Domain-oriented Decentralized Data Ownership, umgesetzt werden soll.

FALLBEISPIEL PREMIUM OFFICES

Die für das Pilotprojekt benötigten Daten gehören zur Domäne Brokerage, wo somit auch das Team zur Entwicklung des Pilotprojekts gebildet wird. Dieses Team mit Experten aus verschiedenen Disziplinen umfasst:

  • Data Product Owner IconEinen Data Product Owner
  • Der sowohl über gute Fachkenntnisse als auch über eine gute Datenkultur verfügen sollte, um folgende Aufgaben zu übernehmen: Entwurf von Data Products und Verwaltung ihres Lebenszyklus, Festlegung und Durchsetzung ihrer Nutzungsrichtlinien, Gewährleistung ihrer Konformität mit den internen Standards und gesetzlichen Vorschriften, denen sie unterliegen, Messung und Überwachung der wirtschaftlichen Leistung und der Compliance seines Produktportfolios. Die Zusammensetzung dieses Entwicklungsteams unterscheidet sich natürlich je nach Kontext, aber es sollte zwei Anforderungen erfüllen: Es muss einen Data Product Owner geben und alle Kompetenzen in sich vereinen, die für die Entwicklung und Verwaltung seiner Produkte erforderlich sind.
  • Two Engineers IconZwei Engineers
  • Einer aus den Teams der Domäne Brokerage – der das Wissen über die Betriebssysteme und die Softwareentwicklungsmethoden des Bereichs einbringt, und der andere aus dem Datenteam – der sich mit DBT, GCP und BigQuery auskennt.
  • Visualization DevelopperEin Tableau-Entwickler
  • Der das Dashboard designen und aufbauen kann.

Domänen-Tools: Die Datenplattform des Data Mesh

 

Eines der größten Hindernisse für die Dezentralisierung ist das Risiko, dass sich der Aufwand und die Kompetenzen, die für den Betrieb von Pipelines und Infrastrukturen in jeder Domäne erforderlich sind, vervielfachen. Aber auch zu diesem Aspekt gibt es einen soliden Stand der Technik, der von verteilten Architekturen übernommen wurde.

Die Lösung besteht darin, ein Team aufzubauen, das Domänen mit den technologischen Voraussetzungen und Werkzeugen versorgt, die sie benötigen, um die Daten ihrer Domäne zu extrahieren, zu verarbeiten, zu speichern und zu nutzen.

Dieses Modell existiert seit mehreren Jahren für die Anwendungsinfrastruktur und wurde durch Virtualisierung, Containerisierung, Devops-Tools und Cloud-Plattformen zunehmend verallgemeinert und automatisiert. Auch wenn die Tools rund um die Dateninfrastrukturen nicht so ausgereift sind wie die der Softwareinfrastrukturen, insbesondere was die Automatisierung betrifft, können die meisten Lösungen übertragen werden und die Kapazitäten sind bereits in den Unternehmen vorhanden – das ist das Ergebnis vergangener Investitionen. Es spricht also nichts dagegen, ein Dateninfrastruktur-Team einzurichten, seine Roadmap festzulegen und es schrittweise sein Serviceangebot verbessern zu lassen: Vereinfachung und Automatisierung sind die Hauptachsen dieses Fortschritts.

Die drei Ebenen der Data-Mesh-Plattform

 

Die Datenplattform des Data Mesh deckt ein breites Spektrum an Fähigkeiten ab, das größer ist als die Infrastrukturdienste. Diese Plattform ist in drei Ebenen gegliedert:

Data Infrastructure Plane
1. Die Infrastrukturebene (Data infrastructure provisioning plane) – stellt die Dienste auf niedriger Ebene bereit, um die physischen Ressourcen zuzuweisen, die für das Extrahieren, die Verarbeitung, die Speicherung von Big Data, die Verteilung in Echtzeit oder verzögert, die Verschlüsselung, das Caching, die Zugangskontrolle, das Netzwerk, die Co-Location usw. erforderlich sind.
Data Product Developer Experience Plane
2. Die Entwicklungsebene (Data product developer experience plane) – stellt die Tools zur Verfügung, die für die Entwicklung von Data Products erforderlich sind: Deklaration von Datenprodukten, kontinuierlicher Aufbau und Einsatz, Tests, Qualitätskontrollen, Überwachung, Sicherung usw. Die Idee ist, Abstraktionen oberhalb der Infrastruktur bereitzustellen, um deren Komplexität zu verschleiern und die auf Mesh-Ebene angenommenen Konventionen zu automatisieren.
Mesh Supervision Plane
3. Die Überwachungsebene (Data mesh supervision plane) – bietet eine Reihe von übergeordneten Möglichkeiten für die Discovery von Data Products, Lineage, Governance, Compliance, globale Berichterstattung, Policy-Kontrollen usw.
Auf der Infrastrukturebene erfordert das Data Mesh keine neuen Kapazitäten – die überwiegende Mehrheit der Unternehmen verfügt bereits über eine Datenplattform. Außerdem ist für die Einrichtung eines Data Mesh keine zentrale Plattform erforderlich.

Einige Unternehmen haben bereits in eine gemeinsame Plattform investiert, und es erscheint logisch, die Fähigkeiten dieser Plattform für die Entwicklung des Mesh zu nutzen. Andere verfügen hingegen über mehrere Plattformen, wobei bestimmte Einheiten oder Domänen ihre eigene Infrastruktur haben. Es ist durchaus möglich, ein Data Mesh auf diesen hybriden Infrastrukturen einzuführen: Solange die Datenprodukte gemeinsame Standards hinsichtlich der Adressierbarkeit, Interoperabilität und Zugangskontrolle einhalten, ist es unerheblich, wie sie technisch ausgeführt werden.

FALLBEISPIEL PREMIUM OFFICES

Für das Pilotprojekt entschied sich Premium Offices dafür, ein Dashboard über das Kreditrisiko seiner Mieter zu erstellen, um mögliche Ausfälle besser vorhersehen und verhindern zu können. Dieses Dashboard sollte die in seiner Unternehmenssoftware vorhandenen Mieterdaten mit Kreditdaten verbinden, die von einem spezialisierten Anbieter erworben wurden. Diese Daten werden im Prozess der Bewertung eines neuen Mieters bereits auf operativer Ebene verwendet.

Zusammenfassend lässt sich sagen, dass die Einrichtung eines speziellen Entwicklungsteams für den Erfolg Ihres Pilotprojekts zur Dezentralisierung des Data Mesh von entscheidender Bedeutung ist. Wenn sie Menschen mit unterschiedlichen Fähigkeiten und Fachkenntnissen zusammenbringen, können Organisationen die Prinzipien des Data Mesh effektiv umsetzen und nützliche Informationen aus ihren Daten gewinnen. Darüber hinaus rationalisieren die Nutzung bestehender Plattformen und Investitionen in die Automatisierung den Entwicklungsprozess und ebnen so den Weg für Skalierbarkeit und langfristigen Erfolg.

Im nächsten Artikel erfahren Sie, wie Sie Ihr Pilotprojekt durch die Gestaltung und Entwicklung Ihrer ersten Datenprodukte ausführen können.

Praxisleitfaden Data Mesh: Ein unternehmensweites Data Mesh einrichten und überwachen

 

Dieser Leitfaden von Guillaume Bodet, Mitbegründer und CPTO von Zeenea, vermittelt Ihnen einen praktischen Ansatz zur Implementierung eines Data Mesh in Ihrer Organisation und hilft Ihnen:

✅ Ihren Data-Mesh-Ansatz mit einem fokussierten Pilotprojekt zu starten,

✅ effektive Methoden kennenzulernen, um Ihr Data Mesh zu skalieren,

✅ die entscheidende Rolle eines internen Data Marketplaces zu verstehen, um die Nutzung von Datenprodukten zu erleichtern

✅ zu verstehen, was Zeenea als robustes, unternehmensweites Data-Mesh-Monitoring-System auszeichnet.

zeenea logo

At Zeenea, we work hard to create a data fluent world by providing our customers with the tools and services that allow enterprises to be data driven.

zeenea logo

Chez Zeenea, notre objectif est de créer un monde “data fluent” en proposant à nos clients une plateforme et des services permettant aux entreprises de devenir data-driven.

zeenea logo

Das Ziel von Zeenea ist es, unsere Kunden "data-fluent" zu machen, indem wir ihnen eine Plattform und Dienstleistungen bieten, die ihnen datengetriebenes Arbeiten ermöglichen.

Related posts

Articles similaires

Ähnliche Artikel

Be(come) data fluent

Read the latest trends on big data, data cataloging, data governance and more on Zeenea’s data blog.

Join our community by signing up to our newsletter!

Devenez Data Fluent

Découvrez les dernières tendances en matière de big data, data management, de gouvernance des données et plus encore sur le blog de Zeenea.

Rejoignez notre communauté en vous inscrivant à notre newsletter !

Werden Sie Data Fluent

Entdecken Sie die neuesten Trends rund um die Themen Big Data, Datenmanagement, Data Governance und vieles mehr im Zeenea-Blog.

Melden Sie sich zu unserem Newsletter an und werden Sie Teil unserer Community!

Let's get started
Make data meaningful & discoverable for your teams
Learn more >

Los geht’s!

Geben Sie Ihren Daten einen Sinn

Mehr erfahren >

Soc 2 Type 2
Iso 27001
© 2024 Zeenea - All Rights Reserved
Soc 2 Type 2
Iso 27001
© 2024 Zeenea - All Rights Reserved
Démarrez maintenant
Donnez du sens à votre patrimoine de données
En savoir plus
Soc 2 Type 2
Iso 27001
© 2024 Zeenea - Tous droits réservés.