Microsoft Fabric wurde erstmals im Mai 2023 auf der Microsoft Build Konferenz vorgestellt und ist eine umfassende Daten- und Analyseplattform. Die Plattform ermöglicht das einheitliche Speichern, Verwalten und Arbeiten an und mit Daten, gewährleistet dabei hohe Governance-Standards und vereinfacht die Datenverwaltung durch das Delta Format. In diesem Artikel geben wir Ihnen eine Einführung in Microsoft Fabric mit dem Fokus auf die Funktion, Vorteile und Anwendungsmöglichkeiten.
Lassen Sie uns starten!
Was ist Microsoft Fabric?
Microsoft Fabric ist eine leistungsstarke Software-as-a-Service (SaaS)-Plattform, die eine Vielzahl von Azure-Datendiensten integriert und eine einheitliche Umgebung für die Integration, Verarbeitung, Analyse und Visualisierung von Daten bietet.
Sie kombiniert die Funktionen von
- Data Factory,
- Synapse,
- und Power BI
und bietet somit eine umfassende Lösung für Datenmanagement und -analyse.
Die All-in-One Lösung deckt die Bereiche
- Datenintegration
- Data Engineering,
- Business Intelligence,
- Data Science
- und Real-Time Analytics ab.
Sehen wir uns nun die verschiedenen Komponenten von Fabric an.
Die einzelnen Kompontenten von Microsoft Fabric
Fabric vereint als System-as-a-Service Lösung verschiedene Dienste, die in der Azure Cloud zu einer einheitlichen Plattform für Analysen zusammengestellt wurden. Dabei handelt es sich um die Hauptkomponenten:
- Azure Data Factory (für die Datenintegration)
- Azure Synapse Analytics (zur Datenverarbeitung und -bereitstellung)
- Power BI (zur Vereinheitlichung des Tools für das gesamte Unternehmen)
Der wichtigste Bestandteil der Plattform ist der oben schon angeführte OneLake. OneLake ist eine zentrale Datenplattform, die von Microsoft als Teil der Fabric-Umgebung entwickelt wurde. Das Verschieben und Kopieren von Daten ist damit idealerweise überflüssig, da alle Teams Zugriff auf den OneLake haben und dort im sogenannten Delta Parquet-Format mit den Daten arbeiten können. Dadurch können schneller Erkenntnisse aus den Daten gewonnen werden. Fehler in der Datenverarbeitung werden minimiert.
Der OneLake wird automatisch bei der Installation des SaaS-Systems angelegt und dient als zentraler Speicherort für alle Daten. Sie benötigen keine Datensilos mehr, da alle Dateiformate in OneLake geladen werden können – es dient somit als Data Lakehouse. Damit Sie alle bisher verwendeten Tools weiterhin nutzen können, speichert Fabric die Daten automatisch im Delta/Parquet Format im OneLake. Mit Shortcuts können Sie zudem Daten außerhalb der Cloud virtuell bereitstellen. Zudem ist Fabric direkt mit Microsoft Purview verbunden – ein Zusammenschluss aus Datengovernance-, Risiko- und Complance-Lösungen.
Insgesamt stellt Microsoft Factory 7 Werkzeuge zur Verfügung, wie in der folgenden Grafik abgebildet:
Die Kombination der 7 Werkzeuge hilft Ihnen bei der Analyse, Transformation und Verarbeitung aller relevanten unternehmensinternen Daten. Jedes Werkzeug hat eine bestimmte Analysefunktion die an Aufgaben einzelner Persona orientiert sind. In der folgenden Tabelle stellen wir Ihnen die Komponenten kurz vor.
| Komponente | Funktion |
| Power BI | Verbindungen zwischen Datenquellen herstellen und wichtige Punkte visualisieren |
| Data Factory | Erfassen, Vorbereiten und Transformieren von Daten |
| Data Activator | No-Code-Tool, das Aktionen wie E-Mail-Benachrichtigungen und Power Automate-Workflows basierend auf erkannten Mustern oder Bedingungen in sich ändernden Daten startet |
| Synapse Data Warehousing | Spark-Plattform für die Erstellung, Verwaltung und Optimierung von Infrastrukturen zur Sammlung, Speicherung, Verarbeitung und Analyse großer Datenmengen |
| Synapse Data Science | Erstellung, Bereitstellung und Implementierung von Machine-Learning-Modellen. Integriert Azure Machine Learning für Experimentnachverfolgung und Modellregistrierung |
| Synapse Data Engineering | SQL-Leistung und Skalierung, trennt Compute und Speicher für unabhängige Skalierung und speichert Daten nativ im offenen Delta Lake-Format |
| Synapse Real-Time Analytics | End-to-End-Lösung für ereignisgesteuerte Szenarien, die Streamingdaten und Protokolle verarbeitet. Ermöglicht Echtzeitanalyse und -visualisierung von Daten durch Datenerfassung, Transformation, Speicherung, Analyse und KI. Echtzeit-Hub bietet No-Code-Connectors, die in verwalteten und geschützten Datenkatalog integriert sind |
Diese Komponenten arbeiten nahtlos zusammen und ermöglichen das interaktive Arbeiten verschiedener Datenteams an einem einzigen Ort. Sehen wir uns nun an, welche Vorteile sich daraus ergeben.
Was sind die Vorteile von Fabric?
Microsoft Fabric bietet Data Teams eine Plattform, auf welcher interaktives und produktives Arbeiten auf einem hohen Sicherheitsstandard möglich ist.
Der Zusammenschluss verschiedener Workspaces in Kombination mit dem OneLake als zentralen Ort für die Datenverwaltung, vereinfacht das Teamübergreifende Arbeiten mit und an Daten.
OneLake eliminiert Datensilos und vereinfacht die Datenfreigabe innerhalb von Organisationen. Die Plattform ist mit den neusten Sicherheits- und Compliance-Maßnahmen ausgestattet, einschließlich Identitäts- und Zugriffsmanagement, Datenverschlüsselung und Compliance Management, so dass sensible Daten bedenkenlos behandelt werden.
Fabric integriert sich zudem nahtlos mit anderen Microsoft-Produkten wie Azure, Office 365 und Power BI, wodurch Arbeitsabläufe optimiert und die Produktivität gesteigert werden. Es benötigt keine SQL Warehouses, denn Daten können direkt von PowerBI abgefragt werden. Die Datenverwaltung folgt zudem serverlos und der integrierte Co-Pilot erleichtert das Coden durch verwenden und verarbeiten natürlicher Sprache.
In der Tabelle fassen wir ein paar Vorteile nach der jeweiligen Komponente zusammen.
| Komponente | Funktion |
| Datenintegration und -transformation | Integration und Transformation von Daten aus verschiedenen Quellen und Automatisierung von Datenpipelines |
| Data Engineering | Tools zur Verwaltung und Verarbeitung großer Datenmengen und Unterstützung von ETL-Prozessen für eine nahtlose Datenverarbeitung |
| Data Science | Funktionen für Maschinelles Lernen und Datenanalysen und ermöglicht das Erstellen und Verwalten von Machine-Learning-Modellen zur Optimierung von Geschäftsprozessen |
| Echtzeitanalysen | Datenströme in Echtzeit überwachen und analysieren mit schnellen Reaktionszeiten |
| Reporting und Visualisierung | Power BI zur Erstellung interaktiver Berichte und Dashboards und Visualisierung von Daten |
Neben den Vorteilen aufgrund der technischen Möglichkeiten bietet die Plattform eine einfache Benutzeroberfläche. Die verschiedenen Anwendungsbereiche können wir einfach im Dashboard auswählen und so zwischen Funktionen wechseln.
Neben vielen Vorteilen wollen wir uns nun ein paar Schwächen von Fabric ansehen.
Schwächen von Microsoft Fabric
Microsoft bietet mit der Fabric-Plattform viele Vorteile, aber wie fast jedes gute System bleibt auch dieses nicht von einigen Kinderkrankheiten verschont.
Berechtigungen und Governance:
Berechtigungen werden derzeit in jeder Datenverarbeitungsschicht separat verwaltet. Die geplante Vereinheitlichung mit OneSecurity wird voraussichtlich erst im ersten Quartal 2025 verfügbar sein, und die Integration mit Microsoft Purview ist aktuell noch begrenzt. Dies bedeutet, dass die Data-Governance auf Unternehmensebene nicht vollständig zentralisiert ist und zusätzliche Komplexität in der Verwaltung der Zugriffsrechte entstehen kann. Hier ist Databricks mit seinem Unity Catalog weiter und führt den Lakehouse Markt klar an.
Compute und Storage Abhängigkeit:
OneLake erfordert eine aktive Fabric-Kapazität für den Datenzugriff. Dies bedeutet, dass Compute und Storage gekoppelt sind, was zu Einschränkungen bei der Flexibilität führen kann. Unternehmen müssen sicherstellen, dass sie stets über ausreichende Compute-Ressourcen verfügen, um auf ihre gespeicherten Daten zugreifen zu können.
Migration von Synapse:
Obwohl Synapse noch nicht veraltet ist, sind Kunden besorgt über die langfristige Unterstützung und die Migrationsmöglichkeiten zu Microsoft Fabric. Derzeit gibt es nur begrenzte Optionen für die Migration von Synapse zu Fabric, was Unternehmen zögern lässt, Synapse weiterhin zu verwenden oder auf Fabric umzusteigen.
Unsere Einschätzung zu Fabric:
Eine gute Plattform für einfache Datenintegration und Unternehmen die bereits auf Microsoft PowerBi sind. Allerdings sind viele wichtige Features noch nicht soweit entwickelt (z.B. OneSecurity) und es fehlt an Marktreife. Durch die direkte Anbindung zu PowerBI und den Co-Pilot müssen nicht erst SQL Codes geschrieben werden, um Daten zu verarbeiten und es werden keine Vorkenntnisse im Programmieren verlangt, da Befehle in natürlicher Sprache geschrieben werden können. Allerdings laufen viele Prozesse – der Einfachheit halber – im Hintergrund ab, was weniger Anpassungsmöglichkeiten für erfahrene Datenteams ermöglicht.
Was ist neu bei Microsoft Fabric?
Auf der diesjährigen Microsoft Build Konferenz (21. – 23. Mai 2024) wurden unter dem Motto „How will AI shape your future?“ neue Features von Fabric angekündigt.
Unter anderem ist nun das Lesen und Schreiben mit Iceberg in Fabric möglich, damit die Datenverarbeitung und -speicherung noch effizienter wird. Dadurch können wir auch mit Snowflake auf die Iceberg-Tabellen in OneLake zugreifen, was die Interoperabilität zwischen den Plattformen erhöht.
Eine weitere Neuerung: Die Echtzeit-Intelligenz.
Real-time-Intelligence vereint drei verschiedene Echtzeit-Tools in einer einzelnen Oberfläche:
- Fabric Data Streams: UI-basierte Datenaufnahme
- KQL Queryset: Abfragen und Transformieren von Streaming-Daten
- Data Activator: Alarmierung und Benachrichtigungen
Außerdem wurde die Integration vom Unity Catalog in OneLake angekündigt, um bestehende Herausforderungen mit der Data-Governance zu lösen. Daten sollen dadurch nahtlos zwischen dem Unity Catalog und dem OneLake synchronisiert werden.
Empfohlene Integrationsmuster beinhalten:
- Veröffentlichung in Power BI
- Öffnen in Power BI Desktop
- Nutzung von DFG2 für kleinere Workloads: Geeignet für weniger umfangreiche Datenverarbeitungen
Die Neuerungen zielen darauf ab, die Datenverarbeitungs- und Analysefähigkeiten von Microsoft Fabric zu erweitern und gleichzeitig die Interoperabilität und Benutzerfreundlichkeit zu verbessern.
Sehen wir uns nun an, wie Sie Microsoft Fabric verwenden können.
Anwendungsfälle für Microsoft Fabric
Aufgrund der Vielzahl von Werkzeugen und Funktionen, die in OneLake genutzt werden können, sind die Anwendungsfälle rund um den Einsatz von Microsoft Fabric im Bereich des Datenmanagements vielfältig. Im Kern ist das SaaS-System eine Plattform mit integriertem Data Lakehouse, in welcher Datenteams problemlos gemeinsam an Datenprodukten arbeiten können.
Stellen Sie sich die Verwendung der Plattform wie folgt vor:
Ein fiktives B2C-Handelsunternehmen hat 100.000 Kunden, die beim Einkaufen täglich mehrere GB an Daten erzeugen. Es wird angestrebt, diese Daten zu nutzen, um die
- Prozesse zu optimieren
- Kundenzufriedenheit zu steigern
- Und Kampagnen kundenorientiert auszurichten.
Das Handelsunternehmen hat insgesamt 4 Teams, die sich um die Datenverarbeitung, -analyse, -verwaltung, und –speicherung kümmern:
- Customer Success Team
- IT-Spezialisten
- Data Engineering Team
- Data Science Team
Ziel der Teams ist es nun, aus der Produktbewertung, die Kunde A über den Kanal “Website” erhalten hat, Erkenntnisse zu gewinnen.
Sehen wir uns die Datenverarbeitung OHNE die Verwendung von Microsoft Fabric an:
Schritt 1: Die produzierten Daten von Kunde A werden zunächst vom Customer Success Team als Feedback im ursprünglichen Textformat in Azure SQL gespeichert.
Schritt 2: Die Daten werden automatisch durch die bereits erstellten Pipelines des Data Engineering Teams kopiert und in den Data Lake gespeichert. Dort transformiert das Team die Textdatei in ein – für Machine-Learning lesbares – Tabellenformat und stellt es für das Data Science Team zur Verfügung.
Schritt 3: Die Daten von Kunde A werden dann vom Data Science Team aus dem Data Lake abgezogen und bearbeitet, damit Erkenntnisse z.B. über das vorliegende Sentiment gewonnen werden können.
Schritt 4: Zum Schluss erstellt das IT-Team einen Power BI-Bericht, in dem die interpretierten Ergebnisse aus dem Feedback von Kunde A enthalten sind.
Dabei werden die Daten in mehreren Quellen gespeichert, verschoben, kopiert und neu formatiert. Die Bearbeitung der Daten ist zeitaufwändig und fehleranfällig. Darüber hinaus müssen Berechtigungen zwischen den verschiedenen Teams vergeben werden, was zu endlosen Feedbackschleifen führt. Stellen wir uns nun dieses Szenario mit Tausenden von Daten vor, die täglich bei 100.000 Kunden anfallen. Man bräuchte fast eine weitere Vollzeitkraft, die nur für das Datenmanagement zwischen den Teams zuständig wäre.
MIT Microsoft Fabric sieht dieselbe Situation wie folgt aus:
Data Scientists, Customer Analysts und Data Engineers verfügen über verschiedene Tools und Sprachen aber sie arbeiten alle mit einem einheitlichen Datenformat (Delta) an einem einzigen Ort (OneLake) auf der Plattform Fabric.
Die eingehenden Daten von Kunde A werden in einem Zug gespeichert, relevanten Personen zugeteilt und verarbeitet. Innerhalb kürzester Zeit kann das Feedback von Kunde A in einem Dashboard übersichtlich eingesehen werden (i.e. End-to-End Integration mit PowerBi).
Schritt-für-Schritt: Mit Microsoft Fabric starten
Um mit Microsoft Fabric zu starten, empfehlen wir Ihnen folgende Schritte:
1. Registrierung und Kontoerstellung
- Besuchen Sie die Microsoft Fabric Webseite und registrieren Sie sich für ein Konto.
- Hinweis: Falls Sie bereits ein Konto bei einem anderen Microsoft-Dienst haben, können Sie dieses möglicherweise auch für Microsoft Fabric verwenden.
2. Einrichtung Ihrer Umgebung
- Nach der Registrierung melden Sie sich bei Microsoft Fabric an und richten Ihre Umgebung ein.
- Hinweis: Stellen Sie sicher, dass Sie die erforderlichen Berechtigungen und Lizenzen haben, um alle Funktionen von Microsoft Fabric zu nutzen.
3. Erste Datenintegration
- Beginnen Sie mit der Integration Ihrer Datenquellen. Nutzen Sie dazu die Datenintegrationstools, die in Microsoft Fabric integriert sind
- Tools: Verwenden Sie Data Factory, um Datenpipelines zu erstellen und Daten aus verschiedenen Quellen zu integrieren.
- Hilfreiche Ressource: Data Integration in Microsoft Fabric
4. Datenverarbeitung und -transformation
- Verarbeiten und transformieren Sie Ihre Daten, um sie für die Analyse vorzubereiten.
- Werkzeuge: Nutzen Sie Data Engineering Tools wie Synapse Analytics, um ETL-Prozesse zu implementieren.
- Hilfreiche Ressource: Data Processing in Microsoft Fabric
5. Datenanalyse und Machine Learning
- Analysieren Sie Ihre Daten und implementieren Sie Machine Learning-Modelle.
- Werkzeuge: Verwenden Sie die Data Science Funktionen von Microsoft Fabric, um Machine Learning-Modelle zu erstellen und zu verwalten.
- Hilfreiche Ressource: Machine Learning in Microsoft Fabric
6. Echtzeitanalysen und -aktionen
- Implementieren Sie Echtzeitanalysen, um Datenströme in Echtzeit zu überwachen und zu analysieren.
- Werkzeuge: Nutzen Sie die Echtzeitanalysefunktionen von Microsoft Fabric, um schnelle Entscheidungen basierend auf aktuellen Daten zu treffen.
- Hilfreiche Ressource: Real-Time Analytics in Microsoft Fabric
7. Erstellung von Berichten und Dashboards
- Erstellen Sie interaktive Berichte und Dashboards, um Ihre Daten zu visualisieren und Erkenntnisse zu teilen.
- Werkzeuge: Verwenden Sie PowerBI, um ansprechende und interaktive Visualisierungen zu erstellen.
- Hilfreiche Ressource: Reporting and Visualization in Microsoft Fabric
8. Nutzung von No-Code-Connectors
- Verwenden Sie No-Code-Connectors, um Datenquellen schnell und einfach zu integrieren.
- Werkzeuge: Nutzen Sie den Echtzeit-Hub in Echtzeitintelligenz, um auf eine Vielzahl von No-Code-Connectors zuzugreifen.
- Hilfreiche Ressource: No-Code Connectors in Microsoft Fabric
9. Schulung und Weiterbildung
- Nutzen Sie die umfangreichen Schulungsressourcen und Tutorials, die von Microsoft bereitgestellt werden, um Ihre Fähigkeiten zu erweitern und das Beste aus Microsoft Fabric herauszuholen.
- Hilfreiche Ressourcen: Microsoft Fabric Lernmodule und Microsoft Fabric Community
10. Pilotprojekte und Skalierung
- Starten Sie mit kleineren Pilotprojekten, um die Plattform und ihre Funktionen kennenzulernen. Skalieren Sie dann nach Bedarf, um größere und komplexere Projekte zu realisieren.
- Hilfreiche Ressource: Microsoft Fabric Pilot Projects
Ihnen sollte nun nichts mehr im Wege stehen und Sie können mit Microsoft Fabric starten.
Fazit
Microsoft Fabric ist eine SaaS-Plattform, die verschiedene Azure-Datendienste integriert, um eine einheitliche Umgebung für Datenintegration, -verarbeitung, -analyse und -visualisierung zu bieten. Zu den Hauptkomponenten gehören Datenintegration und -transformation, Data Engineering, Data Science, Echtzeitanalysen sowie Reporting und Visualisierung.
Die Plattform fördert die Zusammenarbeit, ermöglicht Self-Service-Datenmanagement und unterstützt schnelle Wertschöpfung aus Daten. Unternehmen können sie nutzen, um fundierte Entscheidungen zu treffen, Echtzeitanalysen durchzuführen und Machine Learning-Modelle zu implementieren.
Benötigen Sie weitere Tipps oder sind Sie an der Umsetzung intelligenter Lösungen für Ihr Business interessiert? Dann kontaktieren Sie uns.
FAQ
Microsoft Fabric ist eine umfassende Software-as-a-Service (SaaS) Plattform, die verschiedene Azure-Datendienste wie Data Factory, Synapse Analytics und Power BI integriert. Die Plattform bietet eine einheitliche Umgebung für Datenintegration, -verarbeitung, -analyse und -visualisierung. Sie unterstützt Unternehmen dabei, ihre Datenstrategie zu optimieren, fördert die Zusammenarbeit und ermöglicht Self-Service-Datenmanagement, Echtzeitanalysen und die Nutzung von maschinellem Lernen.
Azure Service Fabric ist eine Plattform für verteilte Systeme, die es Entwicklern erleichtert, skalierbare und zuverlässige Mikroservices und Container bereitzustellen. Service Fabric adressiert die Herausforderungen der Entwicklung und Verwaltung von Cloud-Anwendungen, indem es umfassende Unterstützung für die Erstellung von Microservices bietet. Es ermöglicht die einfache Verwaltung von Container-Orchestrierung und sorgt für eine hohe Verfügbarkeit und Skalierbarkeit von Anwendungen.
Microsoft Fabric ist auf Datenmanagement und -analyse spezialisiert, integriert verschiedene Datendienste und bietet eine einheitliche Plattform für Datenintegration, -verarbeitung, -analyse und -visualisierung.
Azure Service Fabric konzentriert sich auf die Entwicklung und Verwaltung von verteilten Systemen und Microservices. Es unterstützt die Bereitstellung und Verwaltung von skalierbaren und zuverlässigen Anwendungen.
1. Registrieren Sie sich auf der Microsoft Fabric Webseite.
2. Melden Sie sich an und richten Sie Ihre Umgebung ein.
3. Integrieren Sie Ihre Datenquellen und erstellen Sie Datenpipelines.
4. Verarbeiten und transformieren Sie Ihre Daten.
5. Nutzen Sie Data Science Tools und Echtzeitanalysen.
6. Erstellen Sie interaktive Berichte mit Power BI.
7. Nutzen Sie Schulungsressourcen und Tutorials.
Kontaktieren Sie uns bei weiteren Fragen.
– Erleichtert die Zusammenarbeit und ermöglicht Self-Service-Datenmanagement
– Integriert verschiedene Datentools und Anwendungen
– Automatisierte Prozesse ermöglichen schnelle Entscheidungen
– Unterstützt ETL-Prozesse, Echtzeitanalysen, maschinelles Lernen und Datenvisualisierung
Ja, Microsoft bietet eine kostenlose Testversion von an. Besuchen Sie die Microsoft Fabric Webseite und registrieren Sie sich für die Testversion.
Dokumentation und Tutorials: Umfangreiche Lernressourcen auf Microsoft Learn.
Community und Support: Unterstützung durch Foren und Community-Gruppen.
Schulungsressourcen: Lernmodule und end-to-end Tutorials.