Star-Schemas implementieren

Daten transformieren und analysieren mit Microsoft Fabric

Luis Silva

Solution Architect - Data & AI

Medallion-Architektur

Diagramm der Medallion-Datenarchitektur: Daten werden aus Quellen in die Bronze-Schicht geladen, in der Silver-Schicht bereinigt und zu einem für Analysen geeigneten Star-Schema in der Gold-Schicht transformiert

Entwurfsmuster zur Organisation von Daten
Drei klar getrennte Schichten, die die fortschreitende Veredelung der Daten zeigen

Medallion-Architektur

Diagramm der Medallion-Datenarchitektur, Bronze-Schicht hervorgehoben

Bronze-Schicht: Aus der Quelle übernommene Rohdaten im Originalformat.

Medallion-Architektur

Diagramm der Medallion-Datenarchitektur, Silver-Schicht hervorgehoben

Silver-Schicht: Bereinigte und standardisierte Daten.

Medallion-Architektur

Diagramm der Medallion-Datenarchitektur, Gold-Schicht hervorgehoben

Gold-Schicht: Für Analysen geeignetes Format, meist Star-Schema.

Medallion-Architektur in Fabric

Diagramm der Medallion-Datenarchitektur in Fabric: Datenpipelines laden Daten in ein Lakehouse in der Bronze-Schicht, Spark-Notebooks und Dataflows transformieren sie in ein Lakehouse in der Silver-Schicht, weitere Transformation zum Star-Schema in einem Warehouse in der Gold-Schicht.

Bronze-Schicht: Lakehouse
Silver-Schicht: Lakehouse
Gold-Schicht: Lakehouse oder Warehouse

Ein Star-Schema implementieren

Verwende die T-SQL-Anweisung CREATE TABLE, um Tabellen zu definieren.
Fabric unterstützt die gängigsten T-SQL-Datentypen.

Aufbau einer Dimensionstabelle

Beschreiben Geschäftsentitäten (z. B. Produkte).
Enthalten meist folgende Spalten:

Beispiel-Dimensionstabelle Dim Product mit Spalten Product ID, Product Key, Product Name und Product Brand

Aufbau einer Dimensionstabelle

Beschreiben Geschäftsentitäten (z. B. Produkte).
Enthalten meist folgende Spalten:
- Surrogate Key. Eindeutiger Ein-Spalten-Identifikator für Dimensionswerte.

Beispiel-Dimensionstabelle Dim Product mit Spalten Product ID, Product Key, Product Name und Product Brand. Product ID ist als Surrogate Key hervorgehoben

Aufbau einer Dimensionstabelle

Beschreiben Geschäftsentitäten (z. B. Produkte).
Enthalten meist folgende Spalten:
- Surrogate Key. Eindeutiger Ein-Spalten-Identifikator für Dimensionswerte.
- Natural Key (Business Key). Eindeutiger Ein-Spalten-Identifikator aus den Quellsystemen.

Beispiel-Dimensionstabelle Dim Product mit Spalten Product ID, Product Key, Product Name und Product Brand. Product Key ist als Natural Key hervorgehoben

Aufbau einer Dimensionstabelle

Beschreiben Geschäftsentitäten (z. B. Produkte).
Enthalten meist folgende Spalten:
- Surrogate Key. Eindeutiger Ein-Spalten-Identifikator für Dimensionswerte.
- Natural Key (Business Key). Eindeutiger Ein-Spalten-Identifikator aus den Quellsystemen.
- Dimensionsattribute. Eine oder mehrere Spalten zum Filtern und zur Kontextgebung für die in der Faktentabelle gespeicherten Daten.

Beispiel-Dimensionstabelle Dim Product mit Spalten Product ID, Product Key, Product Name und Product Brand. Product Name und Product Brand sind als Dimensionsattribute hervorgehoben

Dimensionstabellen erstellen

T-SQL-Skript mit CREATE TABLE-Anweisung zum Erstellen der Beispiel-Dimensionstabelle dim_Product

Beispiel-Dimensionstabelle Dim Product mit Spalten Product ID, Product Key, Product Name und Product Brand. Product ID ist der Surrogate Key, Product Key der Natural Key, und Product Name sowie Product Brand sind die Dimensionsattribute

Aufbau einer Faktentabelle

Beschreiben Geschäftsereignisse (z. B. Verkauf eines Produkts).
Spalten:

Beispiel-Faktentabelle Fact Sales mit Spalten Date ID, Store ID, Product ID, Customer ID, Payment ID, Packaging Notes, Sale Order Number, Sale Units und Sale Price

Aufbau einer Faktentabelle

Beschreiben Geschäftsereignisse (z. B. Verkauf eines Produkts).
Spalten:
- Dimensionsschlüssel. Verweise auf die Surrogate Keys der Dimensionstabellen.

Beispiel-Faktentabelle Fact Sales mit Spalten Date ID, Store ID, Product ID, Customer ID, Payment ID, Packaging Notes, Sale Order Number, Sale Units und Sale Price. Date ID, Store ID, Product ID, Customer ID und Payment ID sind als Dimensionsschlüssel hervorgehoben

Aufbau einer Faktentabelle

Beschreiben Geschäftsereignisse (z. B. Verkauf eines Produkts).
Spalten:
- Dimensionsschlüssel. Verweise auf die Surrogate Keys der Dimensionstabellen.
- Attribute. Zusätzliche Informationen zur Faktzeile; weder Dimension noch numerische Kennzahl.

Beispiel-Faktentabelle Fact Sales mit Spalten Date ID, Store ID, Product ID, Customer ID, Payment ID, Packaging Notes, Sale Order Number, Sale Units und Sale Price. Packaging Notes und Sale Order Number sind als Attribute hervorgehoben

Aufbau einer Faktentabelle

Beschreiben Geschäftsereignisse (z. B. Verkauf eines Produkts).
Spalten:
- Dimensionsschlüssel. Verweise auf die Surrogate Keys der Dimensionstabellen.
- Attribute. Zusätzliche Informationen zur Faktzeile; weder Dimension noch numerische Kennzahl.
- Kennzahlen (Measures). Quantifizieren etwas zur Faktzeile; numerisch und meist additiv, z. B. Stückzahl, Betrag usw.

Beispiel-Faktentabelle Fact Sales mit Spalten Date ID, Store ID, Product ID, Customer ID, Payment ID, Packaging Notes, Sale Order Number, Sale Units und Sale Price. Sale Units und Sale Price sind als Kennzahlen hervorgehoben

Faktentabellen erstellen

T-SQL-Skript mit CREATE TABLE-Anweisung zum Erstellen der Beispiel-Faktentabelle fact_Sales

Beispiel-Faktentabelle Fact Sales mit Spalten Date ID, Store ID, Product ID, Customer ID, Payment ID, Packaging Notes, Sale Order Number, Sale Units und Sale Price

Lass uns üben!

Daten transformieren und analysieren mit Microsoft Fabric