Mikropartitioner och dataklustring

Snowflake-arkitektur

Emily Melhuish

Technical Curriculum Developer, Snowflake

Fråga en stor tabell

Exempel: Prenumeration

USER_ID REGISTRATION_DATE USER_NAME
912930 2026-04-01 JANEDOE
912931 2026-04-06 JOHNDOE
912932 2026-04-12 JIMMYDOE
... ... ...

Hur mycket data behöver frågan läsa från den här tabellen?

Snowflake-arkitektur

Mikropartitioner

Exempel på mikropartitioner och hur data lagras med kolumner tillsammans

  • Inom mikropartitioner lagras och komprimeras kolumner separat
  • Snowflake läser endast de kolumner som frågan behöver
Snowflake-arkitektur

Metadata

Exempel på mikropartitioner med metadata

  • Snowflake lagrar metadata för varje mikropartition
  • Lagras i molntjänstlagret
Snowflake-arkitektur

Partitionspruning

Exempel på pruning

Snowflake-arkitektur

Partitionspruning

Exempel på pruning med valt alternativ

  • Snowflake hoppar över mikropartitioner som omöjligt kan innehålla den data frågan behöver.
  • Endast relevanta delar läses = partitionspruning
Snowflake-arkitektur

Klustring

Exempel på mikropartitioner och hur data lagras med kolumner tillsammans

  • Datumbaserade frågor prunas ofta effektivt (t.ex. tidsserier)

  • Pruning är ineffektivt för värden som är spridda över partitioner (t.ex. region)

  • Klustringsnyckeln: Snowflake organiserar mikropartitioner efter den kolumnen

Snowflake-arkitektur

Klustringsnyckeln: När ska den användas?

clustering_key_v5.png

Snowflake-arkitektur

Klustringsnyckeln: Kardinalitet och kostnad

clustering_key_v5.png

Snowflake-arkitektur

Lass uns üben!

Snowflake-arkitektur

Preparing Video For Download...