Micro-partiții și gruparea datelor

Arhitectura Snowflake

Emily Melhuish

Technical Curriculum Developer, Snowflake

Interogarea unui tabel mare

Exemplu: Abonament

USER_ID REGISTRATION_DATE USER_NAME
912930 2026-04-01 JANEDOE
912931 2026-04-06 JOHNDOE
912932 2026-04-12 JIMMYDOE
... ... ...

Câte date trebuie să citească interogarea din acest tabel?

Arhitectura Snowflake

Micro-partiții

Exemplu care arată micro-partițiile și modul în care datele sunt stocate împreună pe coloane

  • În cadrul micro-partițiilor, coloanele sunt stocate și comprimate separat
  • Snowflake citește doar coloanele necesare interogării
Arhitectura Snowflake

Metadate

Exemplu de micro-partiții cu metadate

  • Snowflake stochează metadate pentru fiecare micro-partiție
  • Stocate în stratul de servicii cloud
Arhitectura Snowflake

Eliminarea partițiilor

Exemplu de eliminare a partițiilor

Arhitectura Snowflake

Eliminarea partițiilor

Exemplu de eliminare a partițiilor cu opțiune selectată

  • Snowflake ignoră micro-partițiile care nu pot conține datele necesare interogării.
  • Citește doar secțiunile relevante = eliminarea partițiilor
Arhitectura Snowflake

Grupare

Exemplu care arată micro-partițiile și modul în care datele sunt stocate împreună pe coloane

  • Interogările bazate pe dată sunt adesea bine eliminate (de exemplu, serii de timp)

  • Eliminarea nu este utilă pentru valorile dispersate între partiții (de exemplu, regiune)

  • Cheie de grupare: Snowflake organizează micro-partițiile în jurul acelei coloane

Arhitectura Snowflake

Cheie de grupare: Când se utilizează

clustering_key_v5.png

Arhitectura Snowflake

Cheie de grupare: Cardinalitate și cost

clustering_key_v5.png

Arhitectura Snowflake

Să exersăm!

Arhitectura Snowflake

Preparing Video For Download...