Micro-partities en dataclustering
Snowflake-architectuur
Emily Melhuish
Technical Curriculum Developer, Snowflake
Micro-partities
- In micro-partities worden kolommen apart opgeslagen en gecomprimeerd
- Snowflake leest alleen de kolommen die de query nodig heeft
Metadata
- Snowflake slaat metadata op voor elke micro-partitie
- Bewaard in de cloud services-laag
Partition pruning
Partition pruning
- Snowflake slaat micro-partities over die de gevraagde data zeker niet bevatten.
- Het leest alleen de relevante slices = partition pruning
Clusteren
Datumqueries snoeien vaak goed (bijv. tijdreeksen)
Snoeien helpt niet bij waarden die over partities verspreid zijn (bijv. regio)
Clustering key: Snowflake rangschikt micro-partities rond die kolom
Clustering key: wanneer gebruiken
Clustering key: cardinaliteit en kosten
