Micro-partições e clusterização de dados
Arquitetura do Snowflake
Emily Melhuish
Technical Curriculum Developer, Snowflake
Micro-partições
- Em micro-partições, as colunas são armazenadas e comprimidas separadamente
- O Snowflake lê só as colunas que a consulta precisa
Metadados
- O Snowflake armazena metadados para cada micro-partição
- Armazenados na camada de serviços em nuvem
Poda de partições
Poda de partições
- O Snowflake pula micro-partições que não podem conter os dados que tua consulta precisa.
- Lê só os trechos relevantes = poda de partições
Clusterização
Consultas por data costumam podar bem (ex.: séries temporais)
Poda não ajuda quando valores estão espalhados pelas partições (ex.: região)
Clustering key: o Snowflake organiza micro-partições em torno dessa coluna
Clustering key: quando usar
Clustering key: cardinalidade e custo
