Exemplo de design de data warehouse

Conceitos de Data Warehousing

Aaren Stubberfield

Data Scientist

Vamos contextualizar

• Nova startup
• App de compartilhamento de fotos

¹ Foto de Alex Alvarado no unsplash.com

Abordagem top-down ou bottom-up?

Pontos-chave:

• Mostrar impacto no negócio rapidamente é vital
• Top-down tem início mais demorado

Decisão:

• Abordagem bottom-up
• Data mart de Vendas é prioridade

Kimball - Selecionar o processo organizacional (Etapa 1)

Pontos-chave:

• Que tipo de cliente compra grandes volumes de fotos?

Decisão:

• Desenvolver compras do cliente

Kimball - Declarar o grão (Etapa 2)

Pontos-chave:

• Dados flexíveis para responder a muitas perguntas
• Escolher o menor grão possível

Decisão:

• Rastrear compras de clientes/fotos

Kimball - Identificar as dimensões (Etapa 3)

Pontos-chave:

• Como os usuários descrevem os dados do processo de negócio?
• Priorização de clientes

Decisão:

• Local do cliente (país e estado)
• Data de adesão
• Método de pagamento padrão

Kimball - Identificar os fatos (Etapa 4)

Pontos-chave:

• O que vamos responder?

Decisão:

• Tempo vendo a foto antes da compra
• Custo da foto e imposto
• Data da compra

Tabelas de fatos e dimensões

On-premises ou nuvem?

Pontos-chave:

• Evitar custos iniciais de hardware/software
• Equipe pequena: focar no que gera mais valor

Decisão:

• Implementação em nuvem

ETL ou ELT?

Pontos-chave:

• Reter todos os dados
• Nuvem permite escalar computação conforme necessário

Decisão:

• Implementação ELT

Resumo

• Planejamento é crucial
• Adapte a abordagem à situação

Vamos praticar!

Conceitos de Data Warehousing