Quais são as camadas de um data warehouse?

Conceitos de Data Warehousing

Aaren Stubberfield

Data Scientist

Visão geral das camadas - fonte de dados

Imagem com dois ícones de banco de dados

Conceitos de Data Warehousing

Visão geral das camadas - staging

Imagem com dois ícones de banco de dados e uma seta com rótulo ETL, e um ícone de banco de dados com rótulo staging

Conceitos de Data Warehousing

Visão geral das camadas - armazenamento

Imagem com dois ícones de banco de dados e uma seta com rótulo ETL, um ícone de banco de dados com rótulo staging e um ícone de banco com dois ícones menores rotulados data warehouse e data mart

Conceitos de Data Warehousing

Visão geral das camadas - apresentação

Imagem com dois ícones de banco de dados e uma seta com rótulo ETL, um ícone de banco de dados com rótulo staging, um ícone de banco com dois ícones menores rotulados data warehouse e data mart, e um ícone de pessoa no computador, um relatório e uma lupa

Conceitos de Data Warehousing

Camada de fonte de dados

  • Todas as fontes de dados do data warehouse

  • Exemplos de fontes:

    • Banco transacional
    • Arquivos de log
    • Planilhas

imagem da camada de fonte de dados de um data warehouse

Conceitos de Data Warehousing

Camada de staging (preparo de dados)

  • Camada que extrai, transforma e limpa dados via ETL
  • Contém o processo ETL e tabelas de armazenamento

imagem da camada de staging de um data warehouse

Conceitos de Data Warehousing

Processo de ETL na camada de staging

  • Extraídos
  • Regras de negócio aplicadas e dados limpos
  • Banco de staging é comum
  • Precisa extrair dados válidos
  • Carga em lote / completa

imagem da camada de staging de um data warehouse

Conceitos de Data Warehousing

Camada de armazenamento

  • Dados ficam no warehouse e nos data marts
    • Data warehouse -> Data mart
    • Data mart -> Data warehouse

imagem da camada de armazenamento de um data warehouse

Conceitos de Data Warehousing

Camada de apresentação

  • Usuários interagem com os dados armazenados
  • Usuários:
    • Usam ferramentas de BI (Business Intelligence)
    • Usam ferramentas de mineração de dados
    • Criam consultas diretas

imagem de um ícone de pessoa no computador, um ícone de relatório e um ícone de lupa

Conceitos de Data Warehousing

Resumo

Imagem com dois ícones de banco de dados e uma seta com rótulo ETL, um ícone de banco de dados com rótulo staging, um ícone de banco com dois ícones menores rotulados data warehouse e data mart, e um ícone de pessoa no computador, um relatório e uma lupa

Conceitos de Data Warehousing

Vamos praticar!

Conceitos de Data Warehousing

Preparing Video For Download...