Apa saja lapisan dalam gudang data?

Konsep Data Warehousing

Aaren Stubberfield

Data Scientist

Gambaran lapisan - sumber data

Gambar dengan dua ikon database

Gambaran lapisan - staging data

Gambar dengan dua ikon database dan panah berlabel ETL, serta ikon database berlabel staging

Gambaran lapisan - penyimpanan data

Gambar dengan dua ikon database dan panah berlabel ETL, ikon database berlabel staging, dan ikon database dengan dua ikon database kecil berlabel data warehouse dan data mart

Gambaran lapisan - penyajian data

Gambar dengan dua ikon database dan panah berlabel ETL, ikon database berlabel staging, ikon database dengan dua ikon database kecil berlabel data warehouse dan data mart, serta ikon orang di komputer, laporan, dan ikon kaca pembesar

Lapisan sumber data

Semua sumber data untuk gudang data
Contoh sumber data:
- Database transaksional
- Berkas log
- Spreadsheet

gambar lapisan sumber untuk gudang data

Lapisan staging data

Melakukan ekstraksi, transformasi, dan pembersihan data via ETL
Berisi proses ETL dan tabel penyimpanan

gambar lapisan staging untuk gudang data

Proses ETL pada lapisan staging

Diekstrak
Aturan bisnis diterapkan dan dibersihkan
Sering memakai database staging
Harus dapat mengekstrak data valid
Muat batch / penuh

gambar lapisan staging untuk gudang data

Lapisan penyimpanan data

Data disimpan di gudang data dan data mart
- Data warehouse -> Data mart
- Data mart -> Data warehouse

gambar lapisan penyimpanan untuk gudang data

Lapisan penyajian data

Pengguna berinteraksi dengan data tersimpan
Pengguna:
- Menggunakan alat BI (Business Intelligence)
- Menggunakan alat data mining
- Membuat kueri langsung

gambar ikon orang di komputer, ikon laporan, dan ikon kaca pembesar

Ringkasan

Ayo berlatih!

Konsep Data Warehousing