Які шари має сховище даних?

Концепції Data Warehousing

Aaren Stubberfield

Data Scientist

Огляд шарів — джерело даних

Зображення з двома піктограмами баз даних

Огляд шарів — проміжний шар (staging)

Зображення з двома піктограмами баз даних і стрілкою з міткою ETL та піктограмою бази даних «staging»

Огляд шарів — зберігання даних

Зображення з двома піктограмами баз даних і стрілкою з міткою ETL, піктограмою бази «staging» та піктограмою бази з двома меншими піктограмами «data warehouse» і «data mart»

Огляд шарів — подання даних

Зображення з двома піктограмами баз даних і стрілкою з міткою ETL, піктограмою «staging», піктограмою бази з двома меншими «data warehouse» і «data mart», а також піктограмами користувача за комп'ютером, звіту й лупи

Шар джерел даних

Усі джерела даних для сховища даних
Приклади джерел:
- Транзакційна база даних
- Файли журналів
- Електронні таблиці

зображення шару джерел даних для сховища даних

Проміжний шар даних (staging)

Шар витягує, перетворює й очищує дані через процес ETL
Містить процес ETL і таблиці зберігання

зображення проміжного шару для сховища даних

Процес ETL у проміжному шарі даних

Вилучено
Застосовано бізнес-правила й очищено
Часто використовують проміжну БД
Має забезпечувати вилучення коректних даних
Пакетне / повне завантаження

зображення проміжного шару для сховища даних

Шар зберігання даних

Дані зберігаються у сховищі та в дата-мартах
- Data warehouse -> Data mart
- Data mart -> Data warehouse

зображення шару зберігання для сховища даних

Шар подання даних

Користувачі працюють із збереженими даними
Користувачі:
- Використовують інструменти BI (Business Intelligence)
- Використовують засоби data mining
- Створюють прямі запити

зображення піктограм: користувач за комп'ютером, звіт і лупа

Підсумок

Давайте потренуємось!

Концепції Data Warehousing