ETL i ELT

Koncepcje hurtowni danych

Aaren Stubberfield

Data Scientist

Nazwy ETL i ELT

ETL

  1. Ekstrakcja
  2. Transformacja
  3. Ładowanie

ELT

  1. Ekstrakcja
  2. Ładowanie
  3. Transformacja
Koncepcje hurtowni danych

ETL – zalety i wady

  • Dane transformowane podczas przesyłania
  • Oddzielny system do przetwarzania danych

Zalety:

  • Niższe koszty przechowywania danych
  • Zgodność z zasadami ochrony danych osobowych

Wady:

  • Błędy/zmiany w transformacji wymagają ponownego pobierania danych
  • Koszty oddzielnego systemu do przetwarzania danych
Koncepcje hurtowni danych

ELT – zalety i wady

  • Dane są najpierw ładowane, potem transformowane
  • Transformacja odbywa się w magazynie danych

Zalety:

  • Brak oddzielnego systemu do przetwarzania danych
  • Transformacje można uruchamiać ponownie bez wpływu na systemy źródłowe
  • Obsługa wymagań zbliżonych do czasu rzeczywistego

Wady:

  • Zwiększone zapotrzebowanie na przestrzeń (dane surowe)
  • Zgodność ze standardami ochrony danych osobowych
Koncepcje hurtowni danych

Chmura i ELT

Technik IT z laptopem i czarnoskóry inżynier rozmawiają w centrum danych, idąc wzdłuż szaf serwerowych.

Koncepcje hurtowni danych

Czas na ćwiczenia!

Koncepcje hurtowni danych

Preparing Video For Download...