Поздравляем!

ETL и ELT в Python

Jake Roach

Data Engineer

Проектирование и создание конвейеров данных

$$

  • Проектирование надёжных конвейеров данных
  • Архитектура ETL: извлечение, преобразование, загрузка
  • Обработка исключений и логирование

Конвейер ETL.

ETL и ELT в Python

Продвинутые техники ETL

$$

  • Обработка вложенных JSON
  • Продвинутая логика преобразования данных
  • Сохранение данных в SQL-базах данных

$$

{
    "863703000": {
        "volume": 1443120000,
        "price": {
            "close": 0.09791,
            "open": 0.12187
        }
    },
    ...
}
ETL и ELT в Python

Развёртывание и поддержка конвейеров данных

$$

  • Проверка и тестирование конвейеров данных
  • Запуск конвейера в производственной среде
  • Инструменты оркестрации

Проверенный конвейер данных.

ETL и ELT в Python

Что дальше

$$

Логотип DataCamp.

$$

Логотипы Airflow, Astronomer и Snowflake.

  • Apache Airflow
  • Astronomer
  • Snowflake
ETL и ELT в Python

Спасибо!

ETL и ELT в Python

Preparing Video For Download...