Вітаємо!

ETL та ELT у Python

Jake Roach

Data Engineer

Проєктування та створення конвеєрів даних

$$

  • Проєктування надійних конвеєрів даних
  • Архітектура extract, transform, and load
  • Обробка винятків і логування

Конвеєр ETL.

ETL та ELT у Python

Просунуті техніки ETL

$$

  • Обробка вкладеного JSON
  • Розширена логіка трансформацій
  • Збереження даних у базах даних SQL

$$

{
    "863703000": {
        "volume": 1443120000,
        "price": {
            "close": 0.09791,
            "open": 0.12187
        }
    },
    ...
}
ETL та ELT у Python

Розгортання та підтримка конвеєрів даних

$$

  • Валідація та тестування конвеєрів даних
  • Запуск конвеєра у продакшені
  • Інструменти оркестрації

Перевірений конвеєр даних.

ETL та ELT у Python

Наступні кроки

$$

Логотипи Airflow, Astronomer та Snowflake.

  • Apache Airflow
  • Astronomer
  • Snowflake
ETL та ELT у Python

Дякуємо!

ETL та ELT у Python

Preparing Video For Download...