Gratulacje!

ETL i ELT w Pythonie

Jake Roach

Data Engineer

Projektowanie i budowanie potoków danych

$$

  • Projektowanie solidnych potoków danych
  • Architektura ekstrakcji, transformacji i ładowania
  • Obsługa wyjątków i logowanie

Potok ETL.

ETL i ELT w Pythonie

Zaawansowane techniki ETL

$$

  • Obsługa zagnieżdżonego JSON
  • Zaawansowana logika transformacji
  • Zapisywanie danych do baz SQL

$$

{
    "863703000": {
        "volume": 1443120000,
        "price": {
            "close": 0.09791,
            "open": 0.12187
        }
    },
    ...
}
ETL i ELT w Pythonie

Wdrażanie i utrzymanie potoków danych

$$

  • Walidacja i testowanie potoków danych
  • Uruchamianie potoku w środowisku produkcyjnym
  • Narzędzia do orkiestracji

Zwalidowany potok danych.

ETL i ELT w Pythonie

Następne kroki

$$

Logo Airflow, Astronomer i Snowflake.

  • Apache Airflow
  • Astronomer
  • Snowflake
ETL i ELT w Pythonie

Dziękujemy!

ETL i ELT w Pythonie

Preparing Video For Download...