恭喜你!

使用 Python 的 ETL 與 ELT

Jake Roach

Data Engineer

設計與建置資料管線

$$

  • 設計穩健的資料管線
  • 擷取、轉換、載入架構
  • 例外處理與記錄

一個 ETL 管線。

使用 Python 的 ETL 與 ELT

進階 ETL 技巧

$$

  • 處理巢狀 JSON
  • 進階轉換邏輯
  • 將資料寫入 SQL 資料庫

$$

{
    "863703000": {
        "volume": 1443120000,
        "price": {
            "close": 0.09791,
            "open": 0.12187
        }
    },
    ...
}
使用 Python 的 ETL 與 ELT

部署與維運資料管線

$$

  • 驗證與測試資料管線
  • 在正式環境執行管線
  • 編排工具

已驗證的資料管線。

使用 Python 的 ETL 與 ELT

下一步

$$

Airflow、Astronomer 與 Snowflake 標誌。

  • Apache Airflow
  • Astronomer
  • Snowflake
使用 Python 的 ETL 與 ELT

謝謝!

使用 Python 的 ETL 與 ELT

Preparing Video For Download...