축하합니다!

Python으로 ETL과 ELT

Jake Roach

Data Engineer

데이터 파이프라인 설계와 구축

$$

  • 견고한 데이터 파이프라인 설계
  • 추출·변환·적재(ETL) 아키텍처
  • 예외 처리와 로깅

ETL 파이프라인.

Python으로 ETL과 ELT

고급 ETL 기법

$$

  • 중첩 JSON 처리
  • 고급 변환 로직
  • SQL DB에 데이터 저장

$$

{
    "863703000": {
        "volume": 1443120000,
        "price": {
            "close": 0.09791,
            "open": 0.12187
        }
    },
    ...
}
Python으로 ETL과 ELT

데이터 파이프라인 배포와 운영

$$

  • 데이터 파이프라인 검증 및 테스트
  • 프로덕션 환경에서 파이프라인 실행
  • 오케스트레이션 도구

검증된 데이터 파이프라인.

Python으로 ETL과 ELT

다음 단계

$$

Airflow, Astronomer, Snowflake 로고.

  • Apache Airflow
  • Astronomer
  • Snowflake
Python으로 ETL과 ELT

감사합니다!

Python으로 ETL과 ELT

Preparing Video For Download...