Parabéns!

ETL e ELT em Python

Jake Roach

Data Engineer

Projetando e construindo pipelines de dados

$$

  • Projetar pipelines de dados robustos
  • Arquitetura de extração, transformação e carga
  • Tratamento de exceções e logging

Um pipeline de ETL.

ETL e ELT em Python

Técnicas avançadas de ETL

$$

  • Tratar JSON aninhado
  • Lógica avançada de transformação
  • Persistir dados em bancos SQL

$$

{
    "863703000": {
        "volume": 1443120000,
        "price": {
            "close": 0.09791,
            "open": 0.12187
        }
    },
    ...
}
ETL e ELT em Python

Implantando e mantendo pipelines de dados

$$

  • Validar e testar pipelines de dados
  • Executar um pipeline em produção
  • Ferramentas de orquestração

Um pipeline de dados validado.

ETL e ELT em Python

Próximos passos

$$

Logo da DataCamp.

$$

Logos do Airflow, Astronomer e Snowflake.

  • Apache Airflow
  • Astronomer
  • Snowflake
ETL e ELT em Python

Obrigado!

ETL e ELT em Python

Preparing Video For Download...