Criando e gerenciando tabelas

Gerenciamento de Dados no Databricks

Smriti Mishra

Founder, NordData Insight

A biblioteca de dados

Criar e gerenciar

• Bancos de dados do Databricks agrupam tabelas relacionadas.
• Criar um banco define uma estrutura escalável.
• Dados organizados facilitam acesso e gestão.
• Tabelas armazenam dados estruturados para consultas.

Gestão eficaz

• Gestão eficaz inclui consultar, atualizar e excluir dados.
• Excluir com cuidado para evitar perda.
• Boas práticas: fazer backup antes da remoção.

Usando o `LOCATION`

• O Databricks gerencia automaticamente locais de armazenamento de tabelas.
• A configuração padrão simplifica o gerenciamento.
• Caminhos personalizados podem ser definidos com LOCATION.
• Flexibilidade é importante para conformidade, custo ou desempenho.

Substituindo o armazenamento padrão

• LOCATION substitui o armazenamento padrão.
• Armazene dados em locais externos na nuvem:
  • exemplos: AWS S3, Azure Blob Storage
• Útil para integrar com a infraestrutura existente.
• Garante conformidade para dados sensíveis.

Gestão dinâmica de dados

• LOCATION permite gestão dinâmica de dados.
• Movimente dados facilmente se regras ou custos mudarem.
• Realocar sem interrupção.
• Mantenha estrutura e fluxo de trabalho nas mudanças.

Vamos praticar!

Gerenciamento de Dados no Databricks