Persistance et portée des tables

Gestion des données dans Databricks

Smriti Mishra

Founder, NordData Insight

Qu'est-ce que la persistance d'une table ?

  • La persistance d'une table régit l'entreposage et la rétention des données
  • Elle influe sur l'entreposage, l'accès et la maintenance
  • Databricks prend en charge les tables gérées et non gérées

Image humoristique de personnes qui classent et consultent des dossiers dans des classeurs

Gestion des données dans Databricks

Tables gérées dans Databricks

  • Entièrement gérées par Databricks, y compris l'emplacement et le cycle de vie des données.
  • Suppriment automatiquement les données quand la table est supprimée.
  • Adaptées à une gestion simple et centralisée des données.

Image illustrant le fonctionnement d'un système centralisé à l'aide de points de différentes couleurs

Gestion des données dans Databricks

Tables non gérées dans Databricks

  • Approche décentralisée
  • Maîtrisez l'emplacement d'entreposage et le cycle de vie des données
  • Supprimer une table non gérée ne supprime pas les données
  • Utile pour des besoins sur mesure d'entreposage ou de conformité

Image illustrant le fonctionnement d'un système décentralisé à l'aide de points de différentes couleurs

Gestion des données dans Databricks

Tables gérées ou non gérées ?

Aspect.png

Gestion des données dans Databricks

Le mot-clé LOCATION

  • Essentiel pour définir l'entreposage des tables non gérées.
  • L'emplacement influe sur les coûts, les temps d'accès et les politiques de rétention.

 

CREATE TABLE table_name (
    column_name data_type,
    ...
)
USING file_format
LOCATION 'path/to/data';
Gestion des données dans Databricks

Points clés

  • Les tables gérées centralisent l'entreposage et le cycle de vie dans Databricks.
  • Les tables non gérées offrent de la souplesse pour l'entreposage et le cycle de vie.
  • Choisissez selon vos besoins d'entreposage, de contrôle et de gestion.

Image illustrant l'entreposage et la gestion du cycle de vie des données

Gestion des données dans Databricks

Passons à la pratique !

Gestion des données dans Databricks

Preparing Video For Download...