테이블 생성과 관리

Databricks에서의 데이터 관리

Smriti Mishra

Founder, NordData Insight

데이터 라이브러리

생성과 관리

• Databricks 데이터베이스는 관련 테이블을 묶어 체계화합니다.
• 데이터베이스 생성은 확장 가능한 구조를 만듭니다.
• 정리는 접근성과 관리에 도움이 됩니다.
• 테이블은 쿼리를 위한 구조화된 데이터를 저장합니다.

효율적 관리

• 효과적인 관리는 조회, 갱신, 삭제를 포함합니다.
• 삭제는 데이터 손실을 피하기 위해 신중히 수행해야 합니다.
• 안전한 삭제 관행: 삭제 전 백업.

LOCATION 키워드 사용

• Databricks는 테이블 저장 위치를 자동으로 관리합니다.
• 기본 설정으로 스토리지 관리가 간단해집니다.
• LOCATION 키워드로 사용자 지정 경로를 설정할 수 있습니다.
• 규정 준수, 비용, 성능 요구에 유연성이 중요합니다.

기본 스토리지 재정의

• LOCATION은 기본 스토리지를 재정의합니다.
• 외부 클라우드 위치에 데이터 저장:
  • 예: AWS S3, Azure Blob Storage
• 기존 인프라와 통합에 유용합니다.
• 민감한 데이터 규정 준수에 도움이 됩니다.

동적 데이터 관리

• LOCATION은 동적인 데이터 관리를 지원합니다.
• 규정이나 비용이 바뀌면 쉽게 이동합니다.
• 중단 없이 원활히 재배치합니다.
• 변경 중에도 구조와 워크플로를 유지합니다.

연습해 봅시다!

Databricks에서의 데이터 관리