Databricks 시작하기

Databricks 개념

Kevin Barlow

Data Practitioner

컴퓨트 클러스터 복습

클라우드 컴퓨팅 다이어그램

Databricks 개념

첫 클러스터 만들기

첫 단계는 데이터 처리를 위한 클러스터를 만드는 것입니다!

구성 옵션:

클러스터 UI

Databricks 개념

첫 클러스터 만들기

첫 단계는 데이터 처리를 위한 클러스터를 만드는 것입니다!

구성 옵션:

  • 클러스터 정책 및 액세스

클러스터 UI - 액세스

Databricks 개념

클러스터 액세스

클러스터 액세스 다이어그램

Databricks 개념

첫 클러스터 만들기

첫 단계는 데이터 처리를 위한 클러스터를 만드는 것입니다!

구성 옵션:

  • 클러스터 정책 및 액세스
  • Databricks Runtime
  • Photon 가속화

클러스터 UI - Runtime

Databricks 개념

첫 클러스터 만들기

첫 단계는 데이터 처리를 위한 클러스터를 만드는 것입니다!

구성 옵션:

  • 클러스터 정책 및 액세스
  • Databricks Runtime
  • Photon 가속화
  • 노드 인스턴스 유형 및 수
  • 자동 확장 / 자동 종료

클러스터 UI - 노드

Databricks 개념

Data Explorer

Data Explorer에 익숙해지세요! 이 UI에서 다음을 할 수 있습니다:

  1. 사용 가능한 카탈로그/스키마/테이블 탐색
  2. 샘플 데이터와 요약 통계 보기
  3. 데이터 라인리지와 변경 이력 확인

또한 "더하기" 아이콘을 클릭해 새 데이터를 업로드할 수 있습니다!

데이터 탐색

1 Photo by Jakub Zerdzicki: https://www.pexels.com/photo/magnifier-loupe-17284804/
Databricks 개념

노트북 만들기

Databricks 노트북:

  • Databricks의 표준 인터페이스
  • 오픈 소스 Jupyter 개선
  • 다중 언어 지원
    • Python, R, Scala, SQL
    • 매직 명령어(%sql)
  • 내장 시각화
  • 실시간 댓글 및 협업

워크스페이스에서 노트북 생성

Databricks 개념

연습해 봅시다!

Databricks 개념

Preparing Video For Download...