데이터 정리

데이터 웨어하우징 개념

Aaren Stubberfield

Data Scientist

비디오 아젠다

  • 데이터 형식 정비
  • 주소 파싱
  • 데이터 검증
  • 중복 제거
데이터 웨어하우징 개념

데이터 형식 정리

  • 값을 예상된 형식으로 업데이트
    • 날짜
    • 옵션 이름
    • 대소문자 표기
  • 출력 형식 일관성 보장

택시 데이터 예시

두 테이블을 하나로 결합

데이터 웨어하우징 개념

주소 파싱

  • 도로 주소를 구성 요소로 분해
  • 주소 검증 도구 사용 가능
주소
1234 S Normal St, Cleveland, OH 44102
주소 도시 우편번호
1234 S Normal St Cleveland OH 44102
데이터 웨어하우징 개념

데이터 검증

  • 범위 확인
    • 값이 예상 범위 내인가요?
    • 예: 사람의 나이
  • 유형 확인
    • 값의 데이터 유형이 적절한가요?
    • 예: 나이를 문자열 vs 숫자로 저장

나이 표에서 첫 행이 300으로 표시되고, 유효하지 않음으로 표시됨.

세 열이 있는 표에서 첫 번째 열인 나이의 데이터 유형이 문자열로 되어 있으며, 유효하지 않음으로 표시됨.

데이터 웨어하우징 개념

중복 행 제거

  • 이 과정은 중복 항목을 제거합니다

두 개의 두 열짜리 테이블을 결합하는 이미지

중복 행이 제거된 최종 결합 테이블

데이터 웨어하우징 개념

데이터 거버넌스

규제 준수 일러스트레이션

데이터 웨어하우징 개념

Ayo berlatih!

데이터 웨어하우징 개념

Preparing Video For Download...