배치 처리 소개

스트리밍 개념

Mike Metzger

Data Engineer

배치 처리란?

• 데이터를 그룹으로 처리
• 프로세스 시작부터 종료까지 실행
  • 중간에 데이터 추가 없음
• 보통 다음에 의해 실행됨
  • 주기
  • 시작 이벤트
• 정해진 크기(배치 크기)로 처리
• 배치 프로세스의 인스턴스는 흔히 잡(job)이라 함

일반적인 배치 시나리오

• 파일 또는 파일 일부 읽기(텍스트, mp3 등)
• 이메일 발송 / 수신
• 인쇄

왜 배치인가?

• 단순함
• 대체로 일관됨
• 성능 향상 방법이 다양함

연습해 봅시다!

스트리밍 개념