마무리 생각

PySpark로 하는 Feature Engineering

John Hogue

Lead Data Scientist

배운 내용

• 시각·통계적 검사
• 행과 열 제거
• 데이터 스케일링 및 조정
• 결측값 처리
• 외부 데이터세트 조인

• 특성 생성
• 지저분한 필드에서 변수 추출
• 구간화, 버킷화, 인코딩
• 모델 학습 및 평가
• 모델 결과 해석

이제 새로운 내용을 배워봅시다!

PySpark로 하는 Feature Engineering