Bigmemory 패키지 모음

R에서 확장 가능한 데이터 처리

Michael Kane

Assistant Professor, Yale University

지금까지 배운 내용

  • 가져오기
  • 서브셋
  • big.matrix 객체에 값 할당
R에서 확장 가능한 데이터 처리

연관 패키지

테이블 및 요약 통계
  • biganalytics
  • bigtabulate
R에서 확장 가능한 데이터 처리

연관 패키지

선형 대수
  • bigalgebra
R에서 확장 가능한 데이터 처리

연관 패키지

모델 적합
  • bigpca
  • bigFastLM
  • biglasso
  • bigrf
R에서 확장 가능한 데이터 처리

FHFA 모기지 데이터셋

  • 2009~2015년 Fannie Mae(연방 전국 모기지 협회) 및 Freddie Mac(연방 주택 대출 모기지 공사)이 보유 또는 유동화한 모기지 데이터
  • FHFA 모기지 데이터는 여기에서 온라인으로 이용 가능
  • 70,000개 대출의 무작위 서브셋을 사용
R에서 확장 가능한 데이터 처리

예제 1: bigmemory와 bigtabulate 사용

library(bigtabulate)

# How many samples do we have per year?
bigtable(mort, "year")

 2008  2009  2010  2011  2012  2013  2014  2015 
 8468 11101  8836  7996 10935 10216  5714  6734

# Create nested tables
bigtable(mort, c("msa", "year"))

  2008 2009 2010 2011 2012 2013 2014 2015
0 1064 1343  998  851 1066 1005  504  564
1 7404 9758 7838 7145 9869 9211 5210 6170
R에서 확장 가능한 데이터 처리

연습해 봅시다!

R에서 확장 가능한 데이터 처리

Preparing Video For Download...