필터링 조인

pandas로 데이터 조인하기

Aaren Stubberfield

Instructor

변형 조인과 필터링 조인

뮤테이팅 조인:

  • 두 테이블의 관측값 일치를 기반으로 데이터 결합

필터링 조인:

  • 다른 테이블의 관측값과 일치하는지 여부에 따라 테이블에서 관측값 필터링
pandas로 데이터 조인하기

세미 조인이란?

교집합에서 결과가 나오는 세미 조인의 테이블 다이어그램

세미 조인

  • 내부 조인과 유사하게 교집합을 반환합니다
  • 왼쪽 테이블의 열만 반환하고 오른쪽은 아님
  • 중복 없음
pandas로 데이터 조인하기

음악 데이터세트

헤드폰이 있는 휴대폰 이미지

SQLite 튜토리얼 이미지

1 사진: Pexels의 Vlad Bagacian 제공
pandas로 데이터 조인하기

예시 데이터세트

  gid  name           
0 1    Rock           
1 2    Jazz           
2 3    Metal          
3 4    Alternative ...
4 5    Rock And Roll  

  tid  name             aid  mtid  gid  composer         u_price
0 1    For Those Ab...  1    1     1    Angus Young,...  0.99   
1 2    Balls to the...  2    2     1    nan              0.99   
2 3    Fast As a Shark  3    2     1    F. Baltes, S...  0.99   
3 4    Restless and...  3    2     1    F. Baltes, R...  0.99   
4 5    Princess of ...  3    2     1    Deaffy & R.A...  0.99
pandas로 데이터 조인하기

1단계 - 세미 조인

genres_tracks = genres.merge(top_tracks, on='gid')
print(genres_tracks.head())

  gid  name_x  tid   name_y           aid  mtid  composer         u_price
0 1    Rock    2260  Don't Stop M...  185  1     Mercury, Fre...  0.99   
1 1    Rock    2933  Mysterious Ways  232  1     U2               0.99   
2 1    Rock    2618  Speed Of Light   212  1     Billy Duffy/...  0.99   
3 1    Rock    2998  When Love Co...  237  1     Bono/Clayton...  0.99   
4 1    Rock    685   Who'll Stop ...  54   1     J. C. Fogerty    0.99
pandas로 데이터 조인하기

2단계 - 세미 조인

genres['gid'].isin(genres_tracks['gid'])

2개 열의 gid가 일치하는 이미지

pandas로 데이터 조인하기

2단계 - 세미 조인

genres['gid'].isin(genres_tracks['gid'])

0     True
1     True
2     True
3     True
4    False
Name: gid, dtype: bool
pandas로 데이터 조인하기

3단계 - 세미 조인

genres_tracks = genres.merge(top_tracks, on='gid')
top_genres = genres[genres['gid'].isin(genres_tracks['gid'])]
print(top_genres.head())

  gid  name           
0 1    Rock           
1 2    Jazz           
2 3    Metal          
3 4    Alternative & Punk
4 6    Blues
pandas로 데이터 조인하기

안티 조인이란 무엇인가요?

왼쪽 테이블에서 교집합을 뺀 결과를 보여주는 세미 조인 테이블 다이어그램

안티 조인:

  • 교차점 을 제외한 왼쪽 테이블을 반환함
  • 왼쪽 테이블의 열만 반환하고 오른쪽은 아님
pandas로 데이터 조인하기

1단계 - 안티 조인

genres_tracks = genres.merge(top_tracks, on='gid', how='left', indicator=True)
print(genres_tracks.head())

  gid  name_x           tid     name_y           aid    mtid  composer         u_price  _merge   
0 1    Rock             2260.0  Don't Stop M...  185.0  1.0   Mercury, Fre...  0.99     both  
1 1    Rock             2933.0  Mysterious Ways  232.0  1.0   U2               0.99     both  
2 1    Rock             2618.0  Speed Of Light   212.0  1.0   Billy Duffy/...  0.99     both  
3 1    Rock             2998.0  When Love Co...  237.0  1.0   Bono/Clayton...  0.99     both 
4 5    Rock And Roll    NaN     NaN              NaN    NaN   NaN              NaN      left_only
pandas로 데이터 조인하기

2단계 - 안티 조인

gid_list = genres_tracks.loc[genres_tracks['_merge'] == 'left_only', 'gid']
print(gid_list.head())

23     5
34     9
36    11
37    12
38    13
Name: gid, dtype: int64
pandas로 데이터 조인하기

3단계 - 안티 조인

genres_tracks = genres.merge(top_tracks, on='gid', how='left', indicator=True)
gid_list = genres_tracks.loc[genres_tracks['_merge'] == 'left_only','gid']
non_top_genres = genres[genres['gid'].isin(gid_list)]

print(non_top_genres.head())

  gid  name          
0 5    Rock And Roll 
1 9    Pop           
2 11   Bossa Nova    
3 12   Easy Listening
4 13   Heavy Metal
pandas로 데이터 조인하기

연습해 봅시다!

pandas로 데이터 조인하기

Preparing Video For Download...