열 데이터 분할

PostgreSQL 데이터베이스에서 데이터 정제하기

Darryl Reeves, Ph.D.

Industry Assistant Professor, New York University

열 분할하기

 camis    | inspection_date |                    violation                    | ... 
 ---------+-----------------+-------------------------------------------------+-----
 ...      | ...             | ...                                             | ...
 50038736 | 03/29/2018      | 09B Thawing procedures                          | ...
 50033304 | 12/18/2019      | 02B Hot food item not held at or above 140º ... | ...
 50081658 | 12/13/2018      | 06F Wiping cloths soiled or not stored in sa... | ...
 50033733 | 02/12/2019      | 10B Plumbing not properly installed or maint... | ...
 40559634 | 08/22/2017      | 04N Filth flies or food/refuse/sewage-associ... | ...
 ...      | ...             | ...                                             | ...
PostgreSQL 데이터베이스에서 데이터 정제하기

STRPOS()로 시작 위치 찾기

STRPOS(source_string, search_string)

위반 문자열 "09B Thawing procedures"의 도식. 아래에 인덱스 번호가 표시되며, 0의 위치에 1, 첫 공백에 4, 문자열 끝 s에 22가 표시됨.

SELECT
  STRPOS('09B Thawing procedures', ' ');
4
PostgreSQL 데이터베이스에서 데이터 정제하기

STRPOS()로 시작 위치 찾기

위반 문자열 "09B Thawing procedures"의 도식. 아래에 인덱스 번호가 표시되며, 0의 위치에 1, 첫 공백에 4, 문자열 끝 s에 22가 표시됨.

SELECT
  STRPOS('09B Thawing procedures', '?');
0
PostgreSQL 데이터베이스에서 데이터 정제하기

STRPOS()로 시작 위치 찾기

위반 문자열 "09B Thawing procedures"의 도식. 아래에 인덱스 번호가 표시되며, 0의 위치에 1, 첫 공백에 4, 문자열 끝 s에 22가 표시됨.

SELECT
  STRPOS('09B Thawing procedures', ' ');
4
PostgreSQL 데이터베이스에서 데이터 정제하기

SUBSTRING()으로 부분 문자열 추출

SUBSTRING(source_string FROM start_pos FOR num_chars)

PostgreSQL 데이터베이스에서 데이터 정제하기

SUBSTRING()으로 부분 문자열 추출

SUBSTRING('Homerun' FROM 1 FOR 4)Home

위반 문자열 "09B Thawing procedures"의 도식. 아래에 인덱스 번호가 표시되며, 0의 위치에 1, 첫 공백에 4, 문자열 끝 s에 22가 표시됨.

SELECT
  SUBSTRING(
      '09B Thawing procedures'
      FROM 1
      FOR STRPOS('09B Thawing procedures', ' ') - 1
  );
09B
PostgreSQL 데이터베이스에서 데이터 정제하기

SUBSTRING()으로 부분 문자열 추출

위반 문자열 "09B Thawing procedures"의 도식. 아래에 인덱스 번호가 표시되며, 0의 위치에 1, 첫 공백에 4, 문자열 끝 s에 22가 표시됨. 파란 화살표가 설명 부분만 가리킴.

요건:

  • 위반 설명 시작 위치
  • 설명의 문자 수
SELECT
  STRPOS('09B Thawing procedures', ' ') + 1;
5
PostgreSQL 데이터베이스에서 데이터 정제하기

LENGTH()로 문자열 길이 계산

위반 문자열 "09B Thawing procedures"의 도식. 아래에 인덱스 번호가 표시되며, 0의 위치에 1, 첫 공백에 4, 문자열 끝 s에 22가 표시됨. 문자열의 설명 부분 위에 "문자 수?" 문구가 있음.

LENGTH(string)INTEGER

SELECT LENGTH('hello')
5
PostgreSQL 데이터베이스에서 데이터 정제하기

LENGTH()로 문자열 길이 계산

LENGTH('09B Thawing procedures')22

STRPOS('09B Thawing procedures', ' ')4

LENGTH('09B Thawing procedures') - STRPOS('09B Thawing procedures', ' ')18

LENGTH('Thawing procedures')18

PostgreSQL 데이터베이스에서 데이터 정제하기

LENGTH()로 문자열 길이 계산

SELECT 
    LENGTH('09B Thawing procedures') - 
    STRPOS('09B Thawing procedures', ' ');
18

위반 문자열 "09B Thawing procedures"의 도식. 아래에 인덱스 번호가 표시되며, 0의 위치에 1, 첫 공백에 4, 문자열 끝 s에 22가 표시됨. 파란 화살표가 설명 부분만 가리킴.

PostgreSQL 데이터베이스에서 데이터 정제하기

조합하여 추출하기

SELECT 
    SUBSTRING(
      '09B Thawing procedures'
      FROM
        STRPOS('09B Thawing procedures', ' ')
        + 1
      FOR
        LENGTH('09B Thawing procedures')
        - STRPOS('09B Thawing procedures', ' ')
    );
Thawing procedures
PostgreSQL 데이터베이스에서 데이터 정제하기

violation 열 분할하기

SELECT 
    camis, 
    inspection_date, 

    SUBSTRING(
      violation 
      FROM 1 
      FOR STRPOS(violation, ' ') - 1
    ) AS violation_code, 

    SUBSTRING(
      violation 
      FROM STRPOS(violation, ' ') + 1 
      FOR LENGTH(violation) - STRPOS(violation, ' ')
    ) AS violation_description 
FROM 
    restaurant_inspection;
PostgreSQL 데이터베이스에서 데이터 정제하기

violation 열 분할하기

 camis    | inspection_date |                    violation                    | ... 
 ---------+-----------------+-------------------------------------------------+-----
 ...      | ...             | ...                                             | ...
 50038736 | 03/29/2018      | 09B Thawing procedures                          | ...
 50033304 | 12/18/2019      | 02B Hot food item not held at or above 140º ... | ...
 50081658 | 12/13/2018      | 06F Wiping cloths soiled or not stored in sa... | ...
 50033733 | 02/12/2019      | 10B Plumbing not properly installed or maint... | ...
 40559634 | 08/22/2017      | 04N Filth flies or food/refuse/sewage-associ... | ...
 ...      | ...             | ...                                             | ...
PostgreSQL 데이터베이스에서 데이터 정제하기

violation 열 분할하기

 camis    | inspection_date | violation_code |            violation_description            | ... 
 ---------+-----------------+----------------+---------------------------------------------+-----
 ...      | ...             | ...            | ...                                         | ...
 50038736 | 03/29/2018      | 09B            | Thawing procedures                          | ...
 50033304 | 12/18/2019      | 02B            | Hot food item not held at or above 140º ... | ...
 50081658 | 12/13/2018      | 06F            | Wiping cloths soiled or not stored in sa... | ...
 50033733 | 02/12/2019      | 10B            | Plumbing not properly installed or maint... | ...
 40559634 | 08/22/2017      | 04N            | Filth flies or food/refuse/sewage-associ... | ...
 ...      | ...             | ...            | ...                                         | ...
PostgreSQL 데이터베이스에서 데이터 정제하기

Ayo berlatih!

PostgreSQL 데이터베이스에서 데이터 정제하기

Preparing Video For Download...