Partycjonowanie danych w funkcji okna

Funkcje okna w Snowflake

Jake Roach

Field Data Engineer

Klasyfikowanie danych

Wszystkie rekordy w zbiorze wyników są tu klasyfikowane!

      user_id  |    event_name   |  km_traveled  |  closest_attendees 
      -------  | --------------- | ------------- | ----------------- 
      user_81  |  Lunar Drift    |      0.5      |         1         
      user_02  |  Lunar Drift    |      1.1      |         2       
      user_33  |  Crimson Arc    |      8.6      |         3          
      user_33  |  Neon Prophet   |      8.6      |         3         
      user_15  |  VibeStorm      |      17       |         5          
      user_94  |  The Dusk Owls  |      41       |         6        
      user_47  |  Lunar Drift    |      61       |         7   
      user_56  |  Crimson Arc    |      116      |         8         
Funkcje okna w Snowflake

Klasyfikowanie danych z partycjami

Teraz chcemy klasyfikować dane w każdym określonym oknie.

Tabela klasyfikująca uczestników koncertów według odległości, jaką pokonali, aby dotrzeć do każdego miejsca

Funkcje okna w Snowflake

PARTITION BY

SELECT
    user_id,
    event_name,
    distance_traveled,

    RANK() OVER(
        -- Create window by event_name
        PARTITION BY event_name
        ORDER BY km_traveled
    ) AS closest_concert_goer

FROM CONCERTS.attendance;

PARTITION BY tworzy okna rekordów, do których stosowane są funkcje

$$

  • PARTITION BY poprzedza ORDER BY w OVER(...)
  • Podobne do GROUP BY, ale nie "zwija" rekordów
Funkcje okna w Snowflake

Klasyfikowanie danych z partycjami

SELECT
    level,
    price,

    RANK() OVER(
        PARTITION BY level
        ORDER BY price DESC
    ) AS price_rank

FROM CONCERTS.attendance;
  • PARTITION BY tworzy okna
      level  |   price   | price_rank 
    -------- | --------- | -----------
       100   |    765    |      1
       100   |    617    |      2
       100   |    490    |      3
       100   |    490    |      3

                  ...

       200   |    212    |      1
       200   |    207    |      2

                  ...
Funkcje okna w Snowflake

Generowanie metryk podsumowujących za pomocą FIRST_VALUE

    FIRST_VALUE(<1>) OVER(
        PARTITION BY <2>
        ORDER BY <3>
    ) AS <alias>

FIRST_VALUE zwraca pierwszą wartość w oknie

    <1>: kolumna do zwrócenia

    <2>: pole do partycjonowania danych

    <3>: pole określające pierwszy rekord

Funkcje okna w Snowflake

Generowanie metryk podsumowujących za pomocą AVG

AVG(<1>) OVER(
    PARTITION BY <2>
    -- No need to ORDER BY!
) AS <alias>

AVG oblicza średnią wartość pola dla każdego okna

    <1>: kolumna do uśrednienia

    <2>: pole do partycjonowania danych

$$

                                                                                                      ... ORDER BY nie jest wymagane!

Funkcje okna w Snowflake

Satysfakcja klientów

SELECT
    user_id, event_name, satisfaction_score,

FIRST_VALUE(satisfaction_score) OVER( PARTITION BY event_name -- Satisfaction score for the closest concert-goer ORDER BY km_traveled ) AS first_score,
-- Find the average satisfcation score for a "window" of records AVG(satisfaction_score) OVER( PARTITION BY event_name ) AS average_score
FROM CONCERTS.attendance;
Funkcje okna w Snowflake

Satysfakcja klientów


      user_id  |   event_name   |  satisfaction_score  |  first_score  |  average_score 
     --------- | -------------- | -------------------- | ------------- | ---------------

      user_26  |  Pulse Theory  |          71          |       98      |      84.5      
      user_92  |  Pulse Theory  |          98          |       98      |      84.5      

                                          ...

      user_57  |   Nova Sway    |           4          |       22      |      29.3      
      user_39  |   Nova Sway    |          22          |       22      |      29.3      
      user_44  |   Nova Sway    |          62          |       22      |      29.3      

                                          ...
Funkcje okna w Snowflake

Czas na ćwiczenia!

Funkcje okna w Snowflake

Preparing Video For Download...