Łączenie DataFrame'ów według warunku lub najbliższego dopasowania

Transformacje danych z Polars

Liam Brannigan

Data Scientist & Polars Contributor

Łączenie według warunku

Pojedyncza tabela z listą zwycięzców Mistrzostw Świata

Transformacje danych z Polars

Łączenie według warunku

Tabela ze zwycięzcami Mistrzostw Świata oraz tabela z minimalną liczbą zwycięstw dla kategorii srebrnej i złotej.

Transformacje danych z Polars

Łączenie według warunku

Tabela ze zwycięzcami Mistrzostw Świata, tabela z poziomami oraz wynikowa tabela z przypisanymi poziomami

Transformacje danych z Polars

Łączenie według warunku

Tabela ze zwycięzcami Mistrzostw Świata, tabela z poziomami oraz wynikowa tabela z przypisanymi poziomami — dwa wiersze dla Brazylii wyróżnione.

Transformacje danych z Polars

Użytkownicy aplikacji z preferencjami

restaurants = pl.read_csv("restuarants.csv")
shape: (4, 5)
| business        | location    | review | price | type       |
| ---             | ---         | ---    | ---   | ---        |
| str             | str         | f64    | i64   | str        |
|-----------------|-------------|--------|-------|------------|
| 7burgers        | Wakey Wakey | 4.2    | 15    | restaurant |
| Costa Coffee    | City Point  | 4.5    | 8     | café       |
| Costa Coffee    | Waterloo    | 4.1    | 8     | café       |
| The Queens Head | Denman St.  | 4.7    | 25    | bar        |
Transformacje danych z Polars

Tabela użytkowników

users = pl.read_csv("app_users.csv")
shape: (3, 3)
| user_name | budget | type       |
| ---       | ---    | ---        |
| str       | i64    | str        |
|-----------|--------|------------|
| Bob       | 12     | café       |
| Alice     | 15     | restaurant |
| Charlie   | 22     | bar        |
Transformacje danych z Polars

Łączenie według warunku

restaurants.join_where(


)
Transformacje danych z Polars

Łączenie według warunku

restaurants.join_where(
    users,

)
Transformacje danych z Polars

Łączenie według warunku

restaurants.join_where(
    users,
    pl.col("type") == pl.col("type_right")
)
Transformacje danych z Polars

Łączenie według warunku

restaurants.join_where(
    users,
    pl.col("type") == pl.col("type_right")
)
shape: (4, 8)
| business        | type       | ... | user_name | budget |
| ---             | ---        | ... | ---       | ---    |
| str             | str        | ... | str       | i64    |
|-----------------|------------|-----|-----------|--------|
| 7burgers        | restaurant | ... | Alice     | 15     |
| Costa Coffee    | café       | ... | Bob       | 12     |
| Costa Coffee    | café       | ... | Bob       | 12     |
| The Queens Head | bar        | ... | Charlie   | 22     |
Transformacje danych z Polars

Łączenie według wielu warunków

restaurants.join_where(
    users,
    pl.col("type") == pl.col("type_right"),
    pl.col("price") <= pl.col("budget")
)
shape: (3, 8)
| user_name | budget | business     | price | type       | ... |
| ---       | ---    | ---          | ---   | ---        | ... |
| str       | i64    | str          | i64   | str        | ... |
|-----------|--------|--------------|-------|------------|-----|
| Alice     | 15     | 7burgers     | 15    | restaurant | ... |
| Bob       | 12     | Costa Coffee | 8     | café       | ... |
| Bob       | 12     | Costa Coffee | 8     | café       | ... |
Transformacje danych z Polars

Łączenie według najnowszych wartości

shape: (4, 3)
| business | date        | rating |
| ---      | ---         | ---    |
| str      | date        | i64    |
|----------|-------------|--------|
| 7burgers | 2025-03-15  | 5      |
| 7burgers | 2025-06-20  | 3      |
| 7burgers | 2025-09-10  | 4      |
| 7burgers | 2025-11-25  | 5      |

$$

  • Zadanie: dopasować każdą recenzję do najbardziej odpowiedniej inspekcji
shape: (3, 4)
| user   | business | date       | score |
| ---    | ---      | ---        | ---   |
| str    | str      | date       | f64   |
|--------|----------|------------|-------|
| Charlie | 7burgers | 2025-05-01 | 3.8   |
| Bob     | 7burgers | 2025-08-01 | 4.2   |
| Alice   | 7burgers | 2025-12-01 | 4.5   |
Transformacje danych z Polars

Łączenie według najnowszych wartości

reviews.sort("date").join_asof(



)

$$

$$

$$

$$

  • join_asof — złącz według określonej daty
Transformacje danych z Polars

Łączenie według najnowszych wartości

reviews.sort("date").join_asof(
    inspections.sort("date"),


)
Transformacje danych z Polars

Łączenie według najnowszych wartości

reviews.sort("date").join_asof(
    inspections.sort("date"),
    on="date",

)
Transformacje danych z Polars

Łączenie według najnowszych wartości

reviews.sort("date").join_asof(
    inspections.sort("date"),
    on="date",
    strategy="backward"
)
| user    | date       | score | ... | rating |
| ---     | ---        | ---   | ... | ---    |
| str     | date       | f64   | ... | i64    |
|---------|------------|-------|-----|--------|
| Charlie | 2025-05-01 | 3.8   | ... | 5      |
| Bob     | 2025-08-01 | 4.2   | ... | 3      |
| Alice   | 2025-12-01 | 4.5   | ... | 5      |
Transformacje danych z Polars

Łączenie według najbliższych wartości

reviews.sort("date").join_asof(
    inspections.sort("date"),
    on="date",
    strategy="nearest"
)
| user    | date       | score | ... | rating |
| ---     | ---        | ---   | ... | ---    |
| str     | date       | f64   | ... | i64    |
|---------|------------|-------|-----|--------|
| Charlie | 2025-05-01 | 3.8   | ... | 5      |
| Bob     | 2025-08-01 | 4.2   | ... | 4      |
| Alice   | 2025-12-01 | 4.5   | ... | 5      |
Transformacje danych z Polars

Wybór strategii

$$

Diagram z dwiema tabelami danych szeregów czasowych, każda z dwoma wierszami.

Transformacje danych z Polars

Wybór strategii — wstecz

$$

Diagram z dwiema tabelami danych szeregów czasowych ze strzałkami łączącymi oba wiersze po lewej z pierwszym wierszem po prawej.

Transformacje danych z Polars

Wybór strategii — najbliższy

$$

Diagram z dwiema tabelami danych szeregów czasowych ze strzałkami łączącymi każdy wiersz po lewej z odpowiadającym mu wierszem po prawej.

Transformacje danych z Polars

Wybór strategii — wprzód

$$

Diagram z dwiema tabelami danych szeregów czasowych ze strzałkami łączącymi oba wiersze po lewej z drugim wierszem po prawej.

Transformacje danych z Polars

Dopasowanie w obrębie grup

reviews.sort("date").join_asof(
    restaurants.sort("date"),
    on="date",

by=["business", "location"]
)
| user    | business        | location    | date       | score | ... | rating |
| ---     | ---             | ---         | ---        | ---   | ... | ---    |
| str     | str             | str         | date       | f64   | ... | i64    |
|---------|-----------------|-------------|------------|-------|-----|--------|
| Charlie | 7burgers        | Wakey Wakey | 2025-05-01 | 3.8   | ... | null   |
| Bob     | Costa Coffee    | City Point  | 2025-05-01 | 4.0   | ... | 5      |
| Bob     | 7burgers        | Wakey Wakey | 2025-08-01 | 4.2   | ... | null   |
| Alice   | 7burgers        | Wakey Wakey | 2025-12-01 | 4.5   | ... | 4      |
| Alice   | The Queens Head | Denman St.  | 2025-12-01 | 4.7   | ... | 5      |
Transformacje danych z Polars

Czas na praktykę!

Transformacje danych z Polars

Preparing Video For Download...