Introducere în Polars DataFrame

Introducere în Polars

Liam Brannigan

Data Scientist and Polars Contributor

Cunoașteți instructorul

$$

  • Liam Brannigan, Lead Data Scientist
  • Specialist în ML și Inginerie a Datelor
  • Contributor Polars

Fotografia de profil a instructorului.

Introducere în Polars

Date tabelare

shape: (49, 8)
| name        | type    | price | bedrooms | doubles | singles | review | beach |
| ---         | ---     | ---   | ---      | ---     | ---     | ---    | ---   |
| str         | str     | i64   | i64      | i64     | i64     | f64    | bool  |
|-------------|---------|-------|----------|---------|---------|--------|-------|
| Waves       | Cottage | 540   | 4        | 1       | 2       | 8.9    | false |
| Seashells   | Cottage | 540   | 4        | 2       | 2       | 8.7    | true  |
| Lake view   | Cottage | 714   | 3        | 1       | 4       | 9.2    | true  |
| Piran View  | null    | 775   | null     | 1       | 3       | 9.6    | false |
| Palma Villa | Cottage | 1772  | 4        | 1       | 2       | 9.6    | true  |
Introducere în Polars

Imagine alăturată cu un urs polar mergând prin zăpadă și un panda într-o pădure.

  • Polars este în general mai rapid decât Pandas → calcul paralel
  • Modul lazy din Polars permite interogări optimizate
Introducere în Polars

Logourile Apache Arrow și Rust.

  • Apache Arrow: stochează date tabelare în memorie
  • Rust: limbaj rapid pentru procesarea datelor
Introducere în Polars

O schemă a unei baze de date pentru a ilustra încărcarea datelor.

  • Încărcarea și inspectarea datelor
Introducere în Polars

O schemă a unei baze de date și a unor roți dințate pentru a ilustra o transformare.

  • Încărcarea și inspectarea datelor
  • Transformarea datelor și optimizare
Introducere în Polars

O schemă a unei baze de date, roți dințate și un grafic pentru a ilustra analiza.

  • Încărcarea și inspectarea datelor
  • Transformarea datelor și optimizare
  • Analiza datelor
Introducere în Polars

Citirea unui fișier CSV

import polars as pl


rentals = pl.read_csv("vacation_rentals.csv")
Introducere în Polars

Primele rânduri ale unui DataFrame

rentals.head(3)

Primele rânduri ale DataFrame-ului rentals.

Introducere în Polars

Primele rânduri ale unui DataFrame

rentals.head(3)

DataFrame-ul rentals cu dimensiunea evidențiată.

Introducere în Polars

Primele rânduri ale unui DataFrame

rentals.head(3)

DataFrame-ul rentals cu prima coloană evidențiată.

  • dtype: tipul de date dintr-o coloană
Introducere în Polars

Primele rânduri ale unui DataFrame

rentals.head(3)

DataFrame-ul rentals cu coloana rentals evidențiată.

Introducere în Polars

Ultimele rânduri ale unui DataFrame

rentals.tail()

shape: (5, 8)
| name                | type      | price | bedrooms | doubles | singles | review | beach |
| ---                 | ---       | ---   | ---      | ---     | ---     | ---    | ---   |
| str                 | str       | i64   | i64      | i64     | i64     | f64    | bool  |
|---------------------|-----------|-------|----------|---------|---------|--------|-------|
| Hengar Manor House  | Cottage   | 615   | 4        | 1       | 5       | 9.4    | false |
| Tudor Cottage Hayle | Cottage   | 489   | 3        | 2       | 3       | 8.9    | false |
| Tolcarne Apartments | Apartment | 1764  | 3        | 1       | 4       | 9.3    | true  |
| Tolcarne Apartments | Apartment | 1605  | 3        | 1       | 4       | 9.3    | true  |
| Tehidy Holiday Park | Cottage   | 637   | 4        | 2       | 4       | 9.0    | false |
Introducere în Polars

Metadatele unui DataFrame

rentals.shape

(49, 8)

rentals.columns

['name', 'type', 'price', 'bedrooms', 'doubles', 'singles', 'review', 'beach']
Introducere în Polars

Schema unui DataFrame

rentals.schema

Schema([('name', String),
        ('type', String),
        ('price', Int64),
        ('bedrooms', Int64),
        ('doubles', Int64),
        ('singles', Int64),
        ('review', Float64),
        ('beach', Boolean)])
Introducere în Polars

Inspectarea unui DataFrame

rentals.glimpse()

Rows: 49
Columns: 8
$ name      <str> 'Waves', 'Seashells', 'Lake view', 'Piran View',...
$ type      <str> 'Cottage', 'Cottage', 'Cottage', None, 'Cottage',...
$ price     <i64> 540, 540, 714, 775, 1772, 934, 1947, 1026, 705, 863
$ bedrooms  <i64> 4, 4, 3, None, 4, 3, 4, 3, 4, 3
$ doubles   <i64> 1, 2, 1, 1, 1, 1, 1, 1, 1, 1
$ singles   <i64> 2, 2, 4, 3, 2, 4, 2, 4, 2, 2
$ review    <f64> 8.9, 8.7, 9.2, 9.6, 9.6, 8.6, 9.6, 8.6, 9.7, 9.1
$ beach    <bool> False, True, True, False, True, True, True, True, True, True
Introducere în Polars

Să exersăm!

Introducere în Polars

Preparing Video For Download...