Manipolare i dati con la sintassi SQL

Elaborazione dei dati in Shell

Susan Sun

Data Person

csvsql: documentazione

csvsql:

  • applica istruzioni SQL a uno o più file CSV
  • crea un database SQL in memoria che ospita temporaneamente il file elaborato
  • adatto solo a file piccoli o medi

Documentazione:

csvsql -h
usage: csvsql [-h] [-d DELIMITER] [-t] [-q QUOTECHAR] [-u {0,1,2,3}] [-b]
              [-p ESCAPECHAR] [-z FIELD_SIZE_LIMIT] [-e ENCODING] [-L LOCALE]
Elaborazione dei dati in Shell

csvsql: applicare SQL a un CSV locale

Sintassi d'esempio:

ls
Spotify_MusicAttributes.csv
Elaborazione dei dati in Shell

csvsql: applicare SQL a un CSV locale

Sintassi d'esempio:

csvsql --query "SELECT * FROM Spotify_MusicAttributes LIMIT 1" \
    Spotify_MusicAttributes.csv
track_id,danceability,duration_ms,instrumentalness,loudness,tempo,time_signature
118GQ70Sp6pMqn6w1oKuki,0.787,124016.0,0.784,-10.457,119.988,4.0
Elaborazione dei dati in Shell

csvsql: applicare SQL a un CSV locale

Sintassi d'esempio:

csvsql --query "SELECT * FROM Spotify_MusicAttributes LIMIT 1" \
    data/Spotify_MusicAttributes.csv | csvlook
| track_id               | danceability | duration_ms | instrumentalness ...
| ---------------------- | ------------ | ----------- | ---------------- ...
| 118GQ70Sp6pMqn6w1oKuki |        0.787 |     124,016 |            0.784 ...
Elaborazione dei dati in Shell

csvsql: applicare SQL a un CSV locale

Sintassi d'esempio:

csvsql --query "SELECT * FROM Spotify_MusicAttributes LIMIT 1" \
    data/Spotify_MusicAttributes.csv > OneSongFile.csv
ls
OneSongFile.csv
Elaborazione dei dati in Shell

csvsql: unire CSV con sintassi SQL

Sintassi d'esempio:

csvsql --query "SELECT * FROM file_a INNER JOIN file_b..." file_a.csv file_b.csv

Nota:

  • La query SQL deve essere su una sola riga, senza a capo
  • Indica i file CSV nell'ordine usato nella query SQL
Elaborazione dei dati in Shell

Ayo berlatih!

Elaborazione dei dati in Shell

Preparing Video For Download...