Manipulera data med SQL-syntax
Databehandling i kommandoraden
Susan Sun
Data Person
csvsql: dokumentation
csvsql:
- tillämpar SQL-satser på en eller flera CSV-filer
- skapar en SQL-databas i minnet som tillfälligt lagrar filen som bearbetas
- passar bara för små till medelstora filer
Dokumentation:
csvsql -h
usage: csvsql [-h] [-d DELIMITER] [-t] [-q QUOTECHAR] [-u {0,1,2,3}] [-b]
[-p ESCAPECHAR] [-z FIELD_SIZE_LIMIT] [-e ENCODING] [-L LOCALE]
csvsql: tillämpa SQL på en lokal CSV-fil
Exempelsyntax:
ls
Spotify_MusicAttributes.csv
csvsql: tillämpa SQL på en lokal CSV-fil
Exempelsyntax:
csvsql --query "SELECT * FROM Spotify_MusicAttributes LIMIT 1" \
Spotify_MusicAttributes.csv
track_id,danceability,duration_ms,instrumentalness,loudness,tempo,time_signature
118GQ70Sp6pMqn6w1oKuki,0.787,124016.0,0.784,-10.457,119.988,4.0
csvsql: tillämpa SQL på en lokal CSV-fil
Exempelsyntax:
csvsql --query "SELECT * FROM Spotify_MusicAttributes LIMIT 1" \
data/Spotify_MusicAttributes.csv | csvlook
| track_id | danceability | duration_ms | instrumentalness ...
| ---------------------- | ------------ | ----------- | ---------------- ...
| 118GQ70Sp6pMqn6w1oKuki | 0.787 | 124,016 | 0.784 ...
csvsql: tillämpa SQL på en lokal CSV-fil
Exempelsyntax:
csvsql --query "SELECT * FROM Spotify_MusicAttributes LIMIT 1" \
data/Spotify_MusicAttributes.csv > OneSongFile.csv
ls
OneSongFile.csv
csvsql: sammanfoga CSV-filer med SQL-syntax
Exempelsyntax:
csvsql --query "SELECT * FROM file_a INNER JOIN file_b..." file_a.csv file_b.csv
Obs!
- SQL-frågan måste skrivas på en rad, utan radbrytningar
- Ange CSV-filerna i den ordning de förekommer i SQL
Nu kör vi en övning!
Databehandling i kommandoraden
