Kurs özeti

Kabukta Veri İşleme

Susan Sun

Data Person

Komut satırında veri indirme

• curl ve wget ile veri dosyalarını indirme
• Dokümantasyonlar, kılavuzlar (örn. man curl, wget --help)
• Çoklu dosya indirme (örn. wget --limit-rate=200k -i url_list.txt)

Komut satırında veri işleme

• Komut satırı veri araç setine giriş: csvkit
• in2csv ile dosyaları CSV’ye dönüştürme
• csvlook, csvstat ile önizleme
• csvcut, csvgrep ile filtreleme
• csvstack ile birden çok dosyayı birleştirme

Komut satırında veritabanı işlemleri

• sql2csv, csvsql ile veritabanı işlemleri
• csvkit ile gelişmiş SQL benzeri ETL komutları

Komut satırında veri boru hatları kurma

• Komut satırında Python çalıştırma
• pip ile Python paket yönetimi
• cron ile Python modeli ve derleme boru hatlarını otomatikleştirme

Teşekkürler! Hoşça kalın!

Kabukta Veri İşleme