bigmemory'nin sınırlamaları

R'de Ölçeklenebilir Veri İşleme

Michael Kane

Assistant Professor, Yale University

bigmemory'yi nerede kullanabilirsin?

  • bigmemory'yi şu durumlarda kullanabilirsin:
    • matrisler
    • yoğun veri
    • sayısal değerler
  • Altyapı veri yapıları, hızlı model kurma için düşük seviyeli lineer cebir kütüphaneleriyle uyumludur
  • Farklı sütun türlerin varsa, ff paketini deneyebilirsin
R'de Ölçeklenebilir Veri İşleme

Disk erişimini anlama

Bir big.matrix, rastgele erişim için tasarlanmış bir veri yapısıdır

R'de Ölçeklenebilir Veri İşleme

Rastgele erişimin dezavantajları

  • Var olan bir big.matrix nesnesine satır ya da sütun ekleyemezsin
  • Tüm matrisi tek bir büyük blokta tutacak kadar disk alanın olmalı
R'de Ölçeklenebilir Veri İşleme

Hadi pratik yapalım!

R'de Ölçeklenebilir Veri İşleme

Preparing Video For Download...