Profiling kode untuk penggunaan memori

Menulis Kode Python yang Efisien

Logan Thomas

Scientific Software Technical Trainer, Enthought

Pendekatan cepat dan sederhana

import sys

nums_list = [*range(1000)]
sys.getsizeof(nums_list)

import numpy as np

nums_np = np.array(range(1000))
sys.getsizeof(nums_np)

Profiling kode: memori

Statistik rinci konsumsi memori
Analisis per baris
Paket yang digunakan: memory_profiler

pip install memory_profiler

Menggunakan paket memory_profiler

%load_ext memory_profiler

%mprun -f convert_units convert_units(heroes, hts, wts)

Profiling kode: memori

Fungsi harus diimpor saat memakai memory_profiler
- hero_funcs.py

from hero_funcs import convert_units

%load_ext memory_profiler

%mprun -f convert_units convert_units(heroes, hts, wts)

Output %mprun

%mprun -f convert_units convert_units(heroes, hts, wts)

alt=”Perintah magic mprun dengan output tabel yang merangkum statistik profiling penggunaan memori”

Output %mprun

%mprun -f convert_units convert_units(heroes, hts, wts)

alt=”Perintah magic mprun dengan output tabel yang merangkum statistik profiling penggunaan memori dengan kolom Line # disorot”

Output %mprun

%mprun -f convert_units convert_units(heroes, hts, wts)

alt=”Perintah magic mprun dengan output tabel yang merangkum statistik profiling penggunaan memori dengan kolom Mem usage disorot”

Output %mprun

%mprun -f convert_units convert_units(heroes, hts, wts)

alt=”Perintah magic mprun dengan output tabel yang merangkum statistik profiling penggunaan memori dengan kolom Increment disorot”

Output %mprun

%mprun -f convert_units convert_units(heroes, hts, wts)

alt=”Perintah magic mprun dengan output tabel yang merangkum statistik profiling penggunaan memori dengan kolom Line contents disorot”

Output %mprun

%mprun -f convert_units convert_units(heroes, hts, wts)

alt=”Perintah magic mprun dengan output tabel yang merangkum statistik profiling penggunaan memori”

Catatan pada output %mprun

%mprun -f convert_units convert_units(heroes, hts, wts)

alt=”Perintah magic mprun dengan output tabel yang merangkum statistik profiling penggunaan memori dengan satuan mebibyte (MiB) pada output disorot”

Catatan pada output %mprun

Data pada contoh ini adalah sampel acak 35.000 pahlawan.

(bukan dataset 480 superhero asli)

%mprun -f convert_units convert_units(heroes, hts, wts)

alt=”Perintah magic mprun dengan output tabel yang merangkum statistik profiling penggunaan memori”

Catatan pada output %mprun

Alokasi memori kecil dapat menghasilkan output 0.0 MiB.

(menggunakan dataset 480 superhero asli)

%mprun -f convert_units convert_units(heroes, hts, wts)

alt=”Perintah magic mprun dengan output tabel yang merangkum statistik profiling penggunaan memori dengan semua baris di kolom Increment menunjukkan 0.0 MiB”

Catatan pada output %mprun

Memeriksa memori dengan mengkueri sistem operasi
Hasil dapat berbeda antar platform dan antar run
- Tetap bisa membandingkan setiap baris kode berdasarkan konsumsi memori

Ayo berlatih!

Menulis Kode Python yang Efisien