Iterare optimă în pandas

Scriere eficientă a codului Python

Logan Thomas

Scientific Software Technical Trainer, Enthought

Structura internă pandas

  • Eliminarea buclelor se aplică și în pandas
  • pandas este construit pe NumPy
    • Profitați de eficiența arrayurilor NumPy

alt="Logo biblioteca pandas peste logo pachet NumPy peste logo limbaj Python; linie de la pandas la NumPy cu textul Construit pe și linie de la NumPy la Python cu textul Construit pe"

Scriere eficientă a codului Python
print(baseball_df)
  Team League  Year   RS   RA   W    G  Playoffs
0  ARI     NL  2012  734  688  81  162         0
1  ATL     NL  2012  700  600  94  162         1
2  BAL     AL  2012  712  705  93  162         1
...
wins_np = baseball_df['W'].values

print(type(wins_np))
<class 'numpy.ndarray'>
print(wins_np)
[ 81  94  93 ...]
Scriere eficientă a codului Python

Puterea vectorizării

  • Broadcasting (vectorizarea) este extrem de eficient!
baseball_df['RS'].values - baseball_df['RA'].values
array([  46,  100,    7, ...,  188,  110, -117])
Scriere eficientă a codului Python

Diferențe de run-uri cu arrayuri

run_diffs_np = baseball_df['RS'].values - baseball_df['RA'].values

baseball_df['RD'] = run_diffs_np print(baseball_df)
     Team League  Year   RS   RA    W    G  Playoffs   RD
0     ARI     NL  2012  734  688   81  162         0   46
1     ATL     NL  2012  700  600   94  162         1  100
2     BAL     AL  2012  712  705   93  162         1    7
3     BOS     AL  2012  734  806   69  162         0  -72
4     CHC     NL  2012  613  759   61  162         0 -146
...
Scriere eficientă a codului Python

Compararea abordărilor

%%timeit
run_diffs_np = baseball_df['RS'].values - baseball_df['RA'].values

baseball_df['RD'] = run_diffs_np
124 µs ± 1.47 µs per loop (mean ± std. dev. of 7 runs, 10000 loops each)
Scriere eficientă a codului Python

Să exersăm!

Scriere eficientă a codului Python

Preparing Video For Download...