भविष्य की मैपिंग

R में पैरेलल प्रोग्रामिंग

Nabeel Imam

Data Scientist

हम अपने futures जानते हैं

report <- "<important report text>"

task_future <- future({
  print("Hi, please find attached the report.")
  report
})

purrr के साथ मैपिंग

library(purrr)


numbers <- 1:1000000
map(numbers, sqrt)

[[1]]
[1] 1

[[2]]
[1] 1.414214

[[3]]
[1] 1.732051

[[4]]
[1] 2
...

map के रूपांतर

map_dbl(numbers, sqrt)

 [1]  1.000000  1.414214  1.732051 
 [4]  2.000000  2.236068  2.449490
 [7]  2.645751  2.828427  3.000000  
[10]  3.162278  3.316625  3.464102
[13]  3.605551  3.741657  3.872983
  ...

map + "_dbl" suffix
- डबल या दशमलव आउटपुट के लिए

परिणाम एक वेक्टर के रूप में मिलता है

map के रूपांतर

map_chr(numbers, sqrt)

 [1] "1.000000"  "1.414214"  "1.732051"
 [4] "2.000000"  "2.236068"  "2.449490"
 [7] "2.645751"  "2.828427"  "3.000000"
[10] "3.162278"  "3.316625"  "3.464102"
[13] "3.605551"  "3.741657"  "3.872983"
  ...

map + "_chr" suffix
- कैरेक्टर/स्ट्रिंग आउटपुट के लिए

कैरेक्टर स्ट्रिंग्स का वेक्टर

map के रूपांतर

फंक्शन

map()
map_chr()
map_dbl()
map_int()
map_lgl()

आउटपुट फॉर्मेट

वेक्टर, डेटा फ्रेम आदि की लिस्ट
कैरेक्टर/स्ट्रिंग (एक मान)
डबल/दशमलव संख्या (एक मान)
इंटीजर/पूर्णांक (एक मान)
लॉजिकल/बूलियन (एक मान)

टाइप स्पेसिफिकेशन

microbenchmark(
  "map" = map(numbers, sqrt),
  "map_dbl" = map_dbl(numbers, sqrt),
  "map_chr" = map_chr(numbers, sqrt),
  times = 10
)

Unit: milliseconds
     expr     min    mean     max neval
1     map  794.20 1254.46 1904.02    10
2 map_dbl  889.33 1067.41 1496.56    10
3 map_chr 1735.96 1934.97 2269.59    10

future + purrr = furrr

purrr

Sequential

library(purrr)
map_dbl(1:1000000, sqrt)

furrr

Sequential

library(furrr)
future_map_dbl(1:1000000, sqrt)

समानांतर में furrr

n_cores <- detectCore() - 2


plan(multisession, workers = n_cores)


future_map_dbl(1:1000000, sqrt) # Future enabled map_dbl()


plan(sequential)

   [1]  1.000000  1.414214  1.732051  2.000000  2.236068  2.449490  2.645751
   [8]  2.828427  3.000000  3.162278  3.316625  3.464102  3.605551  3.741657
  [15]  3.872983  4.000000  4.123106  4.242641  4.358899  4.472136  4.582576

future_map और परिवार

purrr फंक्शन

map()
map_chr()
map_dbl()
map_int()
map_lgl()

future-enabled furrr फंक्शन

future_map()
future_map_chr()
future_map_dbl()
future_map_int()
future_map_lgl()

furrr का लाभ

इनपुट की एक सीरीज़ input_list और मैप करने वाला फंक्शन calculate() दिया है:

future_list <- lapply(input_list, function (x) future(calculate(x)))

result_list <- value(future_list)

# Further processing of result_list to make a numeric vector

library(furrr)

# न्यूमेरिक वेक्टर पाने के लिए future_map_dbl() वेरिएंट का उपयोग
result_list <- future_map_dbl(input_list, calculate)

अभ्यास करते हैं!

R में पैरेलल प्रोग्रामिंग