Web Scraping cu Python

Web Scraping în Python

Thomas Laetsch

Data Scientist, NYU

Perspectiva de business

Ce caută companiile?

  • Compararea prețurilor
  • Satisfacția clienților
  • Generarea de lead-uri potențiale
  • ...și multe altele!
Web Scraping în Python

Uz personal

Ce ați putea face?

  • Căutarea meme-urilor preferate pe site-urile favorite.
  • Monitorizarea automată a anunțurilor pentru gadget-uri dorite.
  • Extragerea conținutului din rețele sociale pentru subiecte populare.
  • Colectarea rețetelor sau recenziilor de pe bloguri culinare.
  • ...și multe altele!
Web Scraping în Python

Despre activitatea mea

AVorg.png

Web Scraping în Python

Fluxul de date

pipeline_setup_acq_proc.png

Web Scraping în Python

Fluxul de date: Configurare

pipeline_setup.png

Configurare

  • Înțelegerea obiectivului.
  • Identificarea surselor necesare.
Web Scraping în Python

Fluxul de date: Achiziție

pipeline_setup_acq.png

Achiziție

  • Citirea datelor brute din online.
  • Formatarea datelor pentru utilizare.
Web Scraping în Python

Fluxul de date: Procesare

pipeline_setup_acq_proc.png

Procesare

  • Multe opțiuni!
Web Scraping în Python

Cum procedăm?

Focusul nostru

  • Achiziția!
  • (Folosind scrapy prin python)
Web Scraping în Python

Sunteți pregătit?

Web Scraping în Python

Preparing Video For Download...