Web scraping con Python

Web Scraping in Python

Thomas Laetsch

Data Scientist, NYU

Fiuto per il business

Cosa cercano le aziende?

  • Confronto prezzi
  • Soddisfazione dei clienti
  • Generazione di lead
  • ...e molto altro!
Web Scraping in Python

È personale

Cosa potresti fare?

  • Cercare i tuoi meme preferiti nei tuoi siti preferiti.
  • Cercare automaticamente annunci per i tuoi gadget preferiti.
  • Fare scraping di social per trovare temi caldi.
  • Fare scraping di blog di cucina per ricette o recensioni.
  • ...e molto altro!
Web Scraping in Python

Sul mio lavoro

AVorg.png

Web Scraping in Python

Sogno a tubi

pipeline_setup_acq_proc.png

Web Scraping in Python

Sogno a tubi: Setup

pipeline_setup.png

Setup

  • Chiarisci cosa vuoi fare.
  • Trova fonti per farlo.
Web Scraping in Python

Sogno a tubi: Acquisizione

pipeline_setup_acq.png

Acquisizione

  • Leggi i dati grezzi online.
  • Formattali per renderli usabili.
Web Scraping in Python

Sogno a tubi: Elaborazione

pipeline_setup_acq_proc.png

Elaborazione

  • Tante opzioni!
Web Scraping in Python

Come si fa?

Il nostro focus

  • Acquisizione!
  • (Usando scrapy via python)
Web Scraping in Python

Ci stai?

Web Scraping in Python

Preparing Video For Download...