Webscraping met Python

Webscraping in Python

Thomas Laetsch

Data Scientist, NYU

Zakelijk inzicht

Waar kijken bedrijven naar?

  • Prijzen vergelijken
  • Klanttevredenheid
  • Leads genereren
  • …en meer!
Webscraping in Python

Persoonlijk

Wat kun jij doen?

  • Zoek je favoriete memes op je favoriete sites.
  • Scan automatisch advertenties voor je favoriete gadgets.
  • Scrape socials voor trending topics.
  • Scrape kookblogs voor bepaalde recepten of reviews.
  • …en meer!
Webscraping in Python

Over mijn werk

AVorg.png

Webscraping in Python

Pipe Dream

pipeline_setup_acq_proc.png

Webscraping in Python

Pipe Dream: Setup

pipeline_setup.png

Setup

  • Bepaal wat je wilt doen.
  • Vind bronnen die helpen.
Webscraping in Python

Pipe Dream: Acquisitie

pipeline_setup_acq.png

Acquisitie

  • Ruwe online data inlezen.
  • Data bruikbaar maken.
Webscraping in Python

Pipe Dream: Processing

pipeline_setup_acq_proc.png

Processing

  • Veel opties!
Webscraping in Python

Hoe pak je dat aan?

Onze focus

  • Acquisitie!
  • (Met scrapy via python)
Webscraping in Python

Doe je mee?

Webscraping in Python

Preparing Video For Download...