Sluta gissa – börja skrapa!

Webbskrapning i Python

Thomas Laetsch

Data Scientist, NYU

Mata maskinen

Skrapningsfärdigheter

• Mål: Skrapa en webbplats automatiskt
• Hur? Vi väljer att använda scrapy
• Hur? Vi behöver arbeta med:
  • Selector- och Response-objekt
  • Kanske även skapa en Spider
• Hur? Vi behöver lära oss XPath eller CSS-lokaliseringsnotation
• Hur? Förstå HTML-strukturen

Vad kan du?

• HTML-struktur
• XPath och CSS-lokaliseringsnotation
• Hur man använder Selector- och Response-objekt i scrapy
• Hur man konfigurerar en spider
• Hur man skrapar webben

EOT

Webbskrapning i Python