Hör auf zu kratzen, fang an zu scrapen!

Web Scraping in Python

Thomas Laetsch

Data Scientist, NYU

Die Maschine füttern

Scraping-Skills

• Ziel: Eine Website automatisch scrapen
• Wie? Wir nutzen scrapy
• Wie? Wir arbeiten mit:
  • Selector- und Response-Objekten
  • Evtl. einem Spider
• Wie? XPath- oder CSS-Selektoren lernen
• Wie? HTML-Struktur verstehen

Was kannst du schon?

• HTML-Struktur
• XPath- und CSS-Selektoren
• Nutzung von Selector- und Response-Objekten in scrapy
• Einen Spider aufsetzen
• Das Web scrapen

EOT

Web Scraping in Python