Představení pomocí vlastních user agentů

Web Scraping v R

Timo Grossenbacher

Instructor

Představte se!

  • Webový server již zaznamenává vaši IP adresu
  • Lepší je se explicitně identifikovat
  • Existuje na to HTTP hlavička!

Příklad požadavku

1 https://developer.mozilla.org/en-US/docs/Web/HTTP/Overview
Web Scraping v R

Úprava hlaviček pomocí httr

response <- GET('http://example.com', user_agent("Hey, it's me, Timo! 
    Reach me at [email protected]."))

Alternativně:

set_config(add_headers(`User-Agent` = "Hey, it's me, Timo!
    Reach me at [email protected]."))
response <- GET('http://example.com')
Web Scraping v R

Pojďme to vyzkoušet!

Web Scraping v R

Preparing Video For Download...