Identificando quem é você com user agents personalizados

Web Scraping em R

Timo Grossenbacher

Instructor

Mostre quem você é!

  • O servidor web já registra seu endereço IP
  • Melhor se identificar explicitamente
  • Existe um cabeçalho HTTP para isso!

Um exemplo de requisição

1 https://developer.mozilla.org/en-US/docs/Web/HTTP/Overview
Web Scraping em R

Modificar cabeçalhos com httr

response <- GET('http://example.com', user_agent("Hey, it's me, Timo! 
    Reach me at [email protected]."))

Alternativa:

set_config(add_headers(`User-Agent` = "Hey, it's me, Timo!
    Reach me at [email protected]."))
response <- GET('http://example.com')
Web Scraping em R

Vamos tentar isto!

Web Scraping em R

Preparing Video For Download...