Web scraping en Python
Thomas Laetsch
Data Scientist, NYU
/ por > (salvo el primer carácter)/html/body/divhtml > body > div// por un espacio (salvo el primer carácter)//div/span//pdiv > span p[N] por :nth-of-type(N)//div/p[2]div > p:nth-of-type(2)XPATH
xpath = '/html/body//div/p[2]'
CSS
css = 'html > body div > p:nth-of-type(2)'
.p.class-1 selecciona todos los párrafos con la clase class-1#div#uid selecciona el div con id igual a uidSelecciona párrafos dentro de la clase class1:
css_locator = 'div#uid > p.class1'
Selecciona todos los elementos cuya clase sea class1:
css_locator = '.class1'
css = '.class1'

xpath = '//*[@class="class1"]'

xpath = '//*[contains(@class,"class1")]'

from scrapy import Selector
html = '''
<html>
<body>
<div class="hello datacamp">
<p>¡Hola, mundo!</p>
</div>
<p>¡Disfruta DataCamp!</p>
</body>
</html>
'''
sel = Selector( text = html )
>>> sel.css("div > p")
out: [<Selector xpath='...' data='<p>¡Hola, mundo!</p>'>]
>>> sel.css("div > p").extract()
out: [ '<p>¡Hola, mundo!</p>' ]
Web scraping en Python