Herramientas de usuario

Herramientas del sitio


taller-web-scraping-hirikilabs:arte

Diferencias

Muestra las diferencias entre dos versiones de la página.

Enlace a la vista de comparación

Ambos lados, revisión anteriorRevisión previa
Próxima revisión
Revisión previa
Última revisiónAmbos lados, revisión siguiente
taller-web-scraping-hirikilabs:arte [2018/02/07 18:52] zyrano66taller-web-scraping-hirikilabs:arte [2018/02/07 19:46] numeroteca
Línea 1: Línea 1:
 +====== Obras del Museo del Prado ======
 +
 +
 Intentamos sacar litografias y grabados de arte de Milanuncios, desestimamos mil anuncios por la cantidad de filtros que nos impiden objetivo. Intentamos sacar litografias y grabados de arte de Milanuncios, desestimamos mil anuncios por la cantidad de filtros que nos impiden objetivo.
  
Línea 10: Línea 13:
  
  
 +<code>import urllib2
 +from bs4 import BeautifulSoup
 +
 +# Soy Mozilla
 +headers = {
 +    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 Safari/537.36'
 +}
 +
 +for counter in range(1,1111):
 +
 +    url = 'https://www.museodelprado.es/coleccion/obras-de-arte?searchObras=*********|pagina='+str(counter)
 +
 +    # Get URL
 +    response = urllib2.Request(url,headers=headers)
 +    pagedata = urllib2.urlopen(response)
 +    html = pagedata.read()
 +
 +    # Get links
 +    soup = BeautifulSoup(html, "html.parser")
 +    links = soup.select('.mostrable dt a')
 +
 +    for link in links:
 +        print link.get_text()
 +
 +
 +</code>
 +
 +Funciona perfectamente con pequeño problema de duplicados que repararemos.
 +
 +Creadores Cristina Miranda cristmiranda@telefonica.net 
 +Oscar Frutos pcorax@gmail.com
taller-web-scraping-hirikilabs/arte.txt · Última modificación: 2018/03/20 00:23 por numeroteca