抓帖子 有些帖子被隐藏了。 如何才能忽略这些隐藏的帖子
def parse_item(self, response):
l = ItemLoader(item=MeizituItem(), response=response)
l.add_xpath('name', '//html/body/div[1]/div[2]/div/div[2]/div[1]/div[1]/article/header/div[1]/h1/text()')
l.add_xpath('tags', '//html/body/div[1]/div[2]/div/div[2]/div[1]/div[1]/article/header/div[2]/div[2]/span/ul/li/a/div/text()')
image_url=l.add_xpath('image_urls', '//html/body/div[1]/div[2]/div/div[2]/div[1]/div[1]/article/div[1]/div/div/img/@src',Identity())
print image_url
l.add_value('url', response.url)
yield l.load_item()
我现在这样抓 如果 image_url 是抓不到的 好像就会报错。。
1
imcocc 2016-08-23 20:51:32 +08:00 via iPhone
看看能写正则忽略不
|