Python 爬虫

[TechF1x]

爬取 zealer 的的图可以，但爬 Apple 官网的图失败？是被反爬了，需要进行伪装？ 1 import urllib2 2 req = urllib2.urlopen('https://www.apple.com/cn/iphone-x/') 3 buf = req.read() 4 5 import re 6 listurl = re.findall(r'https:.+.jpg',buf) 7 print listurl 8 9 10 i = 0 11 for url in listurl: 12 f = open(str(i)+'.jpg',"wb") 13 req = urllib2.urlopen(url) 14 buf = req.read() 15 f.write(buf) 16 i = i+1 ~

[coderluan]

需要进行伪装，先加 header 和 cookie，不行再上代理试试

[crab]

Apple 官网应该没反爬虫，只是 http 请求协议头严格些。

[windfarer]

记得加 referer

[TechF1x]

@coderluan ok,谢谢，试试

[TechF1x]

@windfarer 好的