V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  dgivan  ›  全部回复第 1 页 / 共 1 页
回复总数  3
2017-04-09 10:40:33 +08:00
回复了 SummerSun 创建的主题 Python 爬虫代理 IP 推荐
你可以用一些收费的代理
比如阿布云代理 站二爷代理 云代理,等等
2016-09-18 15:42:23 +08:00
回复了 pc10201 创建的主题 Python 如何采集大众点评网的千万数据?它有严格的反爬虫措施
每一,别一天干掉一个站,慢点爬,设置下载延迟
第二,修改请求头,浏览器
第三,用高质量代理。企业建议用:阿布云代理等等
第四,禁止 Cookie
第五,分布式爬取
可以用下这个代理: http://www.abuyun.com
2016-09-18 15:40:35 +08:00
回复了 ccbikai 创建的主题 程序员 大家都是怎么处理爬虫代理问题的?
。。。。。。。。。。。。用高质量的代理 IP 吧。
阿布云代理,曲以代理。等等
http://www.abuyun.com
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1066 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 12ms · UTC 20:26 · PVG 04:26 · LAX 12:26 · JFK 15:26
Developed with CodeLauncher
♥ Do have faith in what you're doing.