爬豆瓣小组的图片,经常被禁,怎么破,想尽快爬取最新的帖子

2016-03-24 01:18:23 +08:00
 8674925

这是我的网站

看图君

3391 次点击
所在节点    Python
4 条回复
packenx
2016-03-24 06:23:50 +08:00
搜 联通 缓存 cdn ,或许可以解决
hufuman
2016-03-24 13:13:16 +08:00
你确定这样不会被打?
hanbingtel
2016-03-25 05:56:19 +08:00
您需要个过硬的代理池,请问您一天大概要请求多少次啊?
8674925
2016-03-25 19:42:39 +08:00
@hanbingtel 最少几百,最多几千次吧

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/265917

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX