写了一个爬虫,抓取的是 https, 间隔 3 秒,抓取十来页后,就出现 ssl 握手失败,是什么原因?

2017-01-11 17:42:02 +08:00
 ruandao
2202 次点击
所在节点    问与答
5 条回复
ltux
2017-01-11 17:43:49 +08:00
被反爬虫机制干掉了
akira
2017-01-11 17:45:06 +08:00
间隔拉长
多 ip 轮换
ruandao
2017-01-11 17:48:27 +08:00
有想过,可是 10 来页就翻爬虫,没那么变态吧。。。我还间隔了 3 秒
@ltux
xfspace
2017-01-11 18:03:22 +08:00
3 秒翻一页,半分钟翻十页
不封你封谁
nfroot
2017-01-12 01:58:24 +08:00
@akira
@xfspace

无公网 IP 的集体用户哭晕在厕所……

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/333925

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX