利用 Flask+Redis 维护 IP 代理池

2017-04-25 18:20:18 +08:00
 QKID

代理池的维护

目前有很多网站提供免费代理,而且种类齐全,比如各个地区、各个匿名级别的都有,不过质量实在不敢恭维,毕竟都是免费公开的,可能一个代理无数个人在用也说不定。所以我们需要做的是大量抓取这些免费代理,然后筛选出其中可用的代理存储起来供我们使用,不可用的进行剔除。 阅读全文

2346 次点击
所在节点    Linux
3 条回复
ryd994
2017-04-25 21:27:54 +08:00
循环队列 round robin
leky
2017-04-26 08:11:17 +08:00
类似的实现 不过免费代理速度感人
https://github.com/songjiz/proxy_pump
xiongbiao
2017-04-26 12:38:29 +08:00

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/357303

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX