开发一个 IP 共享组织软件怎样？这样就解决找爬虫代理 IP 的问题了，还无法被封杀 （学语言不知道拿什么来练手的可以试试）

2016-11-25 11:52:19 +08:00
 doubleflower
比如写一个软件，运行在本地，对外提供一个 HTTP 代理 API 。

然后，就可能拿这个软件来成立各种爬虫分享组织，入会的条件是运行这个软件在自已的电脑上，这样会员之间的 IP 就共享了。

这个 API 需提供一个认证功能，比如要加入哪个共享组织 /密码，可能还要做积分功能防止只用不分享（可能需要一个 VPS 来管理会员和积分）。

这个软件应该不超过 2000 行代码。

怎样？有人想试吗
2791 次点击
所在节点    奇思妙想
11 条回复
nashsu
2016-11-25 11:59:57 +08:00
请参考 luminati
cxh116
2016-11-25 12:23:42 +08:00
访问或上传非法信息怎么处理？
doubleflower
2016-11-25 12:23:54 +08:00
@nashsu 卧槽原理基本一样，不过价格比较感人。
doubleflower
2016-11-25 12:24:33 +08:00
@cxh116 只支持 http get 请求啊，无法上传的
missdeer
2016-11-25 12:41:28 +08:00
http post 是爬虫必须的吧
ksc010
2016-11-25 13:22:06 +08:00
这个软件我已经写出来了，打算自己内部使用的
但是安全隐患不好解决
doubleflower
2016-11-25 18:58:06 +08:00
@ksc010 那就自已买个 VPS 入会，这样就没安全问题了。
yankebupt
2016-11-25 19:25:05 +08:00
安全大问题。大一点的反爬担当只要入个会申请爬个蜜罐，就能抓到大量爬虫 ip 段用来增强验证码强度，甚至可以专门每天爬蜜罐用来把 ip 库批发给其他反爬，你安全又不能安全到洋葱那种程度
wizardforcel
2016-11-27 12:18:36 +08:00
我基本不用共享，需要的时候自己扫。
jyf
2016-11-28 16:37:05 +08:00
昨天刚跟基友开了个这项目
ji4ozhu
2017-05-11 14:35:44 +08:00
请参考 www.54nb.com

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/323203

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX