全员接单时代! IP 代理池项目完善中!

2017-11-18 12:52:23 +08:00
 golmic

这是一个 ip 代理池项目

https://github.com/lujqme/proxy_pool

还有一个 Python 数据交流社群,数百名小伙伴们在这里交流数据抓取数据分析以及数据挖掘的内容,如果你有兴趣,也欢迎你加入!

http://pyanalysis.org/

微信群现有用户数百人,考虑增开分群。

为鼓励群里小伙伴动手写代码,让小伙伴们学习数据抓取的内容,群主会为每个成功贡献代码的小伙伴发红包,现在群昵称为 @指间沙、 @Vincent--LC 等数名小伙伴已经获得了近百元的红包奖励~~

如果你也对数据感兴趣,或者闲来无聊想写点代码,又有钱赚何乐而不为呢?

群早已超 100 人不能扫码进入,请加微信拉你入群,方式见

http://pyanalysis.org/

5878 次点击
所在节点    分享创造
29 条回复
golmic
2017-11-20 12:26:09 +08:00
@gamecreating #19 其他小伙伴没有反馈。我北京联通正常
Soar360
2017-11-21 11:28:48 +08:00
爬虫工程师的自(。・∀・)ノ゙嗨
https://proxy.coderbusy.com/
naiba
2017-11-22 09:15:35 +08:00
@Soar360 666 啊,ip 是哪里来的
golmic
2017-11-22 12:13:06 +08:00
@naiba 互联网采集
beshe
2017-11-23 15:14:43 +08:00
github 上得星较多的一个相似项目

https://github.com/jhao104/proxy_pool
golmic
2017-11-23 16:24:31 +08:00
@beshe #25 这个项目我读过源码,存在多线程异步锁未释放问题,排查起来异常复杂,并且现在你去看看 issue 很多人提这个问题。所以自己基于 Scrapy 重写了一套,我也写了一套更完善的打分系统,后续也会开源出来。
doun
2017-11-25 08:21:47 +08:00
不是用 TOR 来做 IP 池比较好吗?
sangmong
2017-11-27 21:50:09 +08:00
如何区分雌性雄性?
sangmong
2017-11-27 21:50:33 +08:00
回复错了,尴尬。。。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/407455

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX