[开源] 使用爬虫代理框架 IPProxyTool 提取到的免费代理 IP 抓取 Unity3D 官方插件商店 AssetStore 共 34131 个插件信息

2017-02-21 09:17:04 +08:00
 awolfly9

之前开源爬虫代理框架 IPProxyTool 收到很多 V 友的好评。但是也有一些疑惑,所以使用 IPProxyTool 抓取并验证后的代理 IP 抓取 unity 官方插件商店 [AssetStore] ( https://www.assetstore.unity3d.com/) 历时四个小时共抓取 AssetStore 商店 34131 个插件信息。而且没有被 AssetStore 反爬策略发现。验证了 IPProxyTool 工具提取到的代理 IP 的有效性。

IPProxyTool github 地址: https://github.com/awolfly9/IPProxyTool
抓取 Unity 官方插件商店 AssetStore github 地址: https://github.com/awolfly9/unity

2887 次点击
所在节点    Python
4 条回复
nyanyh
2017-02-21 09:27:12 +08:00
这段介绍文字有种毕业论文的感觉
awolfly9
2017-02-21 09:31:21 +08:00
@nyanyh 表示没有写过毕业论文
voidtools
2017-02-21 09:51:15 +08:00
系编译好了的吗
popoer
2017-02-21 23:44:10 +08:00
不错啊,现在花钱买的感觉也不怎么样,试试楼主这个

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/341947

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX