Scylla——开源免费的优秀代理 IP 池：自动验证、JSON API、基于 React 的 Web UI、Docker 支持

[WildCat]

GitHub：https://github.com/imWildCat/scylla

中文文档：https://scylla.wildcat.io/zh/latest/

自己是一个爬虫爱好者，有时候爬虫写的太过强大了被目标网站封了（笑）。所以就萌生了用代理 IP 的想法。很可惜很多开源代理 IP 池都是没有持续维护的，代码也比较奇怪。于是自己就写了一个。特性大概有：

• 自动化的代理 IP 爬取与验证
• 易用的 JSON API
• 简单但美观的 web 用户界面，基于 TypeScript 和 React （例如，代理的地理分布）
• 最少仅用 一条命令 即可启动
• 无头浏览器（ headless browser crawling ）爬虫

欢迎在贴中留下您的邮箱，我可以发送你 demo 地址（暂时不打算公开发布）。如果您想留邮箱，请注意：

• 可以使用 base64 编码
• 在您的回复的第一行或者最后一行写
• 也可以用 [at] 替代 @

附：几个截图 demo

截图 1: Web UI （代理 IP 列表）

截图 2: Web UI （代理 IP 的地理分布）

[Baboonowen]

打破惨案

[flyxl]

赞楼主，求 demo

[0312birdzhang]

先赞一个

[artandlol]

YXJ0YW5kbG9sI2dtYWlsLmNvbQ==

[golmic]

i [at] lujq.me

想知道 IP 的验证策略。因为我觉得 IP 代理池的核心就是这个。只有策略出色才能突出

[binux]

我一直觉得最好用的代理 IP 池接口就是 forward proxy。
forward proxy 对应用透明地自动 rotate，抓取的同时天然地自动验证。

[B1ock]

bWFza3NzQHByb3Rvbm1haWwuY29t
感谢

[o00o]

IHJvbW90Y0BnbWFpbC5jb20g
谢谢

[panyanyany]

NTY4Mzk3NDQwQHFxLmNvbQ==

请问楼主这些 ip 是从哪里来的呢，全网扫描还是？

[panyanyany]

@panyanyany #9 不好意思，原来还有个 providers 文件夹，现在知道是扫公开的代理了

[ThirdFlame]

ZmFuZGVsYWppQGdtYWlsLmNvbQ==

[airyland]

赞，docker 无痛安装成功

[zqjilove]

API 接口支持国家输出就好了

[131]

YmxvZ0Btb2UuaW0=

谢谢！

[cyn]

Y3lubGl0dGxlW2F0XTEyNi5jb20=
支持，感谢！

[dex2jar]

ODA3NjYwMDcxQHFxLmNvbQ==
谢谢楼主。看起来挺好的，前段时间刚买了 5 块的 ip

[gclm]

gclm159[at]gmail.com
支持，感谢

[Sixzeroo]

c2l4emVyb282MEBnbWFpbC5jb20=
感谢楼主

[airyland]

报个问题，开始接口报 500，过一会正常，运行一段时间后 stats 500，proxy 列表为空。

[ccbikai]

chi#miantiao.me 谢谢楼主，自己也在爬各个代理网站的 IP，支持 https 的很少