Scylla——开源免费的代理 IP 池，更新到 1.1 版本：更好的验证策略、更简单的使用方式、改进的 Web UI

[WildCat]

GitHub： https://github.com/imWildCat/scylla

几天前发布了 Scylla，感谢大家的帮助，一度冲到 GitHub Trending 前五的位置。

欢迎在贴中留下您的邮箱，我可以发送你 1.1 版本的 demo 地址（暂时不打算公开发布）。如果您想留邮箱，请注意：

• 可以使用 base64 编码
• 在您的回复的第一行或者最后一行写（含有邮箱的那一行请不要写其他东西）
• 也可以用 [at] 或者 # 替代 @

根据大家的在原帖里的建议，这几天又添加了如下功能（仅选重要的展示）：

1. 改进的 Web UI

2. HTTP 正向代理服务器

查看文档：https://scylla.wildcat.io/zh/stable/#http

3. 验证策略

查看文档：https://scylla.wildcat.io/zh/stable/#id9

已知一个小问题，将在 1.1.2 版本修复（ 15 分钟内）

最新版的 Docker build 有点问题，如果运行后没有任何 IP，请先用 1.0 版本：

docker run -d -p 8899:8899 -v /var/www/scylla:/var/www/scylla --name scylla wildcat/scylla:1.0

十分抱歉

Docker 问题已经完全修复，非常抱歉！

[LeungJZ]

前排资瓷。

[wjm2038]

wjm2038#gmail.com
支持一下

[CodeDrift]

MzA5ODcxMjcxQHFxLmNvbQ==
支持一下 谢谢啦

[moack]

dHNoZW5nQG1vYWNrLm5ldA==


谢啦

[imyip]

docker 部署失败了?自动退出?

[moming87]

MzMxNTUxQEdtYWlsLmNvbQ==
体验一下

[WildCat]

@imyip 已知一个小问题，将在 1.1.2 版本修复（ 15 分钟内）

[wwek]

@imyip 和你一样

[1507265844]

d3dlaXl1YW5kaW5nQGdtYWlsLmNvbQ==
了解一下

[WildCat]

@wwek 在修复，docker build 太慢了。。。

[finely]

MjQzNzUwNzgyQHFxLmNvbQ==
支持楼主

[raychar]

cmF5Y2hhckBhbGl5dW4uY29t
支持楼主

[WildCat]

@wwek
@imyip

已修复！

[leonnadesico]

d2FuZ2p1bjQyNDIxMUAxMjYuY29t

[oIMOo]

Ym93ZW5hY2hhdCNnbWFpbC5jb20=

[WildCat]

@wwek
@imyip

似乎还有点小问题，我找下原因。pyppeteer 这个库太坑 b 了

[Backlitz]

enl3OTcxMkBnbWFpbC5jb20=
感谢楼主

[veau]

veau#foxmail.com

感谢楼主

[bSty]

dXRlbWl0ZmtAZ21haWwuY29t
支持一下 感谢

[fzudust]

zjz02936341#163.com
支持

[fzudust]

zjz02936314#163.com
刚刚邮箱打错了

[maooyer]

bWFvbWFvaGFja0BnbWFpbC5jb20=
支持支持

[xxhjkl]

eHhoamtsMUBnbWFpbC5jb20=
前排支持，求发

[rails3]

MTM0NzIwMEAxNjMuY29t

[1024bytes]

aXB2NC5rZXZpbkBnbWFpbC5jb20=

感谢楼主

[Finch]

[email protected]
感谢

[wingoo]

d2luZ29nb29AZ21haWwuY29t

感谢

[whoami9894]

d2hvYW1pOTg5NEBnbWFpbC5jb20=

感谢

[sgq1128]

ODEzODIyNzQ0QHFxLmNvbQ==
好人一生平安

[crayhuang]

cray.huang [at] gmail

[daiqiangbudainiu]

mac 不支持吗？

[WildCat]

@warcraft1236 支持，Python 3.6.5 在 Mac 上有个 bug，具体看 issues。我就是在 Mac 上开发的

[WildCat]

@crayhuang 你这个回复真的是气死我了：

1. 先是研究过滤空格
2. 然后发现智障 AI 还是不识别你这个回复是邮箱地址
3. debug 办个小时发现你没写 .com

[ahbing]

givemearainbowlife#gmail.com

[vipdomain]

v2 用户名 @vip.qq.com
thx

[WildCat]

@vipdomain 你这让我程序怎么爬你邮箱啊？天呢我一个一个手工爬么

[crayhuang]

@WildCat 😂 我错了! 😅 不是故意的

[daiqiangbudainiu]

@WildCat 可是我 pip install 了之后，启动不起来

[daiqiangbudainiu]

@WildCat
报错 log 如下

2018-06-01 - 02:17:02 DEBUG: create new db connection
Traceback (most recent call last):
File "/usr/local/bin/scylla", line 11, in <module>
sys.exit(app_main())
File "/usr/local/lib/python3.6/site-packages/scylla/cli.py", line 84, in app_main
sys.exit(main(sys.argv[1:]))
File "/usr/local/lib/python3.6/site-packages/scylla/cli.py", line 48, in main
from scylla.proxy import start_forward_proxy_server_non_blocking
File "/usr/local/lib/python3.6/site-packages/scylla/proxy/__init__.py", line 1, in <module>
from .server import start_forward_proxy_server_non_blocking, start_forward_proxy_server
File "/usr/local/lib/python3.6/site-packages/scylla/proxy/server.py", line 14, in <module>
httpclient.AsyncHTTPClient.configure("tornado.curl_httpclient.CurlAsyncHTTPClient")
File "/usr/local/lib/python3.6/site-packages/tornado/httpclient.py", line 302, in configure
super(AsyncHTTPClient, cls).configure(impl, **kwargs)
File "/usr/local/lib/python3.6/site-packages/tornado/util.py", line 354, in configure
impl = import_object(impl)
File "/usr/local/lib/python3.6/site-packages/tornado/util.py", line 181, in import_object
obj = __import__('.'.join(parts[:-1]), None, None, [parts[-1]], 0)
File "/usr/local/lib/python3.6/site-packages/tornado/curl_httpclient.py", line 23, in <module>
import pycurl # type: ignore
ImportError: pycurl: libcurl link-time ssl backend (openssl) is different from compile-time ssl backend (none/other)

[WildCat]

@warcraft1236 你电脑没装 lib-curl-dev，你自己 Google 去吧，不同系统不一样

[HFX3389]

Y2NjcGNjcEBxcS5jb20=
感谢楼主

[xiaofengchen]

eGllX2NhbmdAb3V0bG9vay5jb20
支持～

[safilar]

dTUyMDc1NDFAZ21haWwuY29t

[HuaBeau]

NDI5NDYwMTY1QHFxLmNvbQ==

支持楼主

[80868075]

后排支持楼主
MzE1NDk4MTYxOUBxcS5jb20=

[safilar]

@Scylla 部署好多久会有 IP 进来啊

[safilar]

@WildCat 部署好多久会有 IP 进来啊

[fuckshiter]

MzMyODk5MTVAcXEuY29t

非常感谢，支持楼主的

[isin]

aVFpZmVuZ0BIb3RtYWlsLmNvbQ==

[islee]

c2xlZS5yZXBhbGNlQGdtYWlsLmNvbQo=

[gcod]

emh1Y2VAdnYxMjM0LmNu

[chi1st]

支持支持
eXVjaDEyMzBAcXEuY29t

[frozenthrone]

bW9vbi56anVAZ21haWwuY29t

thanks

[ch940621]

Y2g5NDA2MjFAcXEuY29t
资瓷一下

[ucmp0001]

支持
bXIuZnJpZW5kbHlAMTYzLmNvbQ==

[cedared]

MzQxNDUwNkBnbWFpbC5jb20=

[lingdong]

bGluZ2Rvbmc3NTg2QGdtYWlsLmNvbQ==
支持下

[woyao]

cndkc3FjOTg1NDBAY2hhY3VvLm5ldA==
thx

[gmx1234]

Z214MTIzNEAxMjYuY29t
支持 谢谢

[freemagico]

dGdseTMwN0BnbWFpbC5jb20=

赞美楼主

[shore507]

shorecw#gmail.com
支持支持

[zhangchioulin]

Z21AY29yZWhlbGwuY29t

蟹蟹

[gqlxj1987]

Z3FseGoxOTg3QGdtYWlsLmNvbQ==

谢谢

[qshujun]

cXNodWp1bkBnbWFpbC5jb20=
多谢，辛苦啦

[hourann]

scylla，这个命名是取自越狱吗？

[azhi]

YWlrdXVlckBnbWFpbC5jb20=

爬点小东西美滋滋

[yujizmq]

bWlrb3RvLnl1NTFAZ21haWwuY29t
thx

[mutiple]

emhhbmd4dWFucjExQDEyNi5jb20=
蟹蟹

[vipwpcom]

MjExNTE2MjEyQHFxLmNvbQ==
支持 谢谢

[alwayshere]

请问你这个是爬取各大代理网站还是真正的爬取代理 ip 再来验证？

[SPACELAN]

bHloYW1uQHFxLmNvbQ==

谢谢

[yuluofanchen]

bHlubjEyOTk5QDE2My5jb20=

谢谢~

[kingmo888]

bHpoLTM5MTZAMTYzLmNvbQ==
感谢楼主，搭个车！

[Asugar]

d2hvdG9AbXNuLmNvbQ== 谢谢

[Backlitz]

zyw9712#gmail.com

不知道为什么一直没有收到，是不是之前格式错了？

[YY]

djJleEBtYWlsaW5hdG9yLmNvbQ==

谢谢

[Bisn]

YmlzbkBxcS5jb20=

[Bisn]

请问怎么和 Scrapy 集成？
感谢！

[Bisn]

http://api.ipify.org 这个网站估计有限制，经常不成功，返回的 ip 还是原先的
http://ip.3322.net/ 换成这个网站没问题

[eastrd]

ZTB0M3J4QGdtYWlsLmNvbQ==

谢谢

[yolan]

dHJhc2gyNTgwQDE2My5jb20K
3q

[taozywu]

taozywu#qq.com
咫尺一下

[huijian222]

bGFpamluYmFuZzIwMDlAZ21haWwuY29tCg==
3q

[zxy]

aXp4eUBsaXZlLmNvbQ==

[Sin]

c2lucnVlQGdtYWlsLmNvbQ==

[mmnnyycc]

MjYzMTMzODQ0MEBxcS5jb20=

[mosliu]

bHgwMzE5QGdtYWlsLmNvbQ==
谢谢楼主~~

[ilovebaicai]

Y2ZxdHhkMUBnbWFpbC5jb20=
好人一生平安

[chinayb]

Y24ueWJAZm94bWFpbC5jb20=

[Mrkon]

MTczMjkyNjE5QHFxLmNvbQ==
谢谢

[Fechin]

bXIuZmVjaGluQGdtYWlsLmNvbQ==
多谢

[demoxu]

ZGVtb3h1MjAwOUBnbWFpbC5jb20=

支持一下，多谢

[robinlovemaggie]

cm9iaW4ud2hrQGdtYWlsLmNvbQ==
正好需要写一个蕾丝工具，谢谢啦～～

[byron]

Ynlyb25qaWFAZ21haWwuY29t

吼啊。

[daiqiangbudainiu]

@WildCat mac 还需要装这个吗？

[Caratpine]

做开源不易，支持一下。

[yyminmax]

bWlubWF4eXlAMTYzLmNvbQo=


谢谢了～

[liujunsheng]

YUBsaXVqdW5zaGVuZy5jb20=

[frankmdong]

c3VwZXJmcmFua2llNjIxQGdtYWlsLmNvbQ==
感谢