目前在用 scylla,踩的坑太多,只适配 py3.6 在 py3.7 上经常奔溃。
https://github.com/imWildCat/scylla/
需求: 1.爬取市面代理的代理 IP,需要区分代理 ip 支持的协议,如 http,https,sock5 等等; 2.需要区分国内和国外的代理 IP 池; 3.易管理;
1
PUBG98k 2020-08-24 04:18:13 +08:00
|