Scrapy 使用 SOCKS5 代理的好方法是啥呢?

2021-03-21 09:16:07 +08:00
 Te11UA
看到 Scrapy 里面关于这个的 issue 从 14 年开始一直没被 Close,翻了很多资料好像最好的方法还是本地起一个代理转发服务,然后让 scrapy 项目走本地代理,为什么 Scrapy 不能原生支持呢?
1060 次点击
所在节点    Python
3 条回复
Yc1992
2021-03-21 10:07:37 +08:00
不是有非官方的 middleware 吗,5 年前用过
misaka19000
2021-03-21 11:04:13 +08:00
透明代理?
Kobayashi
2021-03-21 11:59:46 +08:00
他不想支持拉倒,使用者奈何不了项目作者。
Socks 转 HTTP 试试 Privoxy 。
https://wiki.archlinux.org/index.php/Privoxy

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/763575

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX