代理之代理。
https://github.com/xlaurent/pproxies
之前写豆瓣爬虫时,需要用到代理,就用 Go 写了这么个东西,帮助管理代理池,有兴趣的可以看看。但目前有个问题,并发过高的话,会导致连接不能及时关闭,性能下降,以后可能会修复。
这是一个 HTTP 代理,支持 CONNECT 方法。可以帮助管理代理池,自动更换出口代理 IP 。
pproxies 还有一个上游代理。上游代理从 pproxies 所维护的代理池中获取。一旦目前的上游代理不可用,便会自动切换上游代理,从而与目的网站保持连接畅通。
一般 HTTP 代理: HTTP 请求 -> 代理所在主机 -> 目的主机
pproxies : HTTP 请求 -> 代理所在主机 -> 上游代理主机 -> 目的主机
当代理池为空时,会自动调用 API 获取新的代理。
这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。
V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。
V2EX is a community of developers, designers and creative people.