求个老哥们推荐个思路

2017-06-12 14:56:13 +08:00
 beifengpiaoran
准备写一些被动式的流量扫描,大概是 浏览器==》 python 代理 然后做个异步 流量正常通过及返回 需要把 http 请求保存 有没有老哥推荐个第三方库啥的 现在在用 python3 ~~~~
1937 次点击
所在节点    Python
7 条回复
ihacku
2017-06-12 16:31:28 +08:00
beifengpiaoran
2017-06-13 09:02:40 +08:00
@ihacku 这个早就知道了== 老哥是同程的么
holajamc
2017-06-13 11:09:15 +08:00
我们也有一个同样的需求,记录一个页面外部引用的所有资源,我目前的做法是自己写了一个 http 代理,然后在代理里面获得了需要的数据,当然有好方法的话希望楼主 @我~
beifengpiaoran
2017-06-13 14:12:27 +08:00
@holajamc 对的我的意思是这样的 但是自己写代理涉及到 https 证书的问题 有人推荐我用 mitmproxy 准备看一看文档
holajamc
2017-06-13 17:19:27 +08:00
@beifengpiaoran 尴尬了我们还活在 Python2 …
beifengpiaoran
2017-06-14 10:02:19 +08:00
@holajamc 不是啊 新手 直接入了 3 的坑了~
holajamc
2018-04-10 11:56:41 +08:00
chromeheadless …

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/367836

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX