python requests 抓取国外页面时如何处理网络延迟问题?

2016-03-19 17:28:49 +08:00
 xyok

浏览器下页面内容 1 秒就可以显示了,但请求没结束,等请求结束大概要 1 分钟。 如图

如何用 requests 在此时就读取请求到的内容,而不用等所有都加载完

timeout 参数?

2985 次点击
所在节点    问与答
9 条回复
kendetrics
2016-03-19 17:38:19 +08:00
用 socket
xyok
2016-03-19 17:51:37 +08:00
@kendetrics 这是个 post 请求, socket 该如何进行
cloverstd
2016-03-19 18:11:23 +08:00
@xyok HTTP 协议
kendetrics
2016-03-19 18:12:26 +08:00
@xyok 你只会用封装好的 HTTP 协议的库么。。
just1
2016-03-19 18:14:23 +08:00
stream=True
gamexg
2016-03-19 20:43:00 +08:00
看文档,记得有流功能
binux
2016-03-19 20:47:39 +08:00
你哪里显示需要 1 分钟请求结束了?
xyok
2016-03-19 20:59:43 +08:00
@binux 请求结束的截图没放上来
binux
2016-03-19 23:07:24 +08:00
@xyok 不是你选中的这个请求吗?

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/264760

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX