推荐一个可以替代urllib2的Python库 requests

2011-11-24 23:21:09 +08:00
 c
0.8使用了urllib3，变动比较大，虽然现在还有很多问题，不过用起来非常不错哦。
经常抓网页的可以考虑下，抓取效率有10%的提升。

项目主页： http://python-requests.org
Github: https://github.com/kennethreitz/requests
5559 次点击
所在节点    Python
4 条回复
ayanamist
2011-11-25 10:38:33 +08:00
urllib3使用的keep-alive方式可能会被某些网站屏蔽的。当时我就被Twitter的API给屏蔽了，永远返回404……
c
2011-11-25 10:44:11 +08:00
在Requests中可以设置keep-alive=False的
phus
2011-11-25 12:56:03 +08:00
httplib2
c
2011-11-25 13:32:47 +08:00
@phus http://docs.python-requests.org/en/latest/community/faq/#why-not-httplib2

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/22111

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX