有哪些常用的爬虫工具？

2017-12-28 08:44:27 +08:00
 Kirikora

比方说，有哪些好用的 http 抓包工具？ chrome 的 f12 在遇到跳转的时候就会刷新了，不开心。

5838 次点击
所在节点    Python
25 条回复
Akkuman
2017-12-28 08:45:20 +08:00
。。你不会用 chrome 的调试，我只能这么说
Akkuman
2017-12-28 08:45:47 +08:00
有保留的选项
lzhd24
2017-12-28 08:45:49 +08:00
fiddler
Kirikora
2017-12-28 08:47:21 +08:00
@Akkuman 没。。没有找到，抱歉。用的还很不熟练
nazor
2017-12-28 08:47:33 +08:00
有个选项是 preserve log
Kirikora
2017-12-28 08:47:40 +08:00
@lzhd24 谢谢～
Kirikora
2017-12-28 08:51:57 +08:00
@nazor 谢谢～ 我竟然没有注意到。。（捂脸
omph
2017-12-28 08:52:19 +08:00
https://www.oschina.net/search?scope=project&q=%E7%88%AC%E8%99%AB
Kirikora
2017-12-28 09:07:37 +08:00
@omph 好。。好的 虽然我只是想知道一些好用的小工具而已
anasplrt34
2017-12-28 09:48:28 +08:00
其实 chrome 的不如 firefox 好用 后者至少是彩色的 www
RadishWind
2017-12-28 09:54:08 +08:00
@nazor 谢谢
alen
2017-12-28 09:56:51 +08:00
没点进来想到的是 scrapy，点进来看后想到了 fiddler、Wireshark ( 逃
golmic
2017-12-28 09:58:06 +08:00
楼上+1
boneyao
2017-12-28 10:03:12 +08:00
chrome://net-internals/#events
scriptB0y
2017-12-28 10:03:37 +08:00
再贴一下…… 推荐几个 https://www.kawabangga.com/posts/2365
scriptB0y
2017-12-28 10:04:02 +08:00
@alen 工具 不是框架
ivechan
2017-12-28 10:12:41 +08:00
@lzhd24 #3 之前不是叫 fiddler2 的吗？ 怎么 2 没了？
Kirikora
2017-12-28 10:20:12 +08:00
@scriptB0y 对对对，我就想要知道这种工具，谢谢～
rayjoy
2017-12-28 11:00:12 +08:00
@scriptB0y 看了，不错，感谢推荐。
Flobit
2017-12-28 11:04:41 +08:00
chrome 就够了，实在不行就 fiddler

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/418158

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX