对两千个网址进行抓包，有什么高效的方法吗？求指点

2023-07-26 13:59:29 +08:00
 preoge
1105 次点击
所在节点    问与答
7 条回复
fu4k
2023-07-26 14:01:32 +08:00
高并发抓啊
preoge
2023-07-26 14:02:16 +08:00
不太熟悉这个，大二，大创的任务
x77
2023-07-26 14:23:44 +08:00
Wireshark 抓网卡，不管两千个还是两万个都一样，反正都要走网卡，不过需要具备专业的网络方面的知识才能用起来
X21541
2023-07-26 14:56:21 +08:00
对两千个网址抓包，这是普通人需要干的事情吗？
jazzg62
2023-07-26 15:15:02 +08:00
两千个不算多吧，直接硬抓就可以
jazzg62
2023-07-26 15:17:42 +08:00
爬虫一般会用多线程配合 ip 代理池来抓。
多线程可以提高效率，代理池防反爬
kpingdd
2023-07-26 17:59:33 +08:00
200 外包出去[doge]

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/959875

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX