爬取 leetcode 题目疑问

206 天前
 hytirrb

各位佬,我要爬取下面这个页面的超链接以及里面的文本: https://leetcode.cn/circle/discuss/mOr1u6/,但是在开发者工具的 network 中的第一个请求的 response 的源代码没看到网页中超链接以及对应的文本内容,请问我该如何找到这些超链接的具体位置呢

1079 次点击
所在节点    程序员
3 条回复
1018ji
206 天前
graphql 接口找找
Aoyu
206 天前
用无头浏览器 selenium 配合 xpath 最为便捷。
yjfkk
206 天前
graphql 需要 token ,单独发请求也无效,用浏览器渲染页面,获取 html 再解析

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1044252

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX