请教一个爬数据的小问题

2016-05-18 16:16:53 +08:00
 garham
像网易新闻的这种页面上的热门跟贴的数据，似乎不是一开始就 load 出来的，应该怎么爬？
http://comment.news.163.com/news3_bbs/BNBIJDSQ00014AED.html
或者可以作为一个有偿小项目外包实现，谢谢！
2718 次点击
所在节点    程序员
4 条回复
yurivvvvv
2016-05-18 16:21:04 +08:00
nightmare
https://github.com/segmentio/nightmare
mrwangrj
2016-05-18 16:51:42 +08:00
phantomjs
niuoh
2016-05-18 17:24:51 +08:00
http://comment.news.163.com/api/v1/products/a2869674571f77b5a0867c3d71db5856/threads/BNBIJDSQ00014AED/comments/newList

thread 后面的是新闻 id
argsno
2016-05-18 17:50:12 +08:00
看了一下，好像不是特别麻烦呀~~~~

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/279575

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX