写爬虫这种事情真是一件体力活啊

2017-11-22 15:16:13 +08:00
 blueclothes

各种奇葩的情况需要考虑。 很多看起来很平常的页面，要抓下来也不容易。 比如，今天就遇到某些网站，居然把 HTML 放在<script>标签中。然后又加了几个 if else 才把内容给提出来。

3435 次点击
所在节点    编程
3 条回复
marknote
2017-11-22 15:19:03 +08:00
编程就是个体力活 :)
gamexg
2017-11-22 16:26:20 +08:00
碰到灰度测试更烦人。
lddsb
2017-12-08 09:26:52 +08:00
有爬虫就有反爬虫啊。。

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/408591

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX