这是一个创建于 3035 天前的主题，其中的信息可能已经有所发展或是发生改变。
看了下一些收费 api 或者云爬虫可以做到提交网址返回正文，想请教下是个什么思路。
自己写爬虫都是针对一个站点定制 xpath 或者 css selector 规则，那这种通用的是怎么解决的呢？
自己写爬虫都是针对一个站点定制 xpath 或者 css selector 规则，那这种通用的是怎么解决的呢？
 |
1
bearsiji 2017-07-10 15:26:59 +08:00  1
|
|
2
bearsiji 2017-07-10 15:29:05 +08:00 1
https://github.com/GravityLabs/goose 还有这个 你的目的就是内容提取，常见的方法是 HTML 节点结构打分
|
 |
3
stcasshern OP @bearsiji 谢谢。学习一个
|
Select Language