一个好用的爬虫应该有什么样的功能？有什么有趣的玩法？

[GrahamCloud]

这两周，我们做了一个目前来看非常易用的云爬虫：

主页在这里， zaoshu.io

现在，我们提出了很多酷的设想，也在一步一步慢慢完善。 大家快来玩玩。 如果你也有酷的想法，愿意洗耳恭听。 期待可以一起合作。

[cxl008]

坐等开源

[bozong]

@wshedu #9 爬过企业信息吗

[haoxuexiaoyao]

这个怎么用呢 爬的数据能自己保存到数据库么

[haoxuexiaoyao]

一直提示链接超时

[firldlove]

刚刚用 https://www.v2ex.com/ 试了一下，结果是 ERR_CONNECTION_RESET

[ELLIA]

一直出错啊~

[GrahamCloud]

@haoxuexiaoyao
@firldlove
@ELLIA 感谢提出问题，正在紧张处理了。

[GrahamCloud]

@haoxuexiaoyao 爬的数据可以保存到数据库

[GrahamCloud]

@isnowify 谢谢支持！

[GrahamCloud]

@cxl008 一直在上新功能，估计可预见的时间不会开源

[isnowify]

@GrahamCloud 如果可以批量爬就更好了 比如某个成绩查询页面 直接枚举批量 post 准考证号得到结果

[lwd2136]

@GrahamCloud http://www.whwater.com/gsfw/tstz/ 爬不动？执行出错

[ELLIA]

嗯，现在好像能用了……

[ybh37]

试了一下 百度新闻，失败 4 次
难道我姿势不对？

[sphawkcn]

@GrahamCloud 想爬取 http://xueshu.baidu.com/u/paperhelp/ 这个页面的“待应助” 下面的 “等待应助” 这个子标签页下的每一栏的文题。发现没法点击“等待应助” ，没法点进去。

[ELLIA]

@ybh37 我这边试了别的，也都是出错

[GrahamCloud]

@isnowify 这个功能马上就会上

[GrahamCloud]

@lwd2136
@ybh37 今天负载异常高，正在努力扩容。

[GrahamCloud]

@sphawkcn 这个分页功能这一版还不支持，之后的一版会有改进。欢迎加 微信： Zaoshuio

[ELLIA]

今天有数据了，不过有几个问题，第一就是只会爬一页，如果需要第二页我得手动加入网址。
其次是目前只支持定时一天爬一次是吗？还是未来也这样。

最后就是我设了邮箱，但是没有收到邮件……