一个好用的爬虫应该有什么样的功能？有什么有趣的玩法？

[GrahamCloud]

这两周，我们做了一个目前来看非常易用的云爬虫：

主页在这里， zaoshu.io

现在，我们提出了很多酷的设想，也在一步一步慢慢完善。 大家快来玩玩。 如果你也有酷的想法，愿意洗耳恭听。 期待可以一起合作。

[GrahamCloud]

@saber000 api 需求欢迎提交给我，微信 Zaoshuio

[lakewong]

试了试爬知乎首页

[GrahamCloud]

@lakewong 不不，不能爬首页，对于知乎，将来可以通过 api 来搞。
首页的示例里，链家，拉钩这样的，是我们的主要应用场景。

[xvx]

域名早熟？

[GrahamCloud]

@xvx 晚熟，晚熟。

[mingyun]

厉害了我的哥，赶紧去看看

[baiyi]

下回节点能放在推广吗

[9hills]

试试爬一下多看电子书，自己爬比较麻烦的是代理池、防抓取等还需要自己做

[GrahamCloud]

@baiyi 其实倒真不是推广，是诚心来探讨聊天来着。推广肯定会买广告位，现在产品不成熟还是求意见聊场景的阶段。

[baiyi]

@GrahamCloud 嗯 加油做一个好产品!

[9hills]

失败了，这个失败都没有地方 debug 。。。

就一个执行失败。。。我还是老老实实的用 scrapy 吧<_<

[hakulamatata]

指哪爬哪能做到就已经能够很好了

[GrahamCloud]

@9hills 我去后台看下啥情况。求告知邮箱

[9hills]

@GrahamCloud [e-mail]

[GrahamCloud]

@9hills 为了易用， debug 暂时不能给使用者，现在只能我们尽量帮 debug

[GrahamCloud]

@hakulamatata 产品上问题还特别特别多

[GrahamCloud]

@hakulamatata 看哪不好随时说。

[haigeek]

没人试试高校的教务管理系统吗？ aspx 页面，某果，界面是空白的。

[GrahamCloud]

@haigeek 求告知网址！

[haigeek]

@GrahamCloud http://kmustjwcxk1.kmust.edu.cn/jwweb/ 这个是登录地址，是需要账户和密码的。
http://kmustjwcxk1.kmust.edu.cn/jwweb/MAINFRM.aspx 这个是登录上去的 但是我怕你还是打不开 但是你看后缀是 aspx 的，在页面直接是没有右键选项的。这个管理系统是青果，似乎国内用的也不少，听说是便宜。可以根据信息参考下。