请 tuicool.com 网的朋友不要全文抓取我 blog 的文章

[yanng]

可以使用链接，但全文抓取商业使用，我觉得不好，还请以后不要这么做了。之前好像看到过这个网站的招聘，另外想看看大家怎么看这件事的，全文抓取，对原作者没有任何好处的，好像有点没劲。
（to推酷的朋友：我的个人资料里有博客地址）

[levan]

这个应该去ruby china 发 他们应该在那

[Livid]

cc @guiquba

[loading]

太可耻了。

[Mihuwa]

http://www.v2ex.com/t/103027

[yanng]

@Mihuwa 原来不止我一个人的网站被抓取，个人觉得抓取作为个人使用没问题的，搜索引擎都不会全文拿去，商业网站更不能这么做。

[hadoop]

还有一个 博客聚合站也是，巨讨厌，抓了之后还会把里面一些链接换成自己的

[FarBox]

@yanng 很抱歉，这个我们甚至都帮不上忙。原本想增加一个用户自定义的user-agent过滤，但我在nerdyang.com的访问日志里，找了半天，没有找到tuicool的user-agent……

[yanng]

@FarBox 这么高大上的技术，没什么，他们看到了相信会处理的，另外一个帖子的人都给删掉了。

[yanng]

请 @guiquba 及时处理一下。

[kernel1983]

同意, http://simple-is-better.com/ 也喜欢全文抓

还是要推荐 http://news.pychina.org/ 这种形式的玩法

笑而不语:)