高频爬取公开数据违法不？

[oma1989]

RT 高频爬取公开数据违法不？比如商品价格，股票价格等等

[GeruzoniAnsasu]

真正“公开” 的数据 一般会有发布或推送渠道。否则很可能不能算“公开”

[silencefent]

看用户协议和 robots

[oma1989]

@silencefent 好的，谢谢

[murmur]

不想让你爬会有反扒和下毒的

[swulling]

没有在 robots.txt 允许的，一律为非法爬取，只是算不算你账的问题

[oma1989]

@GeruzoniAnsasu 无需注册登录，即可访问的页面中的价格信息，应该算是公开的吧？（没发现有推送渠道）

[swulling]

@oma1989 算公开，但是不能用技术手段爬取

[oma1989]

@murmur 的确做了反爬，但是他们的功能没起到作用。

[oma1989]

@swulling 好的，了解了，感谢

[xiaoyazi]

给你标准答案：

看目标网站用户协议以及有无反扒机制。

如果对方的协议明示不可爬取本站信息并有相应反扒机制，你的行为等同破门而入。

就像公园写着 18 点闭园但大门没关，你进去玩虽不合法但一般都会被原谅，门若关着你爬墙进去就难以辨驳了。

[xiaoyazi]

所以合不合法不是看高频与否哦

[oma1989]

@xiaoyazi 学到了，感谢

[ccoming]

补充问个：高频下载后台提供的报表有风险不？

[qsnow6]

“高频”到影响网站正常访问的行为等同于”攻击“

[wangxiaoaer]

听一堆法盲在这指点江山真是有意思。

这种事情去找个律师问下就完了，一些社区服务会有免费资询。

[wangxiaoaer]

还什么 robots，反扒等，法律认可这些东西吗？

[hhxx6]

robots 只是一种行业的约定吧
根本没有法律效力
貌似

[murmur]

@wangxiaoaer 反扒这些是不想对簿公堂的时候用的手段
扒东西被起诉能用的罪名多了

[JunoNin]

数据公开怎么定义

[xomix]

爬取是不违法的，但是爬取后二次发布是否合法这个就……你自己掂量吧。