爬虫真的有法律风险吗，个人弄了一个爬取晨星国内基金的爬取，然后对数据进行聚合，过滤，分析，输出，但是并不商用

[jackyLu]

其实就是爬取所有的国内场外基金某一个季度的数据，然后重点关注你需要的数据，比如晨星评级，持仓股，总资产等等。根据你的指标过滤，整合汇总，输出。这样就可以分析出高晨星评价的基金，还有就是哪些股票是基金重仓股。有了很多个季度的数据之后，就可以分析出变化趋势来。

做这个项目一直忐忑不安的。万一真的触碰到法律了，还是就麻烦的。各位 V2EX 们可以讨论，给给建议

[jackyLu]

仓库地址: https://github.com/jackluson/fund-morning-star-crawler

[Rache1]

信则有，不信则无。

[fengjianxinghun]

欲加之罪 何患无辞

[Mark24]

欲加之罪 何患无辞

[vzong]

欲加之罪 何患不整你

[ospider]

自己用当然无所谓啦，除非你把对方网站爬挂了。不过，放 GitHub 上你跟我说自己用？

[FallenTy]

你自己搞搞可能人家还不在意，传播多了就看人家想什么时候搞你了

[Features]

放 gayhub 干嘛？ 怕官方找不到你？

[jackyLu]

@FallenTy 有这种案例吗

[jackyLu]

@ospider 个人做这个东西本意也是出自于分享，还有就是对基金感兴趣，但是也是爬传播广了，有一定风险

[pengtdyd]

对于公开的数据，一般只要不弄垮对方服务器，基本没问题。

[jackyLu]

@pengtdyd 这些都是公开的数据，而且我一般是一个季度爬取一次

[Ionian]

没事吧 你大可以说这个是自己手动整理的 公开数据没说不让整理吧

[HunSiKing]

有法律风险的事情, 你还放 GitHub 上, , 这是什么操作?

[liuidetmks]

你要是把这个系统搞崩了，就会找你。

而且这类数据应该是要收费的。

[Jooooooooo]

别人报警你就得喝一壶.

[newmlp]

自己玩玩就行了，不要传播

[zcjfesky]

晨星数据库账号一个一年收费 15 万左右
你自己玩没事，拿出来传播，做大了之后对方一告一个准

[baleeny]

还发出来问。。。是怕别人找不到你吗

[bt7vip]

自己爬没风险，自己爬自己用没风险，自己爬自己几个朋友分析没风险，自己爬上传 gayhub 你是怕别人找不到你

[westoy]

这不叫怕， 这叫骑脸输出.......

[maggch97]

中国程序员的法律意识我感觉无限趋近于 0

[HugoChao]

刑不可知 威不可测

[exiahan]

https://github.com/HiddenStrawberry/Crawler_Illegal_Cases_In_China
仅供参考

[Ga2en]

先自己问着，然后顺便放出来让别人用。

啧啧

[yopv2]

但凡是爬虫 没授权给你 就看他啥时候逮你了，什么挂不挂的 对方随时可以给你整出来

[Frankcox]

@yopv2 纯好奇，要是爬国外 porn 网站呢？尤其是那种泄露 onlyfan 这种。

[darkengine]

你是怕别人不知道么。。。还放个仓库

[ragnaroks]

在国内除了搜索引擎，爬虫没有合法的，自己闷声大发财吧。

[NoDocCat]

刑事你, 与你何干?

[SleepyRaven]

猜测是因为 issue 里那个老外想和你合作，所以楼主才来这里问一下有没有风险吗

[fournoas]

口袋罪，想治你就治你

[cholerae]

看似是提问，其实是来打广告的

[KKLeon]

@maggch97 张口就来？

[msg7086]

只要不公开，不让人知道，就没什么大问题。
如果公开，那就不能让人知道是你干的。
比如说账号不能和你的个人信息关联起来，不要发帖宣传，等等。

[aoling]

@luxuemin2108 你发地址出来是出于炫耀推广的，不是真正的提出问题

[gesse]

放 https://sr.ht/ 上

[jinzhongyuan]

你这问题不小啊

[jackyLu]

@gesse 这个是什么来的

[fank99]

别碰个人的任何信息，例如：身份找、手机号、姓名、住址，在这个基础上，控制访问频率，风险会大大减少

[lisxour]

1. 只采集本就公开的数据
2. 没违反网站反爬虫采集规则、Robots 协议、转载声明、数据使用说明等
3. 不涉及个人信息倒卖

那么基本就没啥问题

[MMMMMMMMMMMMMMMM]

挂代理爬，他没证据的

[x86]

我拷，刑呀

[ScoutWang]

面向监狱编程

[zictos]

@lisxour #41 要账号登录但账号是免费注册的算公开吗？

[Aumujun]

爬虫自己藏着用就行了，还放出来嘚瑟，我身边好几个被搞，你传 github 他们报警也能找到你

[stroh]

我前前前同事就是这么进去的，关了半年，出来，找工作没人要，自己开饭馆了

[xingHI]

判断爬虫行为是否违法。从法律专业角度来看，首先要看爬取行为本身是否合法，然后是对于数据的使用是否合法。
OP 爬取晨星国内基金的数据，从技术方法来看采用模拟登陆然后获取数据的方式，并未去破坏晨星国内基金的平台正常使用，可以看作是用户正常登陆后，记录所看到的内容，并非采用入侵等方式，所以爬取行为合法。然后再来看对于数据的使用，从目前来看 OP 将其公布在 Github 上，并演示了简单的分析；对于公布数据这个行为，晨星国内基金的数据也是通过合法爬虫的方式来获取，其属于不完全独创性的数据库（法律上暂未明确），但楼主的简单分析显然是合理使用行为，不构成侵权，但将数据公布在 Github 上具有一定法律风险。

来自计算机+法律双专业学生的建议：只公开技术方法，不公开数据本身。

[lijiangang886]

说的这么详细，你到底是来咨询爬虫法律风险的还是来推销你的项目的？

[Weixiao0725]

看这 fork 数量比 star 还要多。。

[RuralHunter]

爬取公开的数据根本没问题，不要听楼上那些神神经经瞎扯的。

[stonesirsir]

这个吧，据说爬国外没事，国内的的话就。。。

[luojiyin87]

未经授权，都是违法。

[Aloento]

这种事情还是建议你人在国外再干

[llldean]

看来企查查和天眼查还是牛逼阿

[interim]

@maggch97 地图炮又开起来了？

[likang8210]

sqlalchemy.exc.ProgrammingError: (pymysql.err.ProgrammingError) (1146, "Table 'fund_work.fund_morning_manager_assoc' doesn't exist") 运行 11 的时候，少了表

[weeei]

@Frankcox 如果触犯当地法律，这属于跨国的网络犯罪。最多网上封你号，抓不了你。

[Joeith]

先 folk 为敬

[cheng6563]

你看这个口袋又大又宽

[2bNot2b]

@xingHI #48 计算机 和 法律是自己修了两门专业吗？

[wannaw]

@ospider

[ccjy778899]

国内你讲法律？严格立法，普遍违法。选择执法。问题是，他们会不会拿你执法，如果要对你执法，你肯定违法，怎么弄都违法

[yangchao4228]

@Joeith 先 start 为敬[狗头]

[xingHI]

@2bNot2b 是的

[2bNot2b]

@xingHI #65 已经开始工作了吗？能否加个 vx 聊一聊😁

[nuk]

没人告就没人管，不管违法不违法，前提是要匿名，没有你的信息怎么告？

[xingHI]

@2bNot2b 快毕业了，我的邮箱： [email protected]