搞了个 app 爬虫,挺好玩,能卖吗?

2017-01-14 11:19:23 +08:00
 ultimate010
最近研究了下某条视频,破解了 web 端 js 签名,下载 so so 快。流量大到搞得都被封 ip 了,不过这些都可以解决。

然后研究了某手视频, web 端比较弱,没啥可以下载的,于是研究 app ,请求有签名,不过不是问题,通过代理,把所有请求拦截了,然后下载 so so 的快。不过手机点击是个问题,但是有自动化工具,所以又不是问题了。

说了这么多,就是好奇有没有其他人也有同样的需求,能否变现啊?
5292 次点击
所在节点    程序员
15 条回复
jpmorn
2017-01-14 11:21:59 +08:00
直接在人网站上看就好了,又没广告。同质化很多,微博大号都会转。
qiayue
2017-01-14 11:24:24 +08:00
偷偷拿了别人的数据,自己玩下就好了,如果想以此获利,等着法律制裁吧
cheny95
2017-01-14 11:29:15 +08:00
这类程序就算开源都得写上“仅用作学习”之类。
之前弄了个美剧搜索的,是基于 v 友进行优化的,感觉技术思路可以共享,但是拿来赚钱,不太可能。
传送门: /t/312755
(数据是 rrmj 的~)
ultimate010
2017-01-14 11:42:25 +08:00
哦,许多公司暗地里都干着这样的勾当,减少重复造轮子而已。
soli
2017-01-14 14:32:29 +08:00
这是视频爬虫吧?不是 App 爬虫?
ddmkchan
2017-01-14 15:09:20 +08:00
直播类 app 的爬虫,是否也有研究?
ultimate010
2017-01-14 15:42:20 +08:00
@soli 爬 app 内容,大部分都可以。
ultimate010
2017-01-14 15:42:54 +08:00
@ddmkchan 直播应该可以,就是获取 hls 地址而已,没深入研究。
lecher
2017-01-14 15:48:43 +08:00
很多 Web 上面严格控制权限的业务。
到了 app ,就有偷懒下放权限在客户端校验的情况,另外就是一些本地体验优化的业务,喜欢用 app 生成签名的形式做加密,而签名的密钥则永久有效,服务端只校验加密数据,不校验请求有效期。

挂代理爬 app 里面的数据可以卖,尤其一些严格限制需要登录才能处理的业务。但是最值钱的还是拿到密钥和加密处理之后,卖发帖留言这类的刷量数据。
ddmkchan
2017-01-14 16:12:31 +08:00
@ultimate010 有直播 APP 的数据需求,能否加个联系方式?
ddmkchan
2017-01-14 16:27:56 +08:00
@ultimate010 124242477 , 能否咨询下?
ultimate010
2017-01-14 21:11:54 +08:00
@lecher 反编译过 app ,各种混淆加密,感觉很难找到密钥,难度太大,所以才有了在代理层面拦截所有请求。
ultimate010
2017-01-14 21:12:05 +08:00
@ddmkchan 已加
benbenzhangqi
2017-01-14 23:32:04 +08:00
@cheny95 感谢推荐 确实是一个很不错的东西
Da8289
2018-12-26 15:02:51 +08:00
请问现在爬虫是否还有更新,对一些 Hero APP 有数据需求,若可以麻烦加个联系方式,QQ:1516097996

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/334533

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX