抖音推荐列表视频爬虫

2019-08-29 11:10:07 +08:00
 cnbattle
基于 APP 爬取

相关技术:golang adb nodejs anyproxy

特点: 可设置仅抓取大于 xx 赞的视频

github: https://github.com/cnbattle/douyin

代码粗糙,主要分享下思路,这样的模式几乎可以抓取任何 APP HTTP API 的数据或内嵌 H5 数据,当然如果数据全部加密或编码传输的就不行了
12612 次点击
所在节点    Go 编程语言
90 条回复
akira
2019-08-29 15:18:34 +08:00
wsf 三连击
yngby
2019-08-29 15:33:08 +08:00
@az999 我也佛了
nicevar
2019-08-29 15:33:29 +08:00
没必要整这么麻烦,一台 root 的手机+模拟滑动+tcpdump 过滤一下就搞定了
jookr
2019-08-29 15:39:28 +08:00
有没有人推荐一个网页版看抖音的网址
az999
2019-08-29 15:51:19 +08:00
@tongyang
@yngby
来说一下,哪里服了?我是攻击者么?装你妈啊,曹尼玛
npe
2019-08-29 16:07:43 +08:00
@az999 以后记得加上狗头🐶
aozhou
2019-08-29 16:24:36 +08:00
@az999 开始使喷口了,您不是素质高吗?泼凉水素质高?别人看不惯了就说人家过得不好,喷不过了就开是脏话喷粉,没那素质别学素质用语,您玩不起,会现形。
cnbattle
2019-08-29 16:45:09 +08:00
@golden0125 不是 ,大概是 用 anyproxy 代理,将需要的 json 数据提交到 go server
cnbattle
2019-08-29 16:46:11 +08:00
@jookr 感觉可以搞一个 🐶
tongyang
2019-08-29 16:46:20 +08:00
@az999 你在这气急败坏的样子可真是好笑呢
fvckDaybyte2
2019-08-29 16:49:28 +08:00
@az999 真没听出来“反爬个 ruan ”有攻击你的意思,草你妈我听出来了
NeverMoreGY
2019-08-29 16:49:40 +08:00
@az999 嘴巴干净点,生活不如意 别冲这里来。不惯着你
yngby
2019-08-29 17:22:05 +08:00
@az999 嘴巴干净点,生活不如意 别冲这里来。不惯着你
simonv3ex
2019-08-29 17:25:30 +08:00
@az999 难受不,臭弟弟
az999
2019-08-29 17:25:40 +08:00
@yngby
@NeverMoreGY
@fvckDaybyte2
@tongyang 我真笑死了,首先我不是首先攻击的,然后 “ ruan ”这个字,就是脏话,攻击人的,我反击攻击我的脏话而已,并不是生活不如意攻击的。 继续抱团攻击我。哈哈哈。
simonv3ex
2019-08-29 17:26:23 +08:00
啊呀,打断队形了
yngby
2019-08-29 17:27:00 +08:00
@az999 宁可真是将双标进行到底呢哈哈哈,我就说了句我佛了你就要攻击我呢
simonv3ex
2019-08-29 17:27:47 +08:00
拉黑一个人,会让你看不到完整的世界;试试拉红?
https://www.v2ex.com/t/592670
az999
2019-08-29 17:27:51 +08:00
@simonv3ex 抱团来怼我,可以啊,不难受,我占理怕什么? 继续啊,你们这些有什么逻辑思维么?哈哈哈。
az999
2019-08-29 17:29:33 +08:00
@yngby 说话不需要负责么? 乱说话也是要负责任的,我攻击你 是你首先攻击我了。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/596130

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX