抓了点知乎用户数据,打算分享给各位兄弟

2016-09-16 20:02:51 +08:00
airqj  airqj

大概 5W 个知乎用户的 500 条动态
不知道放在什么地方合适呢?不想放百度网盘,自己的 vps 流量硬盘也不够。。。。
另外 把这些数据公开会不会被知乎喝茶?

7367 次点击
所在节点   程序员  程序员
49 条回复
lslqtz
lslqtz
2016-09-16 21:55:16 +08:00
@viko16 http://myloli.club ,去用吧。
顺便吐槽一下,上次写代码测试,因为用客户端删表麻烦,脑抽直接把数据库清空了,备份不太及时,结果大部分的记录炸了没法管理 2333 。
7sDream
7sDream
2016-09-16 22:11:15 +08:00
https://zhuanlan.zhihu.com/p/20828854

很早之前抓了 300w 知乎活跃用户的基础数据……至今不知道往哪放……
airqj
airqj
2016-09-16 22:37:31 +08:00
@7sDream 爬数据用的是兄弟你的爬虫 哈哈
wizardforcel
wizardforcel
2016-09-16 22:38:57 +08:00
有小黄文么😂😂😂
7sDream
7sDream
2016-09-16 22:42:36 +08:00
@airqj

这 TM 就尴尬了 23333 。

不过自己的项目有人用感觉还是挺好的哈,虽然我项目的定位并不是爬虫……尴尬。
ovear
ovear
2016-09-16 22:46:38 +08:00
mega 盘挺不错的啊。。
abelyao
abelyao
2016-09-17 00:14:39 +08:00
@7sDream 有意思,分享给了很多非互联网行业的朋友,很直观的表现了 “数据分析” 的应用和价值
7sDream
7sDream
2016-09-17 00:41:29 +08:00
@abelyao 谢谢支持~~
jiaots
jiaots
2016-09-17 01:33:41 +08:00
@7sDream @airqj 哥们 我想抓点特定网站的数据,能不能加我 QQ 858 82 70 900
andyfan
andyfan
2016-09-17 02:03:02 +08:00
马克等地址
ryd994
ryd994
2016-09-17 05:55:47 +08:00
楼主你放吧,我服务器不限流量给你转好了
主要问题是………预计会很慢
megadrive 也可以
ryd994
ryd994
2016-09-17 05:56:14 +08:00
也可以考虑 BT ,人多点立刻就快了
prefere
prefere
2016-09-17 06:15:25 +08:00
挂自己服务器上,用迅雷下载一次。然后删掉自己服务器上的内容。
别人想下的时候直接用迅雷下就可以了,
以前看别人这么搞过,不知道现在还能不能用。
hard2reg
hard2reg
2016-09-17 09:45:36 +08:00
@prefere 然后就被举报了
shiji
shiji
2016-09-17 09:48:37 +08:00
我 Linode 还剩 8T 流量,需要帮忙么?
airqj
airqj
2016-09-17 10:18:33 +08:00
@ryd994
@prefere
@shiji
主要是怕被请去喝茶
Ouyangan
Ouyangan
2016-09-17 10:22:28 +08:00
上次爬了三十万....一直扔硬盘
shiji
shiji
2016-09-17 10:23:23 +08:00
@airqj 实在不行遮盖住部分用户名,这样基本没啥毛病
prefere
2016-09-17 10:34:30 +08:00
要不你看看能不能塞谷歌网盘里
ixinshang
2016-09-17 11:49:08 +08:00
里面的段子不错

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/306644

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX