也来一发，豆瓣害羞组读图版

[binux]

看到有人专名写一个爬虫，于是用手上的东西，做了一个这个东西。
先直接上地址： https://f.binux.me/haixiuzu.html

pyspider DEMO版 + 多说 做数据库 + 前端渲染一个瀑布流

嘿，还真像那么回事有没有。

那么问题来了，还有哪些免费的 KV 数据库，有 HTTP API 的，能公开读取数据的。
多说老是转义导入的数据。。

[lubuwei]

呃，下班再打开看看......

[shakespark]

为啥里面还有丁丁...

[shakespark]

理解了...各种晒10分钟的图被lz抓取了啊哈哈哈

[hydyy]

。。。

[chilaoqi]

这么多丁丁 大丈夫？

[binux]

@chilaoqi 别人要发，而且不是发我这，数据也不存我这。。我有什么办法。。

[axe]

害羞组是用来约约约的吗。。

[yangkeao]

我想知道多说做数据库是什么情况。。

[binux]

@yangkeao 抓到一条数据之后，往多说上发一条评论，评论内容就是抓到数据。
然后页面取最新评论就行了。

[gkuchan]

…… 能不能把女人删掉 搞一个只有男人的版本……

[Qulyf]

@gkuchan ←← 好像暴露了什么...

[alsotang]

碉堡了

[2232588429]

这个数据库是采到26号的？上限怎么定的？

[binux]

@2232588429 我只采集了第一页，我是从26号开始采集的。

[wh1100717]

其实你这个还可以加以下功能：
1. 定时check你抓下来的帖子是否删除，如果删除，则高亮显示(原因你懂的)
2. 想办法用算法把广告过滤掉...
3. 增加手动点击发豆油功能(原因你懂的)
4. 增加几个组一起check好了==！

我也写了个一个类似的东西...不过写完就觉得无趣懒得完善了，哈哈

[binux]

@wh1100717 我就试试我的爬虫，一个晚上做的，我也懒得完善

[mnhkahn]

大哥，你这个有些图多说那边没给你处理么？

[binux]

@mnhkahn 处理什么

[lukew]

@binux
好项目 最近需要搭建一个爬虫系统 果断上手！
想问下 这个项目还是活的吧？

[binux]

@lukew 没死