V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member Sign In
This topic created in 3567 days ago, the information mentioned may be changed or developed.
在做一个分布式的爬虫，基本抓取的工作已经写完了，现在就差后端的存储，有时需要存储各种各样的数据结构(方便查看)，所以感觉 NoSQL 更能满足自身的需要，看了很多开源的爬虫，基本数据库都选用的 mongodb 作为后端数据库的存储或是 sqlite,V 有什么建议吗？
 |
1
ppwangs Aug 3, 2016
数据量有多大，索引很有难度么？
mangodb 挺好的啊 |
 |
2
winglight2016 Aug 3, 2016
好巧，我也做类似的东西，在用 parse+mongodb
|
 |
3
klesh Aug 4, 2016
sqlite 数据量大时撑不住吧，况且它不是 nosql 的。
|
Select Language