有没有什么数据库适合量大、更新频繁、字段变动频繁的数据？

2020-09-08 23:24:23 +08:00
 zzl22100048
上亿的数据，两周更新一轮，每天还有几万条新数据入库，这种数据用啥库比较好维护啊
还需要全文搜索😢
4402 次点击
所在节点    数据库
36 条回复
TimePPT
2020-09-08 23:30:03 +08:00
Hadoop
misaka19000
2020-09-08 23:33:17 +08:00
Elasticsearch
baiduyixia
2020-09-08 23:36:33 +08:00
mysql
zzl22100048
2020-09-08 23:46:24 +08:00
@baiduyixia mysql 这么大量真能行么
zzl22100048
2020-09-08 23:48:45 +08:00
@misaka19000 目前是 hbase+es 二级索引，维护起来太累了
zzl22100048
2020-09-08 23:49:27 +08:00
@misaka19000 @TimePPT 目前是 hbase+es 二级索引，维护起来太累了
dethan
2020-09-09 00:24:45 +08:00
ads
xupefei
2020-09-09 00:35:52 +08:00
pgsql
wellsc
2020-09-09 01:47:16 +08:00
时序数据库
127000
2020-09-09 02:12:02 +08:00
楼主不妨参考下之前的帖子:)
sov2ex.com/?q=亿级数据
594duck
2020-09-09 04:22:00 +08:00
8 万一台的 dell R740 双 E5，512G 内存，ssd 和万转 sas，加上 Microsoft sqlserver 5 台做 cluster 。授权费一台加 Windows 也就 5 万。

再上去就是 oracle 的

别看千多，阿里的 DRDS 比这还贵
594duck
2020-09-09 04:24:45 +08:00
如果要用云。就是 zaure，或者直接开 oracle cloud
des
2020-09-09 07:25:03 +08:00
问一下你们这是啥需求
同时需要这么多条件的：量大、更新频繁、字段变动频繁、全文搜索
zzl22100048
2020-09-09 07:35:38 +08:00
@127000 有点不一样，我们有对老数据更新的需求，
wwwwzf
2020-09-09 07:43:42 +08:00
sqlserver 能用好就很不错了。

SQLServer2005：
Database size 1,048,516 TB
Databases per instance of SQL Server 32,767
Filegroups per database 32,767 （ SQL2000 是 256 ）
Files per database 32,767
File size (data) 16 TB （ SQL2000 是 32TB ）
File size (log) 2 TB （ SQL2000 是 4TB ）

SQL2012 设计极限：
524 PB(536,576TB/549,453,824G)
zzl22100048
2020-09-09 07:59:43 +08:00
@des 类似企查查
newghost
2020-09-09 08:50:54 +08:00
http://oncedb.com

基于 redis 二次开发的的全文搜索数据库
est
2020-09-09 08:54:07 +08:00
这点数据 mysql 毫无压力啊。没秒万行也能试试
Kaiux
2020-09-09 08:55:11 +08:00
Hudi
https://hudi.apache.org/
kerro1990
2020-09-09 08:57:05 +08:00
sqlserver 最适合，性价比最好

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/705343

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX