现在我手里的数据有以下几个特征
1 、每个表几亿行数据
2 、数据表均不是宽表,大概八九个字段
3 、基本只有查询,偶尔有 join 的需求,没有数据聚合( sum,count 等)的需求
我现在采用的方案是放到 mysql,但单表查询+where 条件,返回 10 行以内,需要 10 分钟。
目前选定了几种方案
1 、放到 es 里面,虽然速度上来了,但还是需要 10s-60s 不等
2 、放到 clickhouse,目前还没做,但我看官网介绍,ck 好像适合数据分析,不适合单条数据查询。
顺便,这不是公司系统,就是个人办公需要用到的数据,大数据组件啥的暂时上不了。各位老哥有什么好方案吗?
这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。
V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。
V2EX is a community of developers, designers and creative people.