求教 10T 的 postgresql 数据库应该怎么设计才能保证查询较快， 30s 级别？

[sjmcefc2]

一个 10T 左右的 postgresql 数据库，怎么设计才能提升查询效率呢？如果硬件一定的情况下,目前单台服务器。 尝试过 elk，貌似速度是快了，就是查询，join 之类的有点麻烦。

[Chenamy2017]

持续关注...

[opengps]

挑战单机极限，这个话题值得关注

[endershadow]

设计没用 上 citus data

[huiyifyj]

我在想，这么大数据，应该都用分布式了吧🙃

[996icu]

10T 的数据不考虑换架构吗?

[abelce]

持续关注，目前依然是用 pgsql

[sjmcefc2]

@huiyifyj 10T 只是一块硬盘。。。算起来也就是 2 块硬盘吧

@endershadow cool，看起来很棒。

[Rwing]

关注

[luozic]

推薦去看看阿里雲大佬 https://github.com/digoal/blog/blob/master/README.md 的 blog

[sjmcefc2]

Citus is an extension to Postgres that transforms Postgres into a distributed database.
Pex uses Citus to ingest 80B data points per day and analyze that data in real-time. They use a 20+ node cluster on Google Cloud.
Agari uses Citus to secure more than 85 percent of U.S. consumer emails on two 6-8 TB clusters.

看起来 citus 好棒啊，有起是 agari 的案例，两个节点？

[flytrap]

这是一个值得探讨的问题

[endershadow]

方案很多, 你这个数据量 pivotal 家的 green plum 更适合

[sjmcefc2]

@luozic 特别棒， 当单库超过 100T 尚未完成写作。
能提醒一下看哪一篇吗？

[sjmcefc2]

@endershadow 能告知下理由吗？

[karenn]

楼主你也得说一下你的机器的配置吧

[sjmcefc2]

机器也很弱机 DELL t630。

[endershadow]

@sjmcefc2 如果数据量就是这个规模的话, green plum 中文资料多,上手更容易.pivotal 国内也有研发中心

[sjmcefc2]

@endershadow 数据量基本是这个规模了，最多能再加一个节点。pivotal greenplum 貌似是个数据分析平台了？
需要购买？还是开源呢？导入数据可以 pgloader 之类工具不？

[est]

不讲数据结构和查询需求就可以银弹优化？

[sjmcefc2]

@endershadow Pivotal Greenplum 基于 PostgreSQL 和 Greenplum 数据库，可让用户更好地控制所部署的软件，减少供应商锁定，产品方向也更加开放。看起来 pivotal greenplum 和 greenplum 是不同的。