MySQL 单表三千万条数据，怎么优化 count 查询？

[CodeXx]

innodb，20 来个字段，每天有几十万条数据插入，在不做分表的情况下，怎么优化查询？现在是 count 查询很慢，5s 左右，带上查询条件比如近一个月就更慢了 10 多 s

[juntao]

最近有遇到，多字段 WHERE 查询，1kw 条不到，不想分表
1 做好索引。可以用 EXPLAIN 来帮助优化。 -- 有一定效果
2 限制查询的时间范围 -- 特别有效
3 异构，mysql，redis 、elasticsearch 等等单独统计数据， 因为 2 能够满足我们的需求，所以没采用。


@liuzhaowei55 直接获取自增 id 也是一种方法诶。之前没考虑，需要匹配场景。

[fuyufjh]

mysql 8.0 有 parallel query，能大幅提升这个场景

[zakokun]

1. 索引对 count 有用
2. 几千万的表 count 需求来自哪里？为何要每天 count
3. 维护一个 count 表，插入数据的时候更新 count 表
4. ES

[hooopo]

@dongisking pg 可以这么搞 https://twitter.com/Hooopo/status/1292836409640751106?s=19

[j747677392]

如果都是日志型的数据（用于分析，没删改的话） 可以用 hdfs+imapla，支持 sql，几亿数据查询毫秒吧

[wangyzj]

count 和索引没关系
es 是个选项
或者单独做个统计信息表
或者用 redis 来分页

[CodeXx]

@RickyC
@maigebaoer
@v2orz
@Leigg
@RangerWolf
这样只能存总的 count 吧，查询有其他条件的更慢，14 楼这种差不多

[CodeXx]

@haohappy select 很快

[cokolin]

能否首先描述一下为何要 count，例如页面查询需要总量，还是什么需要

[cokolin]

还有查询用到的字段是否是固定的，如果的固定的话，是否可以增加索引，看看 EXPLAIN 分析用到的索引是否正确
另外也可以用一些业务的方式避免分页查询总量的

[xsm1890]

myisam 自动维护总数，count 的过程不用计算只需要度数即可

[raysmond]

如果只是 count，且对实时性要求那么高（能接受 10s ？），有个很简单的做法能大幅提高速度
用一个线程异步 count 就好，用的地方直接从内存取，对使用方来说超级快

[fangcan]

不要求精确的话 用 explain

[Evilk]

如果是分页用的 count,如果数据量太大,我一般给个模糊值
每隔段时间,更新一次,即可

[liwl]

是想弄图表吧 每天 count

[rickiey]

mongoDB shared cluster 不行吗？ 我没用过

[lshero]

OLAP 的功能交给别的数据库做吧

[mofeishiwo]

https://time.geekbang.org/dailylesson/detail/100056822

[megatron7]

没有数据断层吧并且有自增主键索引可以用:
select max(id) from table;

[bbao]

@CodeXx mysql 是行锁，是否全表需要看你后面 where 条件。