为什么 MySQL8.0 比 MySQL5.7 的插入性能差了这么多？

[epicq]

同样的代码、同样的数据、同一台的机器

批量插入 860W 行数据

MySQL8.0 只有 600 行 /s

MySQL5.7 轻松破 7K 行 /s

都是 MyISAM 引擎

8.0 是需要什么特殊的优化技巧吗？

[epicq]

我注意到 8.0 的硬盘占用达到 80%，5.7 只有 1%

这是为什么？

[RedisMasterNode]

可以给出具体代码和环境吗

[RedisMasterNode]

另外为什么还在用 MyISAM 引擎可以说下理由？

[epicq]

@RedisMasterNode 因为 InnoDB 更慢，而且没有事务需求。只是解析一个 2.66G 大小的 json 文件，大约 860W 行，准备作为机器学习的数据集来用。

[est]

> 都是 MyISAM 引擎

InnoDB 可以插入玩了再开事务。

[mazyi]

硬盘是一直高还是插的时候才高

[epicq]

@est 主要是我用不到事务，而且我这个需求 InnoDB 确实比 MyISAM 慢啊，难道我的理解或者用法出现了偏差？

[epicq]

@mazyi 插入的时候才高

[epicq]

我测试了一下

MySQL5.7：InnoDB_CPU15~30%_磁盘 85%_插入 600 行 /s
MyISAM_CPU45~60%_磁盘 1%_插入 8k 行 /s

MySQL8.0：InnoDB_CPU15~29%_磁盘 88%_插入 300 行 /s
MyISAM_CPU15~38%_磁盘 83%_插入 600 行 /s

WHY???

[epicq]

5.7 的 MyISAM 磁盘占用真的只有 1%，不是我打漏了，而且插入性能是其他 10 倍以上，WHY ？？？

[lijialong1313]

会不会是你使用的库的原因。
试一下插入做成一个事务看是否还有显著差异……

[stabc]

应该是 8 出于安全考虑默认开启了 WAL，也就是每条插入确认硬盘写入了 LOG 之后才开始下一条插入，这样保证了断电不丢失数据。 你 600/s 算是硬盘性能不错的了。查查手册把 WAL 关了就快了。

[leviathan0992]

配置一样不一样啊?

[freelancher]

那为什么不直接用。MYSQL 7?

[luckylo]

@freelancher 他要操作 json。对 json 的支持 8 要好一点。
换句话说，你不用事务，mongodb 不香么？手动狗头

[xiaoyanbot]

@freelancher 什么鬼，哪有 mysql 7 呀

[xiaoyanbot]

MyISAM 引擎，mysql 8 还支持？

[iConnect]

你机器什么配置？我看有没有接近的机器测一下

[y0bcn]

开启事务，会快很多。

当年做的一个小项目，刚开始学不懂，导入 excel 中的数据，要一分钟左右，慢的怀疑人生，开启事务之后只需要一秒左右完成了。

[enlight]

@luckylo MongoDB 不太香，性能照 PostgreSQL 差不少啊