60TB 容量的云端存储机，如何有效控制成本？做 Raid5 可靠吗？

[flypei]

大约需要容量 60TB，总读写速度不低于 4000MB/S，日常使用 写>读

准备购入一台 R740XD，可以上 24 块 2.5 寸的硬盘，带 H730P 阵列卡

如果用 3.84TB INTEL 企业级 SSD * 24 块，做 Raid10 阵列，速度勉强达标，但实际可使用容量只有 46TB 左右

如果做 Raid5 可以节省很多硬盘，企业级硬盘不容易坏，组 Raid5 或 Raid50 可靠吗？

还有一种就是用 MLC 耐用 SSD 做缓存盘+SAS 盘？

没搞过这种大型存储机器，有点方 又怕买错，也不知道读写能力可否达到要求

请问各位硬件大佬有什么好的方案吗？

[reus]

@ungrown raidz1 和 raid5 一样重建缓慢而且重建出错就完蛋，raidz 本质就是非标准 raid，原理是一样的，只不过有一些锦上添花的设计

[594duck]

另外推荐 ssd 做长时间存储的。我只能说你们是勇士。

结束

[msg7086]

问就是找专业的去咨询。

你来问，多半是因为不懂。不懂的人，看着别人给的建议组起来机子，一样不懂得调优，不懂得运维。
比如说阵列卡，哪种阵列卡好，阵列卡配哪种 SSD 好，组哪种 RAID，组多大的阵列，这你也不懂。
又比如说买 HBA 做 ZFS，ZFS 一大堆参数怎么配好？用 Oracle ZFS 还是 OpenZFS 好？用 Solaris 还是用 FreeBSD 还是用 Linux 好？ RAID 做成 all in Z3 好还是多个 Z2 vdev 好？内存按照 1T:1G 配还是按照多少配？

别说你不懂，我也不懂，很多回答的人也没有做过全方位的测试，做过全方位测试的人给出的方案也不一定适合你的业务场景，更不说这些测试结果可能是企业机密……

所以，嗯，如果是企业采购的话，找专业的砸钱做方案就是了。

[ungrown]

@reus #21
首先本帖的上下文语境中，RAID 特指排除掉非标准 RAID 之外的 RAID0 、RAID1 、RAID5 之类的名词及其相关的软硬件产品
所以虽然在现实名空间中 RAIDZ 可以归入广义的 RAID 之中，但是在本帖名空间内 RAID 和 RAIDZ 指的是不同的具体事物
其次，一句“原理是一样的，只不过有一些锦上添花的设计”并不能用来画等号，因为两者的特点并不相同
RAID5 重建失败丢全部，ZFS 重建失败只会丢失出错的数据块
这是不是原理一样？是的
这是不是锦上添花？是的
这是不是意味着 RAID5 能拿来跟 ZFS 相提并论？
给你重新发言的机会！

[ungrown]

@reus #21
https://www.klennet.com/notes/2019-07-04-raid5-vs-raidz.aspx
https://news.ycombinator.com/item?id=8305710
https://louwrentius.com/zfs-resilver-performance-of-various-raid-schemas.html
https://serverfault.com/questions/634197/zfs-is-raidz-1-really-that-bad

[reus]

@ungrown 好的

[rosees]

建议了解下 Windows 的存储空间功能