13T 的文件：近千万个几兆的小文件，在两台服务器之间备份同步，最好的方法是？

[kisshere]

近千万个几百 K~几兆的小文件，目录存放是以 MD5 分割出来的四级目录，形如：/static/ac/bd/ef/blahblah.zip ，并且每天文件数量以几百个的增加，目前想要实时备份此服务器的数据：

1. 看中了一台 4x12T 的服务器，想把生产环境和数据全部转移到这上面去，做 RAID10，我都不用考虑两台服务器同步备份的软件了，有硬盘坏了直接替换上去是不是就 OK 了，美滋滋
2. rsync+inotify 对这种海量数据备份效果如何，新增一个文件，可不可以做到不扫描全部的“ static ”文件夹？立马将主服务器的该文件传输至备份服务器。有没有更好的专门针对这种海量数据备份软件？

先谢为敬

[hugee]

按天存储多好啊

[jaskle]

git，很好用

[glfpes]

lsyncd，更简单的 rsync+inotify

[glfpes]

@glfpes 支持正则配置哪些想同步

[AlloVince]

@zelin44913 Cloud Sync 在文件数百万级别就已经不好使了

[mattx]

@ldrljq 有没有对应的资料可以查看的?

[ldrljq]

@mattx 不同厂家的技术都是不一样的，比如 Netapp 叫 SnapMirror，不过总体来说都是镜像数据，主要是用于数据迁移以及备份和恢复。

[mattx]

@ldrljq #47 有没有用这个做 数据中心内部强一致备份的，做到可以随时切换。

[ldrljq]

@mattx 有的，基本所有存储厂商都有这种解决方案，双活甚至多活，完全镜像数据，可以跨楼宇甚至城市实现异地容灾，不过是另外一套技术了。