几个亿的照片以及视频文件，怎么存储比较好？

[x2ve]

不太会处理啊，目前有近亿的图片存在 gp 库中，查询速度还是秒级的，最近来了几个亿照片，想直接存在文件夹，但是怕硬盘挂掉就欲哭无泪。目前要求是：能满足增量，备份不麻烦，调用较快就行了，要求是数据绝对不能丢失。大家一般怎么处理大量图片的？求个方法，谢谢各位大佬了。

[whileFalse]

存云里

[whp1473]

私有可以考虑 FastDfs、HDFS，均可以集群部署。
公有可以考虑阿里云 OSS 等。

[rrfeng]

hdfs 不合适『海量小文件』场景。
能上云的话最简单省事儿，便宜又可靠。
不能上的话海量小文件存储，也有很多方案。比如淘宝 TFS 以及腾讯 TencentFS，主要解决高可靠性，可索引，合并存储等问题。

[4SM]

上亿张照片是什么概念？ 100000000÷100 年÷365 天÷24 小时÷60 分钟≈1 张照片 /30 秒。
？

[x2ve]

@whileFalse
@whp1473
@rrfeng
感谢三位，目前这边是有云平台的，但是是局域网。给的建议也是 hdfs，但我这边不太熟悉，怕误操作了后续留坑，所以就来 v 站问问看还有其他方法不。

[x2ve]

@4SM
历史数据，没有算的这么夸张啦

[chinesestudio]

就这么点数据 ceph 搞定 备份都不用

[fireapp]

当然是 s3 的开源方案 minio 啊，小文件利器

[alexkkaa]

张嘴就来存云里的，你家是开矿的吗

[jaskle]

[e-mail] 好人一生平安

[greatdancing]

@avs10019 说不定公司业务比挖矿还值钱呢

[hushulin]

[e-mail] 好人一生平安