关于 oss 存储数据迁移到本地(搭建本地存储)

255 天前
 guochenglong

背景

我司去年在 oss 存储费用达到 100w+,公司觉得费用过高,期望在存储方面可以降本。

方案

目前团队定的方案是放弃 oss ,自己搭建一套本地存储。将 oss 数据迁移到本地,后续各个服务 oss 操作全部替换成操作本地存储。

存储服务:MinIO

问题

请教各位有什么建议和相关经验?

ps:我个人感觉自己实现存储风险很大,要考虑的东西很多,备份,容灾,带宽速度等。

3087 次点击
所在节点    程序员
53 条回复
qishua
255 天前
这个首先要看你们本地(线下)是否有机房,要是已经有机房,且有对应的 it ( idc )运维人员,我觉得可以自建。要是没有,都是运维,从头搞的话,不建议,光灾备就够你忙的了
CaptainD
255 天前
我们就是自建的 minio ,存图片,不算纠删码冗余大概 200+TB ,防护措施基本为 0 ,没有任何多余的备份容灾措施,风雨飘摇

建设的时候我们就想用云服务,监控扩容备份都方便,领导嫌贵,资源也给的紧巴巴,根本没有多余空间和服务器做冗余
Qetesh
255 天前
这个体量,难道不考虑使用品牌专业分布式存储吗? Dell EMC PowerScale 、华为 FusionStorage 等等对象存储
qiubinren
255 天前
40m ,1000TB ,也就千万级的对象,这个量对所有私有云存储厂商来说都 so easy ,你们完全可以先找一些有自研对象存储的私有云厂商(比如我司)要个报价,再比对下自己玩 minio 的成本,看看哪个更合算,哪个风险更低。感兴趣可以联系我,微信:YWJvZGlfOTExMQ==
Seanfuck
255 天前
好奇每年流量费用有多少,这个更贵
duanxianze
255 天前
同好奇,这么大的业务量,一年光 cdn 流量费要多少钱?
dann73580
254 天前
@vivisidea 你这个算法肯定有问题……基本上都是用 24 或者 36 盘的单机了。pb 级别算冗余刚好是一个 4-6 台机器的小集群。半个机架撑死,拿不回企业找 idc 托管也花不了几个钱。
salmon5
254 天前
这个体量还远没到自建的分界线。既然是优化成本,自建硬件、托管费、人力 大概率不舍得投入。
最后大概率一地鸡毛。
最好请厂商来一起优化下。
salmon5
254 天前
特别是过了几年,这堆硬件要报废的时候,一般公司肯定不舍得报废。遗患无穷。
ansemz
254 天前
自己搞完会发现,100w/年真是不贵。但是自己手里留了一堆硬件,骑虎难下。
tkisme
254 天前
目前是近期文件会反复访问,久远的文件以存档为主,下载的几率不大
brando
254 天前
坐等 PB 级别的业务相关人士出现。。。
panzhc
245 天前
MinIO 扩容维护麻烦,Ceph 维护操作方便,另外可以考虑下 JuiceFS

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1024650

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX