[日经] 关于数据备份

2017-03-08 23:11:14 +08:00
 Explorare

虽然最近在 V2EX 和 Slashdot 上都有相关讨论,本地存储和云存储的选择,备份方案的选择。

我的主硬盘 167GB 容量,实际已用 147GB ,用来存放系统和工作目录,副硬盘 698GB 剩下 200GB ,用来存放下载内容、常用资料、每日备份、音乐专辑、本子,外置硬盘 4TB 剩下 1TB ,用来放每日备份的备份,不常用的资料、数据、本子。看起来够用,但问题是很多数据都只有一份,比如外置硬盘有部分已经转码放到 WALKMAN 的专辑,一些不常用的资料、照片。每日备份中完整备份占 100GB ,增量备份一般是 2GB 左右,七天一个循环,每周光备份文件就有 120GB ,备份文件我至少会保存一个月。

所以问题来了,虽然我也经常推荐别人 Amazon Glacier ,但今天实际算了一下价格还是有点心疼,就算 3TB 数据, 0.004 USB/GB,mon ,一个月就要 12.29 刀,一年下来大约 150 刀,足够买一块 4TB 的 backup plus 了。但和 Glacier 相比,本地软件镜像和 RAID 的稳定性明显不行,比如突然断电、碰开数据线、怕是会掉数据,而且最怕坏道、比特翻转的问题,不容易发现。(虽然概率很低就是了)。

如果买 Gen8 组 ZFS ,本体 2k CNY , HGST 4TB HDD *4 大约 5k CNY ,然后还要算上两条 8GB 的 ECC 内存,最少也要一千二,才能组一个完整的 ZFS 存储伺服器,成本高出很多了。

看起来 Glacier 确实挺便宜的,但有个问题,上传带宽不够。一个月前我办宽带买的 50Mbps 联通,当时测速双向 50Mbps ,很稳定。上周再测发现上行已经被限制到了 10Mbps ,实际速度 1.25MBps ,我这 3TB 的数据得用 700hr 才能完成上传,大约一个月,如果日常生成 100GB 备份得话得 23hr 才能完成上传,一整天啊,第二天的备份都要出来了。 Gen8 则自带两个千兆口,带宽是广域网的 100 倍,同步能瞬间完成。

结果这样算下来就进入两难境地,本地 NAS 的购入、维护成本高,稳定性不及 Glacier ,毕竟没有异地容灾,没有 UPS ,但数据交换速度更快是个优点。


想到这个问题是因为今天用 VeraCrypt 备份 4TB 的外置硬盘时遇到错误,报错部分扇区读取失败,最后选择了用 0 覆盖,后来报告说覆盖了 4KB 的数据。整个备份过程耗时 45hr ,期间不能断开连接,否则所有数据无法找回。现在提心吊胆中,不知道还会有多少数据会读取失败然后用 0 覆盖。

至于为什么要加密外置硬盘?我怕我硬盘被别人发现全是大姐姐和本子你能信?

5327 次点击
所在节点    问与答
99 条回复
yangqi
2017-03-08 23:15:11 +08:00
backblaze $5/月,无限量备份
lhbc
2017-03-08 23:18:24 +08:00
廉价 N3150/N3160/N3700 主板集成 CPU, 4G 内存,成本不到 1K, 加个廉价 UPS
双 4T 组 RAID1, 重要数据加上版本控制
keramist
2017-03-08 23:24:14 +08:00
家里破电脑两台 安装 nas4free 开启 syncthing 本机装 syncthing 三份数据同步增量备份 万事无忧
Explorare
2017-03-08 23:28:58 +08:00
@yangqi 多谢建议。测了一下速度,下行 800kb 上行 10Mb ,速度还是特别感人。大概我需要先投诉联通恢复上行带宽?
Explorare
2017-03-08 23:31:38 +08:00
@lhbc RAID 1 有如果没记错是没有数据完整性校验的吧。
Explorare
2017-03-08 23:32:06 +08:00
@keramist 总数据量有多少呢?
lhbc
2017-03-08 23:34:50 +08:00
@Explorare 所有 RAID 都不管你文件是否正确,只管各个硬盘的数据一致或者校验正确。
mhycy
2017-03-08 23:35:28 +08:00
@lhbc 方案靠谱~,但不改装的 Gen8 也不错

推荐方案:
原装 GEN8 ,上 Windows Server 2012 R2 配合存储池与 ReFS 组 R1 ,这样能省处理器费用
另外 ZFS 可以试试原机跑,备份用途性能要求应该不高
csunny
2017-03-08 23:54:04 +08:00
小白不太明白为什么不用 amazon drive.费用也不高。
Explorare
2017-03-08 23:59:03 +08:00
@mhycy 原机没 ECC 内存没硬盘,四块硬盘两条 8GB 的 ECC 是 ZFS 刚需了
mhycy
2017-03-09 00:00:37 +08:00
@Explorare 海淘原机有 ECC 没硬盘,硬盘本来就得自己买,问题不大
Explorare
2017-03-09 00:00:41 +08:00
@csunny 去年买过一年的吃灰了,上传速度不稳定,全靠挂代理,客户端做得特别垃圾,基本属于不可用的范畴。当时还专门写了一篇评测,但因为今年没机会再测试一次就撤下来了,内容过期。
Explorare
2017-03-09 00:02:01 +08:00
@lhbc 所以感觉还是 ZFS 靠谱。但 ZFS 吃 ECC RAM ,必须主板支持 ECC 才可以。
mhycy
2017-03-09 00:03:40 +08:00
@Explorare ReFS 我做过破坏测试,能满足修复要求
Explorare
2017-03-09 00:07:43 +08:00
@mhycy 多谢推荐,我去看看。
SuperMild
2017-03-09 00:31:33 +08:00
也不需要全部都备份到云端吧?一些又大又不太重要的东西就放本地硬盘可以了。

另外,腾讯微云会员储存空间 4T ,每年 100CNY ,价格很便宜,既然是收费服务,万一关闭服务应该也会提前通知,感觉也是一个选择。
Explorare
2017-03-09 00:33:26 +08:00
@SuperMild 价格不错。我先去把上行带宽被限速的问题解决了。
mhycy
2017-03-09 00:39:16 +08:00
@Explorare
别随意相信便宜的云网盘服务,数据还是在自己手上放心,不然像百度云那样,洗盘经常有。
而且后端的存储未必真的靠谱,长毛是有可能的
Explorare
2017-03-09 00:47:23 +08:00
@mhycy 实际上我百度云免费就有 3TB 的容量,但数据全都是转存的本子和专辑,没敢存自己数据上去。而且百度云限速太厉害了,我是服气的。
mhycy
2017-03-09 00:57:27 +08:00
@Explorare 数据量不能说明问题,身边有朋友丢过几个 T 的私人文件,反正经历过长毛事件和 MU 倒闭事件我是一个都不信,全都是后备方案,主备份肯定自建

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/345996

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX