[日经] 关于数据备份

2017-03-08 23:11:14 +08:00
 Explorare

虽然最近在 V2EX 和 Slashdot 上都有相关讨论,本地存储和云存储的选择,备份方案的选择。

我的主硬盘 167GB 容量,实际已用 147GB ,用来存放系统和工作目录,副硬盘 698GB 剩下 200GB ,用来存放下载内容、常用资料、每日备份、音乐专辑、本子,外置硬盘 4TB 剩下 1TB ,用来放每日备份的备份,不常用的资料、数据、本子。看起来够用,但问题是很多数据都只有一份,比如外置硬盘有部分已经转码放到 WALKMAN 的专辑,一些不常用的资料、照片。每日备份中完整备份占 100GB ,增量备份一般是 2GB 左右,七天一个循环,每周光备份文件就有 120GB ,备份文件我至少会保存一个月。

所以问题来了,虽然我也经常推荐别人 Amazon Glacier ,但今天实际算了一下价格还是有点心疼,就算 3TB 数据, 0.004 USB/GB,mon ,一个月就要 12.29 刀,一年下来大约 150 刀,足够买一块 4TB 的 backup plus 了。但和 Glacier 相比,本地软件镜像和 RAID 的稳定性明显不行,比如突然断电、碰开数据线、怕是会掉数据,而且最怕坏道、比特翻转的问题,不容易发现。(虽然概率很低就是了)。

如果买 Gen8 组 ZFS ,本体 2k CNY , HGST 4TB HDD *4 大约 5k CNY ,然后还要算上两条 8GB 的 ECC 内存,最少也要一千二,才能组一个完整的 ZFS 存储伺服器,成本高出很多了。

看起来 Glacier 确实挺便宜的,但有个问题,上传带宽不够。一个月前我办宽带买的 50Mbps 联通,当时测速双向 50Mbps ,很稳定。上周再测发现上行已经被限制到了 10Mbps ,实际速度 1.25MBps ,我这 3TB 的数据得用 700hr 才能完成上传,大约一个月,如果日常生成 100GB 备份得话得 23hr 才能完成上传,一整天啊,第二天的备份都要出来了。 Gen8 则自带两个千兆口,带宽是广域网的 100 倍,同步能瞬间完成。

结果这样算下来就进入两难境地,本地 NAS 的购入、维护成本高,稳定性不及 Glacier ,毕竟没有异地容灾,没有 UPS ,但数据交换速度更快是个优点。


想到这个问题是因为今天用 VeraCrypt 备份 4TB 的外置硬盘时遇到错误,报错部分扇区读取失败,最后选择了用 0 覆盖,后来报告说覆盖了 4KB 的数据。整个备份过程耗时 45hr ,期间不能断开连接,否则所有数据无法找回。现在提心吊胆中,不知道还会有多少数据会读取失败然后用 0 覆盖。

至于为什么要加密外置硬盘?我怕我硬盘被别人发现全是大姐姐和本子你能信?

5306 次点击
所在节点    问与答
99 条回复
mhycy
2017-03-09 22:17:02 +08:00
@Explorare 拟开发的是啥玩意。。。囧
Explorare
2017-03-09 22:23:48 +08:00
@mhycy 各种玩意, Web 前后端、 JSE 、 Android 、 C#、曾经的 Windows Phone 。
Explorare
2017-03-09 22:26:37 +08:00
@mhycy 最近几个月在搞物联网设备, Arduino 和 ESP8266 之类的小玩意。前略,万恶的 C++。
mhycy
2017-03-09 22:30:49 +08:00
@Explorare 折腾这玩意虚拟机走起,我就这么干的。。。囧
Explorare
2017-03-09 22:36:28 +08:00
@mhycy 把 VS 塞虚拟机里?性能够用么?实机编译一次固件都要一分钟,丢虚拟机怕是要翻倍。虽然原来也干过在虚拟机开战地 3 私服然后又在宿主机开客户端连进去玩的事,意外不是特别卡。
mhycy
2017-03-09 22:44:35 +08:00
显然性能是够的,前提磁盘是 SSD 。现在虚拟机处理器不是瓶颈,磁盘才是。问题不大可以一试~
predator
2017-03-09 22:45:02 +08:00
1230v2 完全压得住,我原装散热丢柜子里面三年多了
Explorare
2017-03-09 22:46:53 +08:00
@predator 所以你是把机器丢柜子里用了还是用主动散热把原装被动散热器换下来丢柜子了?
mhycy
2017-03-09 22:55:38 +08:00
@Explorare 压不住现在也有定制纯铜散热器
Explorare
2017-03-09 22:58:16 +08:00
@mhycy 现在果然还是 1230v2 性价比更高么。纯铜散热器 kwsk
mhycy
2017-03-09 23:00:44 +08:00
@Explorare 是的,其实新平台也不错,但是 GEN8 那个箱子实在加分不少
Explorare
2017-03-09 23:03:52 +08:00
@mhycy Gen8 主要还是长的好看,可惜 Gen9 没有 MicroServer , Gen10 估计也不会出。这都 17 年了,哎。
predator
2017-03-10 00:28:40 +08:00
@Explorare 发快了没发现有歧义 =。=

国行 gen8 , 1230v2 原装散热器, 4 块 4T ,日常工作是一个 centOS (负责软路由)加一个 win7 (下载 /共享 /转码之类打杂),和光猫、交换机一起塞在一个宜家贝达柜子里,拆掉了柜子背板,柜子门都没做处理大约只有个两毫米的缝

现在深圳 18 度气温下 iLO 里面显示: CPU40 , chipset50 ,系统排气温度 48
lhbc
2017-03-10 00:49:51 +08:00
Gen8+1230v2, 原装散热就行了
我还 make -j4 呢,大不了降频, Intel 的 CPU 温控太好了
suckli
2017-03-10 10:17:08 +08:00
我用微云~
Explorare
2017-03-10 11:09:29 +08:00
@predator 厉害了。
woyaojizhu8
2017-03-11 15:22:50 +08:00
@Explorare 为什么 ZFS 一定要 ECC ?你测试对比过吗?你用非 ECC 内存遇到过差错吗?
zolo
2017-03-25 03:15:09 +08:00
@yangqi 请问你是 backblaze 取回数据带宽可以跑到多少?最担心的是数据传上去后难取回...
yangqi
2017-03-25 08:11:20 +08:00
@zolo 目前还没取过。取回的时候可以浏览文件列表选择文件取回,或者可以让他们寄个硬盘过来,你拷完了寄回去会把硬盘钱退回来。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/345996

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX