关于压缩

2016-09-19 16:49:32 +08:00
 ixinshang

大家好，我现在有一台机器，需要备份一些文件，计划使用 zip 或者 tar 来先打包，但是文件数量太多，有大概 4000 个文件大小约为 50M 。 我自己测试了一下，很费时，请教下，可有其他方案能解决这个问题。

1583 次点击
所在节点    问与答
12 条回复
douglas1997
2016-09-19 17:18:18 +08:00
你需要考虑压缩瓶颈何在。什么东西耗时间。
7timesonenight
2016-09-19 17:23:00 +08:00
Python 写个脚本压缩，晚上睡觉的时候让它跑去好了。
xmoiduts
2016-09-19 17:37:33 +08:00
如果只是打包，还是 tar 吧。
seki
2016-09-19 17:42:59 +08:00
你的目标是什么？省时间和省体积只能二选一
coderluan
2016-09-19 18:03:53 +08:00
楼主需要的应该是打包，而不是压缩，那样直接压缩软件的压缩选项中选打包不压缩就好了，理论上和拷贝文件一样快。
skydiver
2016-09-19 18:07:14 +08:00
换 SSD
YuJianrong
2016-09-19 20:20:20 +08:00
才 50M 就很慢那一定是 IO 问题了，除了换 SSD 没有解决办法吧。
ivmm
2016-09-19 21:34:14 +08:00
先 tar 再 bzip2
yidinghe
2016-09-19 21:36:04 +08:00
Windows 的话有自动备份的功能，我在用，备份到 SD 卡上，平时不用理会。
imn1
2016-09-19 21:38:43 +08:00
不计较空间的话，用备份方式，只打包不压缩就行了
lhbc
2016-09-19 21:44:52 +08:00
50MB/4000=13KB
如果是机械硬盘，理论峰值不到 200 IOPS ，读取完所有文件至少需要 4000/200=20 秒(理论极限)，实际情况如果复杂点，比如文件分散，还有其他 IO 任务等，那时间翻数倍也不奇怪
ixinshang
2016-09-19 23:14:05 +08:00
@douglas1997
@skydiver
@ivmm
@lhbc
@imn1
@seki
感谢以上各位，我需要自己再次确定下 我到底需要什么。
@coderluan

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/307293

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX