高压缩率的归档工具求推荐

1 天前
 CodeAllen

首先说下自己情况,归档文件数据一般用 7z 格式,比 zip 压缩率能稍微高一些,主要还是开源免费,图片和视频这些肯定不能指望有多高的压缩率,图片和视频我一般用“仅存储”模式速度快。 大家的资料是如何压缩归档的?用啥格式和压缩参数,另外,听说 7z 格式没有恢复记录,如果发生文件损坏很难恢复,增加一定的恢复记录提高数据恢复能力性价比如何,大家怎么看?

2326 次点击
所在节点    程序员
35 条回复
v2tudnew
1 天前
我也想知道哪个工具压缩率高,好像游戏高压版这类工具压缩率就可以。
7z 是没有恢复记录的,你可以用独立的 PAR2 软件生成恢复记录。
不推荐 RAR 恢复记录,恢复效果很玄幻。

如果你是两块硬盘互相备份,恢复记录有 1%都够用了,毕竟两个副本同时损坏一个分块的概率不比彩票头等奖大。
GeekGao
1 天前
RAR 是最佳的。如果不考虑 license 的话。
forty
1 天前
7z 的支持普及度远不及 zip, 我觉得不差那么一点点存储了, zip 被大量的工具直接支持,包括但不限于操作系统, 各种在线文件管理系统,文件比较工具等,方便在不下载不解压的情况下查看文件列表或内容
2067
1 天前
7z-std ,速度飞起,谁用谁知道

图片视频压不压差不多,如果觉着太零散了就打个包

---

或者弄个 vhdx 文件,分区开启 ntfs 压缩


---

照片视频要是想压缩的话,工具挺多的,图片可以用 irfanview ,可以指定目标大小,视频可以用 ffmpeg_batch ,存档的东西建议 cpu 压缩,av1 或者 hevc 看心情,gpu 压缩画质会比较差
2067
1 天前
真正重要的东西,本地 raid1 ,然后再弄几个网盘加密后上传,就别在意容量的问题了

至于压缩比这个事,其实 7z 的 lzma 已经可以满足要求了,至于担心文件损坏,可以考虑一下 MultiPar ,虽然这种东西的恢复能力也都仅限于少量误码
MoYi123
1 天前
可以参考下这个 https://tech.meituan.com/2021/01/07/pack-gzip-zstd-lz4.html

一般就用 zstd 吧.
dejavv
1 天前
具体看压缩的东西,peazip 也可以
prodcd
1 天前
归档类的还是考虑 rar ,可以设置部分格式直接跳过压缩,所以很方便。恢复记录还没尝试过,打包以后扔网盘很划算,记得加密码。license 有办法。
据说 7z 压缩包如果损坏所有文件都无法解压?
重要数据还是异地多存储几份更靠谱,不要迷信 RAID ,那玩意不防火,也不防病毒。
电影类的公共资源完全没必要存储,随看随下,看完就删。
CodeAllen
1 天前
@v2tudnew par2 学习了,看起来有点东西。对的,以前 GTA 有那种超级压缩包,解压也贼慢,但是压缩率好像挺高。

@GeekGao 国内的代理好像不咋地,如果花钱了效果好其实也可以接受

@forty zip 有个问题,不支持连文件名一起加密,而且老版本 Windows 资源管理器不支持 AES 模式的 zip 加密包,刚试了一下,7z 用 AES 模式压缩加密 zip 包在 win11 24h2 上可以正确打开,老版本打开会报错。有时候可能就是需要避免被扫描所以需要加密文件名。

@2067 分区开压缩占用性能吧,就跟开了 BitLocker 一样,感觉肉眼可见的性能损失。简单用 7z 确实也够用了,图片视频二压感觉没必要,像是复印机给复印件再复印一次,越压越没法看。
2067
1 天前
@prodcd #8

部分损坏导致后面无法解压是因为固实压缩导致的,winrar 默认不开启这个所以不受影响,7zip 默认固实范围 4G ,也就是说单个位置损坏最多可能造成 4G 数据无法恢复。

固实压缩的好处就是可以消除文件之间的相同冗余,坏处就是一损俱损
RecursiveG
1 天前
主存储 7z+RAIDz2 ,网盘等要单独加恢复记录的用 RAR ,PAR2 考虑过但是多个文件太丑了所以放弃。LZMA 算压缩率比较高的算法了,换别的也提高不了多少。
v2tudnew
1 天前
@2067 #5 “少量误码”这个评价我觉得有失公允,你拉到 100%别说损坏个几十%,文件丢了也能完整恢复,当然正常情况也就是位衰减几个比特,不需要太多。
v2tudnew
1 天前
@RecursiveG 已经支持内嵌 7z 压缩文件,不过我觉得这种和 RAR 恢复一样,恢复后压缩包就失去恢复能力又要折腾,不喜欢。
CodeAllen
23 小时 44 分钟前
@MoYi123 专业,我看跟 docker 镜像类似,直接上数据对比了,看起来应该是项目源码数据

@dejavv 这个看起来有点小众,类似于压缩包查看器?好像还有一个自定义压缩包格式

@prodcd rar 好久没用过了,后面我看看现在有没有啥变化,很早前还用好压来自,后面搞一堆广告就越看越山寨

@v2tudnew 感觉有点套娃了,以用户的角度考虑如果 7z 格式能直接支持恢复记录肯定是最好的
2067
23 小时 24 分钟前
@v2tudnew #1 UHARC 吗,这东西真的是慢到怀疑人生,回忆起十几年前被解压比下载还慢得多的日子

https://windows-cdn.softpedia.com/screenshots/uharc-cmd_1.png
v2tudnew
23 小时 6 分钟前
@CodeAllen 之前有人建议 7z 开发者支持,对方的大概意思是 7z 得保持高压缩比,加了恢复记录体积变大了,反正也不影响第三方搞。😅
v2tudnew
23 小时 3 分钟前
@2067 谢谢,不清楚是不是,我试试这个。
v2tudnew
22 小时 5 分钟前
@2067
速度慢是它只用单线程,但遗憾得是,它压缩后的体积和 LZMA2 差不多:
UHA 1,328,559,204 字节 7z 1,324,688,260 字节
可能是比 LZMA 的 7z 压缩率高,所以当时是世界第一吧。

像我说的游戏高压版,那是相当离谱,我举个例子:
原文件:26.7GB 7z:23.1GB 高压版:8.3GB ,没错 8.3GB😅
fms
21 小时 58 分钟前
之前有俩差异特别小的文件,每个两百兆,想着两个一起随随便便不压到 210 兆以内?结果 7z, zip 等都是 400+。好像是当文件重复数据间隔超出窗口大小就没辙了。

后来用了 zpaq https://www.mattmahoney.net/dc/zpaq.html 压缩+块级去重+增量存档,但应该是不支持你说的'恢复记录'

更正式(重)一点的用过 restic, 但'归档数据'是 repo(文件夹), 不是单个文件。可以直接挂载快照到本地,后端还支持很多远程协议,日用于自动快照备份到 google drive 。
wtof
21 小时 56 分钟前
我印象中小时候那些盗版光盘里面的高压版游戏都是混了好几种压缩,而且一层套一层,装的时候命令行窗口都有好几个
UHARC 只是一方面,另外音频印象中也有 ogg 之类的格式转出来 WAV 之类的操作(可能素材也有类似的专门处理?)...
LZ 这种需求不一定适合了,不排除有些可能是单独定制的

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1099951

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX