16亿个二进制文件如何打包成一个文件？

lutong988 · 发表于 2023-7-17 14:17:18

有16亿个二进制文件，每个文件1-64KB大小不等，总大小1.98TB。为了便于传输和使用，现需要压缩或打包成一个文件，然后在其他机器上解压使用，目前使用winrar,7zip,bandizip等压缩软件，均以资源耗尽，压缩失败告终。特此请教大家，有没有比较好的办法？
电脑配置：AMD 5950X 内存：128GB 硬盘：4T+8T SSD 操作系统：Windows10

zhengdejin · 发表于 2023-7-17 14:20:12

存储时候设置成“仅存储”是否可行？就是不压缩，只打包？嫌文件大的，可以设置分卷。

ahjswjq · 发表于 2023-7-17 14:25:10

试一下winrar ,勾选固实,对零碎小文件可能有高压缩比,winrar也有分卷功能(就是分成多个小文件),1.98TB过大(如果是造成系统资源耗尽的原因)你可以分成几个部分分别打包压缩

作别西天 · 发表于 2023-7-17 14:28:13

试过tar打包吗

荷尔蒙暴民 · 发表于 2023-7-17 14:31:12

建一个分区用windows的文件压缩功能，然后整个分区转储过去

荷尔蒙暴民 · 发表于 2023-7-17 14:37:43

tar 试试

huchuanhao · 发表于 2023-7-17 14:45:48

伦风凝星发表于 2023-7-17 14:05
存储时候设置成“仅存储”是否可行？就是不压缩，只打包？嫌文件大的，可以设置分卷。 ...

设置仅存储模式了，还是提示压缩失败

火神 · 发表于 2023-7-17 14:50:30

多半是缓存（内存）不够了
试试 7z a target.zip dir1\
每次往一个target里面塞100g，循环18次

爱你的人是我 · 发表于 2023-7-17 14:57:56

用备份软件试试呢，傲梅轻松备份这种的

nxwqwt · 发表于 2023-7-17 15:07:13

分卷压缩呢

账号		自动登录	找回密码
密码			立即注册

16亿个二进制文件如何打包成一个文件？

本帖子中包含更多资源