码迷,mamicode.com
首页 > 系统相关 > 详细

linux下分卷压缩,合并解压的3种方法

时间:2020-04-15 14:03:33      阅读:113      评论:0      收藏:0      [点我收藏+]

标签:done   cached   usr   record   osi   脚本   排序   情况   情况下   

我们上传东西的时候,由于文件过大而不能上传,或者不给上传,最明显的就是发邮件了,附件最大5M,有的10M。如果超过了就郁闷了。这个时候,如果能把压缩的东西,分割开来就比较爽了,windows下面我想大家知道怎么分割,利用winrar,winzip图型化设置压缩出来的块的大小。但是在linux下面有没有这样的方法了,linux下面有rar命令,有zip命令,windows下面这二种方式可以分割压缩,我想linux下面绝对也是可以的。下面是我尝试过程的记录:

 

一,rar分卷压缩和合并解压

rar -h

我们会发现以下参数,要创建多大的卷。

v             Create volumes with size autodetection or list all volumes
v<size>[k,b]  Create volumes with size=<size>*1000 [*1024, *1]

  1. [zhangy@BlackGhost awksed]$ rar a -v5m google.rar Google_Maps_API.doc  //-v和5m之间不要有空格  
  2.   
  3. RAR 3.92   Copyright (c) 1993-2010 Alexander Roshal   10 Feb 2010  
  4. Shareware version         Type RAR -? for help  
  5.   
  6. Evaluation copy. Please register.  
  7.   
  8. Creating archive google.rar  
  9.   
  10. Adding    Google_Maps_API.doc  
  11. Calculating the control sum       
  12.   
  13. Creating archive google.part2.rar  
  14.   
  15. ...       Google_Maps_API.doc  
  16. Calculating the control sum       
  17.   
  18. Creating archive google.part3.rar  
  19.   
  20. ...       Google_Maps_API.doc                                         OK  
  21. Calculating the control sum  
  22. Done  
  23. [zhangy@BlackGhost awksed]$ unrar x google.part1.rar //合并并解压  
  24.   
  25. UNRAR 3.90 freeware      Copyright (c) 1993-2009 Alexander Roshal  
  26.   
  27. Extracting from google.part1.rar  
  28.   
  29. Extracting  Google_Maps_API.doc                                            
  30.   
  31. Extracting from google.part2.rar  
  32.   
  33. ...         Google_Maps_API.doc                                       76%  
  34.   
  35. Extracting from google.part3.rar  
  36.   
  37. ...         Google_Maps_API.doc                                       OK  
  38. All OK  

二,zip分卷压缩和合并解压

zip -h2

你会发现,分卷参数-s,意思是说分割成多大的卷

Splits (archives created as a set of split files):
-s ssize  create split archive with splits of size ssize,where ssize nm
n number and m multiplier (kmgt, default m), 100k -> 100 kB

下面的意思是说如果是分卷的了,用 -s 0 --out把分卷合成一个

If input is split, output will default to same split size
Use -s=0 or -s- to turn off splitting to convert split to single file:
zip in_split_archive -s 0 --out out_single_file_archive

用zip来分卷压缩时,他必须是.zip的形势,他的流程是这样的,先把一般文件压缩成.zip的文件,然后在将.zip的文件分成多少块,如果你不这样坐呢,会提示错误的。

[zhangy@BlackGhost awksed]$ zip -s 4m Google_Maps_API.doc
zip error: Invalid command arguments (archive name must end in .zip for splits)

  1. [zhangy@BlackGhost awksed]$ zip google.zip Google_Maps_API.doc //先压缩不然就报上面的错  
  2.   adding: Google_Maps_API.doc(deflated 12%)  
  3. [zhangy@BlackGhost awksed]$ zip -s 4m google.zip --out ziptest   //分卷  
  4.  copying: Google_Maps_API.doc  
  5. [zhangy@BlackGhost awksed]$ zip ziptest -s 0 --out google_bak.zip  //这样合卷有问题  
  6. copying: Google_Maps_API.doc  
  7. [zhangy@BlackGhost awksed]$ cat ziptest.z* > google_bak.zip //利用cat来合卷  
  8. [zhangy@BlackGhost awksed]$ unzip google_bak.zip  //解压  

上面呢用zip来分卷是没有问题的,但是合卷的时候就有问题了,zip -s 0 --out这样的方式,合出来的卷,大约只有分卷前的一半,这就搞的我很无语了,并且解压的时候,提示我输入密码,在次无语,只好有cat来合并了,还好合并后,解压没有任何问题。

三,利用split来分卷,cat来合并分卷

我花了很长时间去研究tar的参数,研究了好长时间,还是没有找到可以分卷的参数,英语还是不过关啊,唉。不过我们可以借助split来分卷

  1. [zhangy@BlackGhost awksed]$ tar czvf google.tar.gz Google_Maps_API.doc  
  2. Google_Maps_API.doc  
  3. [zhangy@BlackGhost awksed]$ split -d -b 4m google.tar.gz  
  4. [zhangy@BlackGhost awksed]$ cat x* > google_bak.tar.gz  
  5. [zhangy@BlackGhost awksed]$ tar zxvf google_bak.tar.gz  
  6. Google_Maps_API.doc  
技术图片

分卷压缩

上图说明

1,google.part1.rar等,是rar分卷压缩后的结果

2,x00,x01等是利用split来分卷后的结果

3,ziptest.zip,ziptest.z01等是利用zip来分卷后的结果。

我始终相信tar 可以直接进行分卷的。只不过我没有找到而已,下面是tar的参数,含有翻译

  1.  主操作模式:  
  2.   
  3.  -A, --catenate, --concatenate   追加 tar 文件至归档  
  4.  -c, --create               创建一个新归档  
  5.  -d, --diff, --compare      找出归档和文件系统的差异  
  6.  --delete               从归档(非磁带!)中删除  
  7.  -r, --append               追加文件至归档结尾  
  8.  -t, --list                 列出归档内容  
  9.  --test-label           测试归档卷标并退出  
  10.  -u, --update               仅追加比归档中副本更新的文件  
  11.  -x, --extract, --get       从归档中解出文件  
  12.   
  13.  操作修饰符:  
  14.  --check-device         当创建增量归档时检查设备号(默认)  
  15.  -g, --listed-incremental=文件处理新式的 GNU 格式的增量备份  
  16.  -G, --incremental          处理老式的 GNU 格式的增量备份  
  17.  --ignore-failed-read当遇上不可读文件时不要以非零值退出  
  18.  -n, --seek                 归档可检索  
  19.  --no-check-device      当创建增量归档时不要检查设备号  
  20.  --occurrence[=NUMBER]  仅处理归档中每个文件的第 NUMBER个事件;仅当与以下子命令 --delete,  
  21.  --diff, --extract 或是 --list中的一个联合使用时,此选项才有效。而且不管文件列表是以命令行形式给出或是通过  
  22.  -T 选项指定的;NUMBER 值默认为 1  
  23.  --sparse-version=MAJOR[.MINOR]设置所用的离散格式版本(隐含--sparse)  
  24.  -S, --sparse               高效处理离散文件  
  25.   
  26.  重写控制:  
  27.   
  28.  -k, --keep-old-files       解压时不要替换存在的文件  
  29.  --keep-newer-files不要替换比归档中副本更新的已存在的文件  
  30.  --no-overwrite-dir     保留已存在目录的元数据  
  31.  --overwrite            解压时重写存在的文件  
  32.  --overwrite-dir解压时重写已存在目录的元数据(默认)  
  33.  --recursive-unlink     解压目录之前先清除目录层次  
  34.  --remove-files         在添加文件至归档后删除它们  
  35.  -U, --unlink-first         在解压要重写的文件之前先删除它们  
  36.  -W, --verify               在写入以后尝试校验归档  
  37.   
  38.  选择输出流:  
  39.   
  40.  --ignore-command-error 忽略子进程的退出代码  
  41.  --no-ignore-command-error将子进程的非零退出代码认为发生错误  
  42.  -O, --to-stdout            解压文件至标准输出  
  43.  --to-command=COMMAND将解压的文件通过管道传送至另一个程序  
  44.  操作文件属性:  
  45.   
  46.  --atime-preserve[=METHOD]在输出的文件上保留访问时间,要么通过在读取(默认  
  47.  METHOD=‘replace’)后还原时间,要不就不要在第一次(METHOD=‘system’)设置时间  
  48.  --delay-directory-restore 直到解压结束才设置修改时间和所解目录的权限  
  49.  --group=名称         强制将 NAME作为所添加的文件的组所有者  
  50.  --mode=CHANGES         强制将所添加的文件(符号)更改为权限CHANGES  
  51.  --mtime=DATE-OR-FILE   从 DATE-OR-FILE 中为添加的文件设置mtime  
  52.  -m, --touch                不要解压文件的修改时间  
  53.  --no-delay-directory-restore取消 --delay-directory-restore 选项的效果  
  54.  --no-same-owner        将文件解压为您所有  
  55.  --no-same-permissions从归档中解压权限时使用用户的掩码位(默认为普通用户服务)  
  56.  --numeric-owner        总是以数字代表用户/组的名称  
  57.  --owner=名称         强制将 NAME作为所添加的文件的所有者  
  58.  -p, --preserve-permissions, --same-permissions解压文件权限信息(默认只为超级用户服务)  
  59.  --preserve             与 -p 和 -s 一样  
  60.  --same-owner           尝试解压时保持所有者关系一致  
  61.  -s, --preserve-order, --same-order为解压至匹配归档排序名称  
  62.   
  63.  设备选择和切换:  
  64.   
  65.  -f, --file=ARCHIVE         使用归档文件或 ARCHIVE 设备  
  66.  --force-local即使归档文件存在副本还是把它认为是本地归档  
  67.  -F, --info-script=名称, --new-volume-script=名称在每卷磁带最后运行脚本(隐含 -M)  
  68.  -L, --tape-length=NUMBER   写入 NUMBER × 1024 字节后更换磁带  
  69.  -M, --multi-volume         创建/列出/解压多卷归档文件  
  70.  --rmt-command=COMMAND  使用指定的 rmt COMMAND 代替 rmt  
  71.  --rsh-command=COMMAND  使用远程 COMMAND 代替 rsh  
  72.  --volno-file=文件    使用/更新 FILE 中的卷数  
  73.   
  74.  设备分块:  
  75.   
  76.  -b, --blocking-factor=BLOCKS   每个记录 BLOCKS x 512 字节  
  77.  -B, --read-full-records    读取时重新分块(只对 4.2BSD 管道有效)  
  78.  -i, --ignore-zeros         忽略归档中的零字节块(即文件结尾)  
  79.  --record-size=NUMBER   每个记录的字节数 NUMBER,乘以 512  
  80.   
  81.  选择归档格式:  
  82.   
  83.  -H, --format=FORMAT        创建指定格式的归档  
  84.   
  85.  FORMAT 是以下格式中的一种:  
  86.   
  87.  gnu                      GNU tar 1.13.x 格式  
  88.  oldgnu                   GNU 格式 as per tar <= 1.12  
  89.  pax                      POSIX 1003.1-2001 (pax) 格式  
  90.  posix                    等同于 pax  
  91.  ustar                    POSIX 1003.1-1988 (ustar) 格式  
  92.  v7                       old V7 tar 格式  
  93.   
  94.  --old-archive, --portability等同于 --format=v7  
  95.  --pax-option=关键字[[:]=值][,关键字[[:]=值]]...控制 pax 关键字  
  96.  --posix                等同于 --format=posix  
  97.  -V, --label=TEXT           创建带有卷名 TEXT的归档;在列出/解压时,使用 TEXT作为卷名的模式串  
  98.   
  99.  压缩选项:  
  100.   
  101.  -a, --auto-compress        使用归档后缀来决定压缩程序  
  102.  -I, --use-compress-program=PROG通过 PROG 过滤(必须是能接受 -d选项的程序)  
  103.  -j, --bzip2                通过 bzip2 过滤归档  
  104.  --lzma                 通过 lzma 过滤归档  
  105.  --no-auto-compress     do not use archive suffix to determine thecompression program  
  106.  -z, --gzip, --gunzip, --ungzip   通过 gzip 过滤归档  
  107.  -Z, --compress, --uncompress   通过 compress 过滤归档  
  108.   
  109.  -J, --xz                   filter the archive through xz  
  110.  --lzop                 通过 lzop 过滤归档  
  111.   
  112.  本地文件选择:  
  113.   
  114.  --add-file=文件      添加指定的 FILE 至归档(如果名字以 -开始会很有用的)  
  115.  --backup[=CONTROL]     在删除前备份,选择 CONTROL 版本  
  116.  -C, --directory=DIR        改变至目录 DIR  
  117.  --exclude=PATTERN      排除以 PATTERN 指定的文件  
  118.  --exclude-caches       除标识文件本身外,排除包含CACHEDIR.TAG 的目录中的内容  
  119.  --exclude-caches-all   排除包含 CACHEDIR.TAG 的目录  
  120.  --exclude-caches-under 排除包含 CACHEDIR.TAG的目录中所有内容  
  121.  --exclude-tag=文件   除 FILE 自身外,排除包含 FILE的目录中的内容  
  122.  --exclude-tag-all=文件   排除包含 FILE 的目录  
  123.  --exclude-tag-under=文件   排除包含 FILE的目录中的所有内容  
  124.  --exclude-vcs          排除版本控制系统目录  
  125.  -h, --dereference跟踪符号链接;将它们所指向的文件归档并输出  
  126.  --hard-dereference 跟踪硬链接;将它们所指向的文件归档并输出  
  127.  -K, --starting-file=MEMBER-NAME从归档中的 MEMBER-NAME 成员处开始  
  128.  --newer-mtime=DATE     当只有数据改变时比较数据和时间  
  129.  --no-null              禁用上一次的效果 --null 选项  
  130.  --no-recursion         避免目录中的自动降级  
  131.  --no-unquote           不以 -T 读取的文件名作为引用结束  
  132.  --null                 -T 读取以空终止的名字,-C 禁用  
  133.  -N, --newer=DATE-OR-FILE, --after-date=DATE-OR-FILE只保存比 DATE-OR-FILE 更新的文件  
  134.  --one-file-system      创建归档时保存在本地文件系统中  
  135.  -P, --absolute-names       不要从文件名中清除引导符‘/’  
  136.  --recursion            目录递归(默认)  
  137.  --suffix=STRING        在删除前备份,除非被环境变量SIMPLE_BACKUP_SUFFIX覆盖,否则覆盖常用后缀(‘’)  
  138.  -T, --files-from=文件    从 FILE中获取文件名来解压或创建文件  
  139.  --unquote              以 -T读取的文件名作为引用结束(默认)  
  140.  -X, --exclude-from=文件  排除 FILE 中列出的模式串  
  141.   
  142.  文件名变换:  
  143.   
  144.  --strip-components=NUMBER   解压时从文件名中清除 NUMBER个引导部分  
  145.  --transform=EXPRESSION, --xform=EXPRESSION使用 sed 代替 EXPRESSION 来进行文件名变换  
  146.   
  147.  文件名匹配选项(同时影响排除和包括模式串):  
  148.   
  149.  --anchored             模式串匹配文件名头部  
  150.  --ignore-case          忽略大小写  
  151.  --no-anchored          模式串匹配任意‘/’后字符(默认对  
  152.  exclusion 有效)  
  153.  --no-ignore-case       匹配大小写(默认)  
  154.  --no-wildcards         逐字匹配字符串  
  155.  --no-wildcards-match-slash   通配符不匹配‘/’  
  156.  --wildcards            使用通配符(默认对 exclusion )  
  157.  --wildcards-match-slash通配符匹配‘/’(默认对排除操作有效)  
  158.   
  159.  提示性输出:  
  160.   
  161.  --checkpoint[=NUMBER]  每隔 NUMBER个记录显示进度信息(默认为 10 个)  
  162.  --checkpoint-action=ACTION   在每个检查点上执行 ACTION  
  163.  --index-file=文件    将详细输出发送至 FILE  
  164.  -l, --check-links只要不是所有链接都被输出就打印信息  
  165.  --no-quote-chars=STRING   禁用来自 STRING 的字符引用  
  166.  --quote-chars=STRING   来自 STRING 的额外的引用字符  
  167.  --quoting-style=STYLE  设置名称引用风格;有效的 STYLE值请参阅以下说明  
  168.  -R, --block-number         每个信息都显示归档内的块数  
  169.  --show-defaults        显示 tar 默认选项  
  170.  --show-omitted-dir 列表或解压时,列出每个不匹配查找标准的目录  
  171.  --show-transformed-names, --show-stored-names显示变换后的文件名或归档名  
  172.  --totals[=SIGNAL]      处理归档后打印出总字节数;当此SIGNAL 被触发时带参数 -打印总字节数;允许的信号为:  
  173.  SIGHUP,SIGQUIT,SIGINT,SIGUSR1 和  
  174.  SIGUSR2;同时也接受不带 SIG  
  175.  前缀的信号名称  
  176.  --utc                  以 UTC 格式打印文件修改信息  
  177.  -v, --verbose              详细地列出处理的文件  
  178.  -w, --interactive, --confirmation每次操作都要求确认  
  179.   
  180.  兼容性选项:  
  181.   
  182.  -o                         创建归档时,相当于  
  183.  --old-archive;展开归档时,相当于  
  184.  --no-same-owner  
  185.   
  186.  其它选项:  
  187.   
  188.  -?, --help                 显示此帮助列表  
  189.  --restrict             禁用某些潜在的有危险的选项  
  190.  --usage                显示简短的用法说明  
  191.  --version              打印程序版本  
  192.   
  193. 长选项和相应短选项具有相同的强制参数或可选参数。  
  194.   
  195. 除非以 --suffix 或 SIMPLE_BACKUP_SUFFIX  
  196. 设置备份后缀,否则备份后缀就是“~”。  
  197. 可以用 --backup 或 VERSION_CONTROL 设置版本控制,可能的值为:  
  198.   
  199.  none, off       从不做备份  
  200.  t, numbered     进行编号备份  
  201.  nil, existing  
  202. 如果编号备份存在则进行编号备份,否则进行简单备份  
  203.  never, simple   总是使用简单备份 

 

-------

Linux中关于tar分卷压缩和合并的使用?

以每卷500M为例
tar分卷压缩:tar cvzpf - somedir | split -d -b 500m (-d不是split的选项,是shell的选项,表
示将tar命令的输出作为split的输入)
tar多卷合并:cat x* > mytarfile.tar.gz

 

--------------------------

linux解压 tar命令
tar命令

tar [-cxtzjvfpPN] 文件与目录 ....
参数:
-c :建立一个压缩文件的参数指令(create 的意思);
-x :解开一个压缩文件的参数指令!
-t :查看 tarfile 里面的文件!
特别注意,在参数的下达中, c/x/t 仅能存在一个!不可同时存在!
因为不可能同时压缩与解压缩。
-z :是否同时具有 gzip 的属性?亦即是否需要用 gzip 压缩?
-j :是否同时具有 bzip2 的属性?亦即是否需要用 bzip2 压缩?
-v :压缩的过程中显示文件!这个常用,但不建议用在背景执行过程!
-f :使用档名,请留意,在 f 之后要立即接档名喔!不要再加参数!
   例如使用『 tar -zcvfP tfile sfile』就是错误的写法,要写成
   『 tar -zcvPf tfile sfile』才对喔!
-p :使用原文件的原来属性(属性不会依据使用者而变)
-P :可以使用绝对路径来压缩!
-N :比后面接的日期(yyyy/mm/dd)还要新的才会被打包进新建的文件中!
--exclude FILE:在压缩的过程中,不要将 FILE 打包!
范例:
范例一:将整个 /etc 目录下的文件全部打包成为 /tmp/etc.tar
[root@linux ~]# tar -cvf /tmp/etc.tar /etc<==仅打包,不压缩!
[root@linux ~]# tar -zcvf /tmp/etc.tar.gz /etc<==打包后,以 gzip 压缩
[root@linux ~]# tar -jcvf /tmp/etc.tar.bz2 /etc<==打包后,以 bzip2 压缩
# 特别注意,在参数 f 之后的文件档名是自己取的,我们习惯上都用 .tar 来作为辨识。
# 如果加 z 参数,则以 .tar.gz 或 .tgz 来代表 gzip 压缩过的 tar file ~
# 如果加 j 参数,则以 .tar.bz2 来作为附档名啊~
# 上述指令在执行的时候,会显示一个警告讯息:
# 『tar: Removing leading `/" from member names』那是关於绝对路径的特殊设定。

范例二:查阅上述 /tmp/etc.tar.gz 文件内有哪些文件?
[root@linux ~]# tar -ztvf /tmp/etc.tar.gz
# 由於我们使用 gzip 压缩,所以要查阅该 tar file 内的文件时,
# 就得要加上 z 这个参数了!这很重要的!

范例三:将 /tmp/etc.tar.gz 文件解压缩在 /usr/local/src 底下
[root@linux ~]# cd /usr/local/src
[root@linux src]# tar -zxvf /tmp/etc.tar.gz
# 在预设的情况下,我们可以将压缩档在任何地方解开的!以这个范例来说,
# 我先将工作目录变换到 /usr/local/src 底下,并且解开 /tmp/etc.tar.gz ,
# 则解开的目录会在 /usr/local/src/etc 呢!另外,如果您进入 /usr/local/src/etc
# 则会发现,该目录下的文件属性与 /etc/ 可能会有所不同喔!

范例四:在 /tmp 底下,我只想要将 /tmp/etc.tar.gz 内的 etc/passwd 解开而已
[root@linux ~]# cd /tmp
[root@linux tmp]# tar -zxvf /tmp/etc.tar.gz etc/passwd
# 我可以透过 tar -ztvf 来查阅 tarfile 内的文件名称,如果单只要一个文件,
# 就可以透过这个方式来下达!注意到! etc.tar.gz 内的根目录 / 是被拿掉了!

范例五:将 /etc/ 内的所有文件备份下来,并且保存其权限!
[root@linux ~]# tar -zxvpf /tmp/etc.tar.gz /etc
# 这个 -p 的属性是很重要的,尤其是当您要保留原本文件的属性时!

范例六:在 /home 当中,比 2005/06/01 新的文件才备份
[root@linux ~]# tar -N "2005/06/01" -zcvf home.tar.gz /home

范例七:我要备份 /home, /etc ,但不要 /home/dmtsai
[root@linux ~]# tar --exclude /home/dmtsai -zcvf myfile.tar.gz /home/* /etc

范例八:将 /etc/ 打包后直接解开在 /tmp 底下,而不产生文件!
[root@linux ~]# cd /tmp
[root@linux tmp]# tar -cvf - /etc | tar -xvf -
# 这个动作有点像是 cp -r /etc /tmp 啦~依旧是有其有用途的!
# 要注意的地方在於输出档变成 - 而输入档也变成 - ,又有一个 | 存在~
# 这分别代表 standard output, standard input 与管线命令啦!
# 这部分我们会在 Bash shell 时,再次提到这个指令跟大家再解释啰

 
 

linux下分卷压缩,合并解压的3种方法

标签:done   cached   usr   record   osi   脚本   排序   情况   情况下   

原文地址:https://www.cnblogs.com/keystone/p/12704540.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!