压缩解压打包工具基础
目录
前言
compress压缩解压工具
gzip压缩解压工具
bzip2压缩解压工具
xz压缩解压工具
zip压缩打包工具
tar打包工具
split文件分割
cpio打包压缩
前言
无论是我们的个人笔记本台式机还是服务器，它们的存储设备可以存储的东西都是有限的，不可能无限的存储东西，除非我们不停地增加硬盘的数量，但是这又是非常不现实的，因为我们需要无限的空间，很多时候我们需要存储大量的不可删除的数据时，就会采用压缩的方式，这样我们就可以即剩下了很多空间同时又保存了我们的文件。
在我们的常用的Windows操作系统上，压缩工具对文件的压缩效果并不是很出色，但是在在linux上文件的压缩率可以达到上千倍。接下来，让我们看看压缩工具都有那些，以及他们的压缩效果吧！
compress压缩解压工具
文件后缀名：.Z
参数：
-d 解压缩
uncompress
zcat X.Z > X
-c 将结果打印到屏幕上，配合重定向，不会覆盖原文件，但权限会变。
-f 默认不对硬链接数为2及以上的文件压缩，加上f，强制压缩指定文件，而其他同inode的文件硬链接数减1.
-v 显示详细过程。
[root@CT71 app]#ll -h total 31M -rw-r--r--. 1 root root 31M Aug 10 15:39 etc.tar [root@CT71 app]#compress etc.tar [root@CT71 app]#ll -h total 16M -rw-r--r--. 1 root root 16M Aug 10 15:39 etc.tar.Z
由上面我们可以很容易知道compress这个压缩工具压缩率不是特别高，并且压缩后源文件是不会在存在的，如何保证源文件存在同时对文件进行压缩呢？
[root@CT71 app]#compress -c etc.tar > etc.tar.Z [root@CT71 app]#ll total 47572 -rw-r--r--. 1 root root 32286720 Aug 10 15:39 etc.tar -rw-r--r--. 1 root root 16422423 Aug 10 16:27 etc.tar.Z
对于如何解压的问题，上述给出了三种方法，我在这里一一演示：
[root@CT71 app]#compress -d etc.tar.Z
[root@CT71 app]#uncompress etc.tar.Z
[root@CT71 app]#zcat etc.tar.Z > etc.tar
我们此时想，万一我们要压缩的文件是有超链接的话，咋办，我们只需要加上-f选项，就能将我们要压缩的文件从超链接中断掉：
[root@CT71 app]#ll total 0 -rw-r--r--. 1 root root 0 Aug 10 16:33 etc.tar [root@CT71 app]#ln etc.tar etc.tar.ln [root@CT71 app]#ll total 0 -rw-r--r--. 2 root root 0 Aug 10 16:33 etc.tar ------------------注意连接数 -rw-r--r--. 2 root root 0 Aug 10 16:33 etc.tar.ln [root@CT71 app]#compress etc.tar etc.tar has 1 other links: unchanged [root@CT71 app]#compress -f etc.tar [root@CT71 app]#ll total 4 -rw-r--r--. 1 root root 0 Aug 10 16:33 etc.tar.ln ------------------注意连接数 -rw-r--r--. 1 root root 3 Aug 10 16:33 etc.tar.Z
还有一个-v选项，它的作用就是在我们压缩的过程中显示一个进度，让我们可以了解到我们的压缩进度，对大文件压缩的时候作用比较明显，关于-f与-v选项，在下面我们就不在过多介绍
gzip压缩解压工具
文件后缀名：.gz
参数：
-d 解压缩
gunzip
zcat X.gz > X
-c 将结果打印到屏幕上，配合重定向，不会覆盖原文件，但权限会变。
-f 默认不对硬链接数为2及以上的文件压缩，加上f，强制压缩指定文件，而其他同inode的文件硬链接数减1.
-v 显示详细过程。
-# 数字越大，压缩比越高，速度越慢，文件越小。
-1 等于 --fast
-2，3，4，5，6(default)，7，8
-9 等于 --best
[root@CT71 app]#ll -h total 227M -rw-------. 1 root root 7.6M Aug 10 16:43 messages -rw-r--r--. 1 root root 219M Aug 10 16:45 test_gzip [root@CT71 app]#gzip test_gzip [root@CT71 app]#ll -h total 11M -rw-------. 1 root root 7.6M Aug 10 16:43 messages -rw-r--r--. 1 root root 2.8M Aug 10 16:45 test_gzip.gz
我们可以看到在默认压缩率的情况下，压缩比已经很高了，如果是9的话，会有多高的压缩率呢？
[root@CT71 app]#gzip -v -9 test_gzip test_gzip: 98.8% -- replaced with test_gzip.gz [root@CT71 app]#ll -h total 11M -rw-------. 1 root root 7.6M Aug 10 16:43 messages -rw-r--r--. 1 root root 2.6M Aug 10 16:45 test_gzip.gz
相比默认的压缩率，是比以前小点了。gzip的解压方式也是三种，同时它对文件压缩时，是不会保留原文件的；
[root@CT71 app]#gzip -d test_gzip.gz [root@CT71 app]#gunzip test_gzip.gz [root@CT71 app]#zcat test_gzip.gz > test_gzip
bzip2压缩解压工具
文件后缀名：.bz2
参数：
-d 解压缩
bunzip
bzcat X.bz2 > X
-k 保留原文件
-c 将结果打印到屏幕上，配合重定向，不会覆盖原文件，但权限会变。
-f 默认不对硬链接数为2及以上的文件压缩，加上f，强制压缩指定文件，而其他同inode的文件硬链接数减1.
-v 显示详细过程。
-# 数字越大，压缩比越高，速度越慢，文件越小。
-1 等于 --fast
-2，3，4，5，6，7，8
-9 等于 --best (default)
这个压缩工具相比前两个压缩率不仅有了提高，更重要的是可以保存源文件，并且不改变权限
[root@CT71 app]#ll -h total 91M -rw-------. 1 root root 7.6M Aug 10 16:43 messages -rw-r--r--. 1 root root 83M Aug 10 17:07 test_gzip [root@CT71 app]#bzip2 -k test_gzip [root@CT71 app]#ll -h total 91M -rw-------. 1 root root 7.6M Aug 10 16:43 messages -rw-r--r--. 1 root root 83M Aug 10 17:07 test_gzip -rw-r--r--. 1 root root 472K Aug 10 17:07 test_gzip.bz2
同样的我们说一下它的三种解压方式
[root@CT71 app]#bzip2 -d test_gzip.bz2 [root@CT71 app]#bunzip2 test_gzip.bz2 [root@CT71 app]#bzcat test_gzip.bz2 > test
xz压缩解压工具
文件后缀名：.xz
参数：
-d 解压缩
xzcat
-k 保留原文件
-f 默认不对硬链接数为2及以上的文件压缩，加上f，强制压缩指定文件，而其他同inode的文件硬链接数减1.
-v 显示详细过程。
-# 数字越大，压缩比越高，速度越慢，文件越小。
-0 等于 --fast
-1 -2，3，4，5，6(default)，7，8
-9 等于 --best
相对于上面的压缩工具，这个压缩工具是压缩率最高的，高的吓人，用起来也是相当不错的。
[root@CT71 app]#ll -h total 91M -rw-------. 1 root root 7.6M Aug 10 16:43 messages -rw-r--r--. 1 root root 83M Aug 10 17:07 test_xz [root@CT71 app]#xz -kv test_xz test_xz (1/1) 100 % 41.0 KiB / 82.7 MiB = 0.000 23 MiB/s 0:03 [root@CT71 app]#ll -h total 91M -rw-------. 1 root root 7.6M Aug 10 16:43 messages -rw-r--r--. 1 root root 83M Aug 10 17:07 test_xz -rw-r--r--. 1 root root 41K Aug 10 17:07 test_xz.xz
解压方式也是大同小异：
[root@CT71 app]#xz -d test_xz.xz
[root@CT71 app]#xzcat test_xz.xz > test.xz
zip压缩打包工具
文件后缀名：.zip
打包压缩
zip –r /testdir/sysconfig /etc/sysconfig/
unzip
|zip 将生成的文件名 -
可以将管道前的输出结果转为文件并压缩。通过此方式压缩的文件只能使用“unzip -p 压缩包 > 新文件 ”来解压缩
unzip -p 预览解压缩后的内容到屏幕，可以配置重定向将结果保存到指定文件，权限会发生变化。
zip工具具有打包压缩功能，但是一般要配合其他命令加管道才能使用：
[root@CT71 app]#zip -r mima /etc/group /etc/passwd adding: etc/group (deflated 48%) adding: etc/passwd (deflated 62%) [root@CT71 app]#ll total 4 -rw-r--r--. 1 root root 1955 Aug 10 17:58 mima.zip
------------------------------------------------------------------------------
[root@CT71 app]#unzip -d lianxi mima.zip
Archive: mima.zip
inflating: lianxi/etc/group
inflating: lianxi/etc/passwd
[root@CT71 app]#ll
total 4
drwxr-xr-x. 2 root root 33 Aug 10 17:58 etc
drwxr-xr-x. 3 root root 17 Aug 10 19:17 lianxi
-rw-r--r--. 1 root root 1955 Aug 10 17:58 mima.zip
[root@CT71 app]#cd lianxi/
[root@CT71 lianxi]#ll
total 0
drwxr-xr-x. 2 root root 33 Aug 10 19:17 etc
[root@CT71 lianxi]#cd etc/
[root@CT71 etc]#ll
total 8
-rw-r--r--. 1 root root 1184 Aug 7 18:48 group
-rw-r--r--. 1 root root 2711 Aug 7 18:48 passwd
[root@CT71 app]#find /etc/ -type f | zip etc.zip - -----------压缩 adding: - (deflated 87%) [root@CT71 app]#ll total 16 -rw-r--r--. 1 root root 13184 Aug 10 17:28 etc.zip [root@CT71 app]#unzip -p etc.zip > etc.zz -------------------------解压 [root@CT71 app]#ll total 116 -rw-r--r--. 1 root root 13184 Aug 10 17:28 etc.zip -rw-r--r--. 1 root root 100756 Aug 10 17:29 etc.zz
tar打包工具
tar是一个文件归档工具，他可以将很多的文件打包成一个文件，以方便我们对文件的保存，传输，再者就是，我们的压缩工具只能对单个文件进行压缩，要是对大量单个文件进行压缩的话，必须将文件进行打包，然后在进行压缩，因此就体现出打包工具的作用。现在我们简单了解一下如何进行打包，如何解包，如何打包压缩等。
一些参数：
-c或--create：建立新的备份文件；
-C <目录>：这个选项用在解压缩，若要在特定目录解压缩，可以使用这个选项。
-d：记录文件的差别；
-x或--extract或--get：从备份文件中还原文件；
-t或--list：列出备份文件的内容；
-z或--gzip或--ungzip：通过gzip指令处理备份文件；
-Z或--compress或--uncompress：通过compress指令处理备份文件； -f<备份文件>或--file=<备份文件>：指定备份文件；
-r：添加文件到已经压缩的文件；
-u：添加改变了和现有的文件到已经存在的压缩文件；
-j：支持bzip2解压文件；
-v：显示操作过程；
-T 指定个列表，包含需要被打包的文件，以换行符为间隔
-X 指定个排除列表，以换行符为间隔
格式：tar [option] 新建文件名 要处理的文件
示例：
tar –cvf etc.tar /etc/ ----将/etc/内的文件打包 tar –xvf etc.tar -----将etc.tar解包 tar –jcvf etc.tar.bz2 /etc/----将/etc/内的文件打包压缩 tar –jxvf etc.tar.bz2将etc.tar ----- 解压解包
查看打包后的文件：
[root@CT71 app]#tar -cvf passinfo.tar /etc/passwd /etc/shadow /etc/group /etc/gshadow tar: Removing leading `/' from member names /etc/passwd /etc/shadow /etc/group /etc/gshadow [root@CT71 app]#tar -tvf passinfo.tar -rw-r--r-- root/root 2711 2017-08-07 18:48 etc/passwd ---------- root/root 2053 2017-08-07 18:48 etc/shadow -rw-r--r-- root/root 1184 2017-08-07 18:48 etc/group ---------- root/root 1044 2017-08-07 18:48 etc/gshadow [root@CT71 app]#tar -tf passinfo.tar etc/passwd etc/shadow etc/group etc/gshadow
向包内添加文件：
[root@CT71 app]#tar -tvf passinfo.tar -rw-r--r-- root/root 2711 2017-08-07 18:48 etc/passwd ---------- root/root 2053 2017-08-07 18:48 etc/shadow -rw-r--r-- root/root 1184 2017-08-07 18:48 etc/group ---------- root/root 1044 2017-08-07 18:48 etc/gshadow [root@CT71 app]#tar -rf passinfo.tar /etc/vimrc tar: Removing leading `/' from member names [root@CT71 app]#tar -tvf passinfo.tar -rw-r--r-- root/root 2711 2017-08-07 18:48 etc/passwd ---------- root/root 2053 2017-08-07 18:48 etc/shadow -rw-r--r-- root/root 1184 2017-08-07 18:48 etc/group ---------- root/root 1044 2017-08-07 18:48 etc/gshadow -rw-r--r-- root/root 2015 2017-08-01 16:02 etc/vimrc
split文件分割
当我们将很多文件打包后很大，我们可以采取将打包后的文件进行切割，分成很多小文件，将其传输后可以再把他们给复原成一个大文件
split –b Size –d tar-file-name prefix-name 将tar包分隔为多个文件
使用split 加上-d和不加上-d切割后的后缀是不一样的，加上-d后后缀是01,02,03……不加后缀，则是以aa，ab，ac结尾的
cat 被分隔出的多个文件名 > 单个文件名
示例：
[root@CT71 app]#ll total 31532 -rw-r--r--. 1 root root 32286720 Aug 10 11:43 etc.tar [root@CT71 app]#split -b 5M -d etc.tar etc.tar [root@CT71 app]#ll total 63064 -rw-r--r--. 1 root root 32286720 Aug 10 11:43 etc.tar -rw-r--r--. 1 root root 5242880 Aug 10 11:43 etc.tar00 -rw-r--r--. 1 root root 5242880 Aug 10 11:43 etc.tar01 -rw-r--r--. 1 root root 5242880 Aug 10 11:43 etc.tar02 -rw-r--r--. 1 root root 5242880 Aug 10 11:43 etc.tar03 -rw-r--r--. 1 root root 5242880 Aug 10 11:43 etc.tar04 -rw-r--r--. 1 root root 5242880 Aug 10 11:43 etc.tar05 -rw-r--r--. 1 root root 829440 Aug 10 11:43 etc.tar06
合并文件：
[root@CT71 app]#cat etc.tar0* > etc.tar.1 [root@CT71 app]#ll total 94596 -rw-r--r--. 1 root root 32286720 Aug 10 17:43 etc.tar -rw-r--r--. 1 root root 5242880 Aug 10 17:43 etc.tar00 -rw-r--r--. 1 root root 5242880 Aug 10 17:43 etc.tar01 -rw-r--r--. 1 root root 5242880 Aug 10 17:43 etc.tar02 -rw-r--r--. 1 root root 5242880 Aug 10 17:43 etc.tar03 -rw-r--r--. 1 root root 5242880 Aug 10 17:43 etc.tar04 -rw-r--r--. 1 root root 5242880 Aug 10 17:43 etc.tar05 -rw-r--r--. 1 root root 829440 Aug 10 17:43 etc.tar06 -rw-r--r--. 1 root root 32286720 Aug 10 17:44 etc.tar.1 [root@CT71 app]#tar -xf etc.tar.1 [root@CT71 app]#ll total 94608 drwxr-xr-x. 133 root root 8192 Aug 10 07:51 etc -rw-r--r--. 1 root root 32286720 Aug 10 17:43 etc.tar -rw-r--r--. 1 root root 5242880 Aug 10 17:43 etc.tar00 -rw-r--r--. 1 root root 5242880 Aug 10 17:43 etc.tar01 -rw-r--r--. 1 root root 5242880 Aug 10 17:43 etc.tar02 -rw-r--r--. 1 root root 5242880 Aug 10 17:43 etc.tar03 -rw-r--r--. 1 root root 5242880 Aug 10 17:43 etc.tar04 -rw-r--r--. 1 root root 5242880 Aug 10 17:43 etc.tar05 -rw-r--r--. 1 root root 829440 Aug 10 17:43 etc.tar06 -rw-r--r--. 1 root root 32286720 Aug 10 17:44 etc.tar.1 [root@CT71 app]#ll etc/ | less total 1352 drwxr-xr-x. 3 root root 101 Jul 11 18:45 abrt -rw-r--r--. 1 root root 16 Jul 11 18:52 adjtime -rw-r--r--. 1 root root 1518 Jun 7 2013 aliases -rw-r--r--. 1 root root 12288 Jul 11 18:54 aliases.db drwxr-xr-x. 2 root root 51 Jul 11 18:46 alsa drwxr-xr-x. 2 root root 4096 Jul 11 18:52 alternatives -rw-------. 1 root root 541 Mar 31 2016 anacrontab -rw-r--r--. 1 root root 55 Nov 5 2016 asound.conf -rw-r--r--. 1 root root 1 Nov 6 2016 at.deny drwxr-xr-x. 2 root root 32 Jul 11 18:45 at-spi2 drwxr-x---. 3 root root 43 Jul 11 18:46 audisp drwxr-x---. 3 root root 83 Jul 11 18:53 audit
... ...
cpio打包压缩
cpio 有三种操作模式:
在copy-out模式中, cpio 把文件复制到归档包中。它从标准输入获得文件名列表 (一行一个)。默认 把归档包写到标准输出，因此 一般 重定向到 一个文件中。生成文件名列表的典型方法是使用find 命令; 你可能要在 find 后面用上 -depth选项, 减少因为进入没有访问权限的目录而引起的麻烦。
在copy-in模式中, cpio 从归档包里读取文件, 或者列出归档包里的内容。它从标准输入读入归档包。缺省情况下，cpio从标准输入读取输入数据，向标准输出写入输出数据。
在copy-pass模式中, cpio把文件从一棵目录树复制到另一棵, 它结合了 copy-in 和 copy-out 的操作, 但不使用归档包。 cpio从标准输入读取欲复制的文件名列表; 目标目录作为非选项的命令行参数给出。
cpio支持下列的归档格式: binary, old ASCII, new ASCII, crc, HPUX binary, HPUX old ASCII, old tar, 和 POSIX.1 tar。
我们针对cpio常用的参数进行讲解：
参数：
-o 将文件拷贝打包成文件或者将文件输出到设备上
-i 解包，将打包文件解压或将设备上的备份还原到系统
-t 预览，查看文件内容或者输出到设备上的文件内容
-v 显示打包过程中的文件名称。
-d 解包生成目录，在cpio还原时，自动的建立目录
-c 一种较新的存储方式
示例：
将/etc/下的普通文件打包成cpio文件存放在/app下
[root@CT71 app]#cd /etc/ [root@CT71 etc]#find -type f | cpio -o > /app/etc_f.cpio 58526 blocks [root@CT71 etc]#cd /app/ [root@CT71 app]#ll total 29264 -rw-r--r--. 1 root root 29965312 Aug 10 11:22 etc_f.cpio 浏览刚刚打包的文件内容 [root@CT71 app]#cpio -vt < etc_f.cpio | less -rw-r--r-- 1 root root 595 Jul 11 18:42 fstab -rw------- 1 root root 0 Jul 11 18:42 crypttab -rw-r--r-- 1 root root 70 Aug 10 07:51 resolv.conf -rw-r--r-- 1 root root 1160 Nov 5 2016 fonts/conf.d/25-no-bitmap-fedora.conf -rw-r--r-- 1 root root 978 Aug 31 2013 fonts/conf.d/README -rw-r--r-- 1 root root 5582 Nov 6 2016 fonts/fonts.conf -rw-r--r-- 1 root root 1690 Nov 30 2016 pki/rpm-gpg/RPM-GPG-KEY-CentOS-7 -rw-r--r-- 1 root root 1004 Nov 30 2016 pki/rpm-gpg/RPM-GPG-KEY-CentOS-Debug-7 -rw-r--r-- 1 root root 1690 Nov 30 2016 pki/rpm-gpg/RPM-GPG-KEY-CentOS-Testing-7 -rw-r--r-- 1 root root 166 Nov 5 2016 pki/ca-trust/README
新建一个目录，并将文件恢复到该目录下
[root@CT71 app]#mkdir etc [root@CT71 app]#ll total 29264 drwxr-xr-x. 2 root root 6 Aug 10 11:27 etc -rw-r--r--. 1 root root 29965312 Aug 10 11:22 etc_f.cpio [root@CT71 app]#cd etc/ [root@CT71 etc]#pwd /app/etc [root@CT71 etc]#cpio -id < ../etc_f.cpio 58526 blocks [root@CT71 etc]#ll total 1340 drwxr-xr-x. 3 root root 101 Aug 10 11:29 abrt -rw-r--r--. 1 root root 16 Aug 10 11:29 adjtime -rw-r--r--. 1 root root 1518 Aug 10 11:29 aliases -rw-r--r--. 1 root root 12288 Aug 10 11:29 aliases.db drwxr-xr-x. 2 root root 51 Aug 10 11:29 alsa -rw-------. 1 root root 541 Aug 10 11:29 anacrontab -rw-r--r--. 1 root root 55 Aug 10 11:29 asound.conf -rw-r--r--. 1 root root 1 Aug 10 11:29 at.deny drwxr-xr-x. 2 root root 32 Aug 10 11:29 at-spi2 drwxr-xr-x. 3 root root 43 Aug 10 11:29 audisp
有时候cpio打包的文件过大，我们可以再使用压缩命令对文件进行压缩：
[root@CT71 app]#bzip2 -k -9 etc_f.cpio [root@CT71 app]#ll -h total 38M drwxr-xr-x. 99 root root 8.0K Aug 10 11:29 etc -rw-r--r--. 1 root root 29M Aug 10 11:22 etc_f.cpio -rw-r--r--. 1 root root 8.8M Aug 10 11:22 etc_f.cpio.bz2
/boot/initramfs-xxxx.img
Centos6: cpio.gz文件。zcat initramfs-xxxx.img |cpio -id
Centos7: cpio文件 cpio -id < initramfs-xxxx.img