【Linux】压缩命令——gzip,bzip2,xz

1.压缩文件的用途与技术

  1. 你是否有过文件太大,导致无法以正常的E-mail方式发送?
  2. 又或学校、厂商要求使用CD或DVD来做数据归档之用,但是你的单一文件却都比这些传统的一次性存储媒介还要大,那怎么分成多块来刻录?
  3. 还有,你是否有过要备份某些重要数据,偏偏这些数据量太大,使用了你很多的磁盘空间?

这个时候,这个好用的文件压缩技术可就派的上用场了。

        这些比较大型的文件通过所谓的文件压缩技术之后,可以将它的磁盘使用量降低,从而达到降低文件容量的效果。此外,有的压缩程序还可以进行容量限制,使一个大型文件可以划分成为数个小型文件,以方便携带。

那么什么是文件压缩呢?

        我们来稍微谈一谈它的原理,目前我们使用的计算机系统中都是使用所谓的字节单位来计量。不过,事实上,计算机最小的计量单位应该是bit才对,此外,我们也知道1Byte=8bit,但是如果今天我们只是记忆一个数字,即1这个数字?它会如何记录?

        假设一个字节可以看成八个空格,由于1B=8bit,所以每个字节当中会有8个空格,而每个空格可以是0、1,由于我们记录数字是1,考虑计算机所谓的二进制,如此一来,1会在最右边占据1个位,而其他的7个位将会自动地被填上0。

        你看看,其实在这样的例子中,那7个位应该是空的才对。不过,为了要满足目前我们的操作系统数据的读写,所以就会将该数据转为字节的形式来记录。

而一些聪明的计算机工程师就利用一些复杂的计算方式,将这些没有使用到的空间【丢】出来,以让文件占用的空间变小,这就是压缩的技术。

        另外一种压缩技术也很有趣,它是将重复的数据进行统计记录。举例来说,如果你的数据为【111……】共有100个1时,那么压缩技术会记录为【100个1】而不是真的有100个1的位存在。这样也能够精简文件记录的容量,非常有趣吧!

        简单地说,你可以将它想成,其实文件里面有相当多的空间存在,并不是完全填满的,而压缩的技术就是将这些空间填满,以让整个文件占用的容量下降。

        不过,这些压缩过的文件并无法直接被我们的操作系统所使用,因此,若要使用这些被压缩过的文件数据,则必须将它还原回来未压缩前的模样,那就是所谓的解压缩。

        而至于压缩后与压缩的文件所占用的磁盘空间大小,就可以被称为是压缩比,

这个压缩与解压缩的操作有什么好处呢?

最大的好处就是压缩过的文件容量变小了,所以你的硬盘容量无形之中就可以容纳更多的数据。

        此外,在一些网络数据的传输中,也会由于数据量的降低,好让网络带宽可以用来做更多的工作,而不是老卡在一些大型的文件传输上面,目前很多的WWW网站也是利用文件压缩的技术来进行数据的传送,好让网站带宽的利用率上升。

        上述的WWW网站压缩技术蛮有趣的,它让你网站上面看得到的数据在经过网络传输时,使用的是压缩过的数据,等到这些压缩过的数据到达你的计算机主机时,再进行解压缩,由于目前的计算机命令周期相当快速,因此其实在网页浏览的时候,时间都是花在数据的传输上面,而不是CPU的运算,如此一来,由于压缩过的数据量降低了,自然传输的速度就会变快不少。

若你是一位软件工程师,那么相信你也会喜欢将你自己的软件压缩之后提供大家下载来使用,毕竟没有人喜欢自己的网站天天都是带宽满载的吧?

举个例子来说,Linux 3.10.81(CentOS7用的扩展版本)完整的内核大小约有570MB左右,而由于内核主要多是 ASCII的纯文本文件,这种文件的多余空间最多,而一个提供下载的压缩的3.10.81内核大约仅有76MB左右,差了多少?你可以自己算一算。

2. Linux 系统常见的压缩命令

        在Linux的环境中,压缩文件的扩展名大多是:“.tar、*tar.gz、*tgz、“.gz、“Z、“.b22、“xz。

为什么会有这样的扩展名?不是说Linux的扩展名没有什么作用吗?

这是因为Linux支持的压缩命令非常多,且不同的命令所用的压缩技术并不相同,当然彼此之间可能就无法互通压缩/解压缩文件。

所以,当你下载到某个压缩文件时,自然就需要知道该文件是由哪种压缩命令所制作出来的,好用来对照着解压缩,也就是说,虽然 Linux文件的属性基本上是与文件名没有绝对关系的,但是为了帮助我们人类小小的脑袋,所以适当的扩展名还是必要的

下面我们就列出几个常见的压缩文件扩展名:

  1. .Z:compress 程序压缩的文件
  2. .zip:zip程序压缩的文件
  3. .gz:gzip程序压缩的文件
  4. .bz2:bzip2程序压缩的文件
  5. .xz:xz程序压缩的文件
  6. .tar:tar 程序打包的文件,并没有压缩过;
  7. .tar.gz:tar程序打包的文件,并且经过gzip的压缩
  8. .tar.bz2:tar 程序打包的文件,并且经过bzip2的压缩
  9. .tar.xz:tar程序打包的文件,并且经过xz的压缩;

Linux上常见的压缩命令就是gzip、bzip2以及最新的xz,至于compress已经不流行了。

为了支持Windows常见的zip,其实Linux也早就有zip命令了。

gzip是由GNU计划所开发出来的压缩命令,该命令已经替换了compress。

后来GNU又开发出bzip2及xz这几个压缩比更好的压缩命令。

不过,这些命令通常仅能针对一个文件来压缩与解压缩,如此一来,每次压缩与解压缩都要一大堆文件,岂不烦人?此时,这个所谓的【打包软件,tar】就显得很重要。

        这个tar可以将很多文件打包成为一个文件,甚至是目录也可以这么玩。不过,单纯的tar功能仅是打包而已,即将很多文件结合为一个文件,事实上,它并没有提供压缩的功能,后来,GNU计划中,将整个tar与压缩的功能结合在一起,如此一来提供用户更方便并且更强大的压缩与打包功能,下面我们就来谈一谈这些在Linux下面基本的压缩命令。

2.1 gzip, zcat/zmore/zless/zgrep

gzip可以说是应用最广的压缩命令了,目前gzip可以解开compress、zip与gzip等软件所压缩的文件,至于gzip所建立的压缩文件为.gz

让我们来看看这个命令的语法;

[dmtsai@study~JS gzip [-cdtv#]文件名
[dmtsai@study-]S zcat 文件名.gz

选项与参数:

  • -c:将压缩的数据输出到屏幕上,可通过数据流重定向来处理;
  • -d:解压缩的参数;
  • -t:可以用来检验一个压缩文件的一致性,看看文件有无错误;
  • -v:可以显示出原文件/压缩文件的压缩比等信息;
  • -#:#为数字的意思,代表压缩等级,-1最快,但是压缩比最差,-9最慢,但是压缩比最好,默认是-6;

范例一:找出/etc 下面(不含子目录)容量最大的文件,并将它复制到/tmp,然后以gzip压缩。


 

当你使用gzip进行压缩时,在默认的状态下原本的文件会被压缩成为.gz后缀的文件,源文件就不再存在了,这点与一般习惯使用Windows做压缩的朋友所熟悉的情况不同,要注意。

此外,使用gzip压缩的文件在Windows系统中,竟然可以被WinRAR或7zip这些软件解压缩,很好用,其他的用法如下:

范例二:由于services是文本文件,请将范例一的压缩文件的内容读出来。

由于services 这个原本的文件是是文本文件,因此我们可以尝试使用zcat/zmore/zless去读取。
此时屏幕上会显示servcies.gz解压缩之后的原始文件内容。

范例三:将范例一的文件解压缩。

不要使用gunzip这个命令,不好背,使用gzip-d来进行解压缩.
与gzip相反,gzip-d会将原本的.gz删除,恢复到原本的services文件。

范例四:将范例三解开的services用最佳的压缩比压缩,并保留原本的文件。

范例五:由范例四再次建立的services.gz中,找出http这个关键词在哪几行?

        其实gzip的压缩已经优化过了,所以虽然gzip提供1~9的压缩等级,不过使用默认的6就非常好用了。因此上述的范例四可以不要加入那个-9的选项。

        范例四的重点在那个-c与>的使用,-c可以将原本要转成压缩文件的数据内容,将它变成文字类型从屏幕输出,然后我们可以通过大于(>)这个符号,将原本应该由屏幕输出的数据,转成输出到文件而不是屏幕,所以就能够建立出压缩文件了。只是文件名也要自己写,当然最好还是遵循gzip的压缩文件名要求较佳。

        cat/more/less可以使用不同的方式来读取纯文本文件,那个 zcat/zmore/zless则可以对应于cat/more/less 的方式来读取纯文本文件被压缩后的压缩文件,

        由于gzip这个压缩命令主要想要用来替换compress,所以不但compress的压缩文件可以使用gzip来解开,同时zcat这个命令可以同时读取compress与gzip的压缩文件。

        另外,如果你还想要从文字压缩文件当中找数据的话,可以通过egrep来查找关键词,而不需要将压缩文件解开才以grep进行,这对查询备份中的文本文件数据相当有用。

        时至今日,应该也没有人使用compress这个老的命令。而如果你还有备份数据使用的是compress创建出来的,Z文件,那也无须担心,使用znew 可以将该文件转成 gzip的格式.

2.2 bzip2,bzcat/bzmore/bzless/bzgrep

若说gzip 是为了替换compress并提供更好的压缩比而成立的,那么bzip2则是为了替换gzip并提供更佳的压缩比而来。

bzip2真是很不错的东西,这玩意的压缩比竟然比gzip 还要好,至于bzip2的用法几乎与gzip 相同,看看下面的用法吧!

[dmtsai@study ~]$ bzip2 [-cdkzv#]文件名
[dmtsai@study ~]$ bzcat 文件名.bz2

选项与参数:

  • -c:将压缩的过程产生的数据输出到屏幕上;-d:解压缩的参数;
  • -d:保留原始文件,而不会删除原始的文件;
  • -k:压缩的参数(默认值,可以不加);
  • -v:可以显示出源文件/压缩文件的压缩比等信息:
  • -#:与gzip 同样的,都是计算压缩比的参数,-9最佳,-1 最快:

例一、将刚刚gzip 范例留下来的/tmp/services以bzip2压缩。


此时services 会变成 services.bz2之外,你也可以发现bzip2的压缩比要软gzip好。
压缩率由gzip的79%提升到bzip2的81%。

同样,它会把源文件删除!!!!

范例二:将范例一的文件内容读出来。

范例三:将范例一的文件解压缩。

范例四:将范例三解开的services用最佳的压缩比压缩,并保留原本的文件。

看上面的范例,你会发现到bzip2连选项与参数都跟gzip一模一样,只是扩展名由.gz变成.bz2而已。其他的用法都大同小异,所以就不一一介绍了

你也可以发现到bzip2的压缩率确实比gzip要好些,不过,对于大容量文件来说,bzip2压缩时间会花比较久,至少比gzip要久的多,这没办法,要有更多可用容量,就要花费相对应的时间。

2.3 xz, xzcat/xzmore/xzless/xzgrep

虽然bzip2已经具有很棒的压缩比,不过显然某些自由软件开发者还不满足,因此后来还推出了xz这个压缩比更高的软件。

 这个软件的用法也跟gzip/bzip2几乎一模一样,那我们就来看一看。

xz [-dtlkc#] 文件名
xcat 文件名.xz

选项与参数:

  • -d:就是解压缩;
  • -t:测试压缩文件的完整性,看有没有错误;
  • -l:列出压缩文件的相关信息;
  • -k:保留原本的文件不删除;
  • -c:同样的,就是将数据在屏幕上输出的意思;
  • -#:同样的,也有较佳的压缩比的意思;

范例一:将刚刚由bzip2所遗留下来的/tmp/services通过x2来压缩。

#各位观众,看到没有,容量又进一步下降的更多,好棒的压缩比。

范例二:列出这个压缩文件的信息,然后读出这个压缩文件的内容。

竟然可以列出这个文件的压缩前后的容量,真是太人性化了,这样观察就方便多了

同样的我们可以使用xzcat来预览压缩包里的东西

范例三:将它解压缩吧!

范例四:保留原文件的文件名,并且建立压缩文件。

xz 这个压缩比真的好太多太多了,鸟哥选择的这个services文件为范例,它可以将gzip压缩比(压缩后/压缩前)的21%更进一步优化到15%,差非常非常多。

不过,xz最大的问题是时间花太久了。

如果你曾经使用过xz的话,应该会发现,它的运算时间真的比gzip久很多。

通过【time [gziplbzip2lxz]-cservices>services.[gzlbz2|xz]】去执行运算,结果发现这三个命令的运行时间依序是:0.019s、0.042s、0.261s。

看最后一个数字,差了10倍的时间。

所以,如果你并不觉得时间是你的成本考虑,那么使用xz会比较好。如果时间是你的重要成本那么gzip恐怕是比较适合的压缩软件。
 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/780648.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

[搭建个人网站] 云服务器 or 本地环境搭建

别人没有的,你有,你就牛。 面试,吹牛皮的时候 都可以拉出来溜溜 本文介绍2种搭建网站模式方式:区别嘛(花钱跟不花钱) 花钱: 1. 先购买个域名。。(这里就不多介绍了,随便…

昇思学习打卡-9-ResNet50图像分类

文章目录 网络介绍数据可视化部分网络实现Building Block结构BottleNet模块 模型训练推理结果可视化学习总结优点不足 网络介绍 在ResNet网络提出之前,传统的卷积神经网络都是将一系列的卷积层和池化层堆叠得到的,但当网络堆叠到一定深度时,…

STM32崩溃问题排查

文章目录 前言1. 问题说明2. STM32(Cortex M4内核)的寄存器3. 崩溃问题分析3.1 崩溃信息的来源是哪里?3.2 崩溃信息中的每个关键字代表的含义3.3 利用崩溃信息去查找造成崩溃的点3.4 keil5中怎么根据地址找到问题点3.5 keil5上编译时怎么输出…

C++模板元编程(二)——完美转发

完美转发指的是函数模板可以将自己的参数“完美”地转发给内部调用的其它函数。所谓完美,即不仅能准确地转发参数的值,还能保证被转发参数的左、右值属性不变。 文章目录 场景旧的方法新的方法内部实现参考文献 场景 思考下面的代码: templ…

深度学习之网络构建

目标 选择合适的神经网络 卷积神经网络(CNN):我们处理图片、视频一般选择CNN 循环神经网络(RNN):我们处理时序数据一般选择RNN 超参数的设置 为什么训练的模型的错误率居高不下 如何调测出最优的超参数 …

【pytorch20】多分类问题

网络结构以及示例 该网络的输出不是一层或两层的,而是一个十层的代表有十分类 新建三个线性层,每个线性层都有w和b的tensor 首先输入维度是784,第一个维度是ch_out,第二个维度才是ch_in(由于后面要转置),没有经过softmax函数和…

C++ 引用——引用的本质

本质:引用的本质在c内部实现是一个指针常量 C推荐用引用技术,因为语法方便,引用本质是指针常量,但是所有的指针操作编译器都帮我们做了 示例: 运行结果:

C++初学者指南-4.诊断---valgrind

C初学者指南-4.诊断—Valgrind Valgrind(内存错误检测工具) 检测常见运行时错误 读/写释放的内存或不正确的堆栈区域使用未初始化的值不正确的内存释放,如双重释放滥用内存分配函数内存泄漏–非故意的内存消耗通常与程序逻辑缺陷有关&#xf…

水箱高低水位浮球液位开关工作原理

工作原理 水箱高低水位浮球液位开关是一种利用浮球随液位升降来实现液位控制的设备。其基本原理是浮球在液体的浮力作用下上下浮动,通过磁性作用驱动与之相连的磁簧开关的开合,从而实现液位的高低控制和报警。当液位升高时,浮球上浮&#xf…

cmake find_package 使用笔记

目录 1 find_package2 config mode2.1 搜索的文件名2.2 搜索路径 3 module mode3.1 搜索的文件名3.2 搜索路径 参考 1 find_package 这是官方文档 下面是学习总结: 首先是find_package的作用是什么?引入预编译的库。 find_package有两种模式&#xff1a…

C语言 指针和数组——指针和二维数组之间的关系

目录 换个角度看二维数组 指向二维数组的行指针 按行指针访问二维数组元素 再换一个角度看二维数组 按列指针访问二维数组元素 二维数组作函数参数 指向二维数组的行指针作函数参数 指向二维数组的列指针作函数参数​编辑 用const保护你传给函数的数据 小结 换个角度看…

使用antd的<Form/>组件获取富文本编辑器输入的数据

前端开发中,嵌入富文本编辑器时,可以通过富文本编辑器自身的事件处理函数将数据传输给后端。有时候,场景稍微复杂点,比如一个输入页面除了要保存富文本编辑器的内容到后端,可能还有一些其他输入组件获取到的数据也一并…

Win10安装MongoDB(详细版)

文章目录 1、安装MongoDB Server1.1. 下载1.2. 安装 2、手动安装MongoDB Compass(GUI可视工具)2.1. 下载2.2.安装 3、测试连接3.1.MongoDB Compass 连接3.2.使用Navicat连接 1、安装MongoDB Server 1.1. 下载 官网下载地址 https://www.mongodb.com/try/download/community …

『大模型笔记』《Pytorch实用教程》(第二版)

『大模型笔记』《Pytorch实用教程》(第二版) 文章目录 一. 《Pytorch实用教程》(第二版)1.1 上篇1.2 中篇1.3 下篇1.4 本书亮点1.5 本书内容及结构二. 参考文献🖥️ 配套代码(开源免费):https://github.com/TingsongYu/PyTorch-Tutorial-2nd📚 在线阅读(开源免费)…

nginx相关概念(反向代理、负载均衡)

1 Nginx 是什么 Nginx是一款轻量级的Web 服务器,其特点是占有内存少,并发能力强 2 Nginx 反向代理 正向代理代替客户端去发送请求反向代理代替服务端接受请求 2.1 正向代理 若客户端无法直接访问到目标服务器 server 则客户端需要配置代理服务器 pr…

正则表达式 先行断言 \S {} 示例

目录 数据准备一. 先行断言1.1 正向先行断言1.2 负向先行断言 二. 配合 {} 和 \S 使用2.1 匹配一个任意非空白字符2.2 匹配任意多个非空白字符2.3 匹配3个非空白字符2.4 匹配至少3个非空白字符2.5 匹配0~3个非空白字符 数据准备 ⏹文件1 0561-10 AAA 123 dfg 345 sss 0561-2…

【电路笔记】-AB类放大器

AB类放大器 文章目录 AB类放大器1、概述2、AB类放大器介绍3、AB类放大器效率4、偏置方法4.1 电压偏置4.2 分压网络4.3 电位器偏置4.4 二极管偏置5、二极管网络和电流源6、AB类放大器的电源分配7、总结1、概述 A类放大器提供非常好的输出线性度,这意味着可以忠实地再现信号,但…

数据结构之“队列”(全方位认识)

🌹个人主页🌹:喜欢草莓熊的bear 🌹专栏🌹:数据结构 前言 上期博客介绍了” 栈 “这个数据结构,他具有先进后出的特点。本期介绍“ 队列 ”这个数据结构,他具有先进先出的特点。 目录…

【无标题】ubuntu的安装和登录

1.安装ubuntu系统并允许root用户登录 一、安装ubuntu分为以下几个步骤: a、在官方网站下载镜像:https://ubuntu.com/ b、选择安装模式为:Try or install Ubuntu (体验或安装) c、选择体验系统或安装系统&#xff1a…

ComfyUI预处理器ControlNet简单介绍与使用(附件工作流)

简介 ControlNet 是一个很强的插件,提供了很多种图片的控制方式,有的可以控制画面的结构,有的可以控制人物的姿势,还有的可以控制图片的画风,这对于提高AI绘画的质量特别有用。接下来就演示几种热门常用的控制方式 1…