Linux下分割和压缩文件的实用技巧 (linux 分割压缩)

在日常工作和学习中,我们常常需要处理大文件,如压缩包、日志文件、数据库备份等。对于这些大文件,除了压缩,我们还需要将它们分割成多个小文件,以便于传输、备份和管理。Linux系统提供了多种分割和压缩文件的工具,本文将介绍分割和压缩文件的实用技巧。

一、分割文件

1. split命令

split命令是Linux下的分割文件工具,它可以将一个大文件分割成多个小文件。使用split命令的基本语法为:

“`

split [选项] [源文件] [目标文件名]

“`

例如,将一个200MB的文件分割成大小为50MB的四个小文件,可以使用以下命令:

“`

split -b 50M largefile.tar.gz allfile.tar.gz

“`

其中,选项-b表示按照文件大小进行分割,50M表示每个小文件的大小为50MB,largefile.tar.gz表示需要分割的源文件,allfile.tar.gz为分割后生成的小文件名。执行该命令后,会在当前目录下生成四个文件:allfile.tar.gzaa、allfile.tar.gzab、allfile.tar.gzac、allfile.tar.gzad。

除此之外,还可以使用其他选项来控制分割方式:

– -a:指定生成的小文件名后缀长度,默认为2;

– -d:使用数字后缀代替字母后缀;

– -l:按照行数进行分割;

– –verbose:显示分割进程。

2. csplit命令

相比于split命令,csplit命令更加灵活。它可以根据文件的内容进行分割,并将符合条件的部分保存到小文件中。使用csplit命令的基本语法为:

“`

csplit [选项] [源文件] [分割规则]

“`

例如,将一个log文件按照行数分割成多个小文件,每个小文件包含1000行数据,可以使用以下命令:

“`

csplit -k -s -f logfile. log “/^—/” {*}

“`

其中,选项-k表示使用数字后缀代替字母后缀,-s表示不显示分割进度,-f表示指定生成的小文件名前缀,logfile.为前缀,.log为后缀,”/^—/”为分割规则,表示以—开头的行为分割点,最后的{*}表示将源文件全部分割。执行该命令后,会在当前目录下生成多个小文件,名称分别为logfile.00.log、logfile.01.log、logfile.02.log等。

二、压缩文件

1. tar命令

tar命令是Linux下的打包和压缩文件工具。它可以将多个文件或目录打包成一个tar包,并可选择不压缩或使用不同压缩算法进行压缩。使用tar命令的基本语法为:

“`

tar [选项] [压缩文件名] [源文件或目录]

“`

例如,在当前目录下创建一个名为myfiles.tar的tar包,将src目录和file1.txt、file2.txt两个文件打包到其中,并使用gzip算法进行压缩,可以使用以下命令:

“`

tar -czvf myfiles.tar.gz src file1.txt file2.txt

“`

其中,选项-c表示创建归档文件,-z表示使用gzip算法进行压缩,-v表示显示压缩进程,-f表示指定压缩文件名。执行该命令后,会在当前目录下生成一个名为myfiles.tar.gz的tar包。

2. gzip和bzip2命令

除了tar命令,Linux系统还提供了gzip和bzip2命令进行文件压缩。gzip使用DEFLATE算法进行压缩,通常比bzip2更快但压缩比不如后者,而bzip2则使用Burrows-Wheeler变换和Move-to-Front算法进行压缩,压缩比较高但速度较慢。

使用gzip进行压缩和解压缩的基本语法为:

“`

gzip [选项] [源文件]

gunzip [选项] [压缩文件]

“`

例如,将file2.txt压缩成file2.txt.gz文件,可以使用以下命令:

“`

gzip file2.txt

“`

其中,gunzip命令与gzip命令用法相似,可将.gz文件解压缩还原成原始文件。

使用bzip2进行压缩和解压缩的基本语法为:

“`

bzip2 [选项] [源文件]

bunzip2 [选项] [压缩文件]

“`

例如,将src目录压缩成src.tar.bz2文件,可以使用以下命令:

“`

tar -cvf – src | bzip2 > src.tar.bz2

“`

其中,tar命令-dash cvf表示将src目录打包成tar文件,并通过管道(|)将tar文件传递给bzip2命令进行压缩,最后通过重定向(>)将压缩后的数据保存到src.tar.bz2文件中。bunzip2命令的用法与gunzip命令类似。

三、结语

本文介绍了。分割文件可以将大文件拆分成多个小文件,便于传输、备份和管理;压缩文件则可以将多个文件或目录打包成一个归档文件,并通过压缩算法来减小文件的大小。掌握这些技巧,可以让我们更加高效地处理大文件,提高工作效率。

相关问题拓展阅读:

linux文件压缩

Linux下的tar压缩解压缩命令详解(来源

)

tar

-c: 建立压缩档案

-x:解压

-t:查看内容

-r:向压缩归档文件末尾追加文件

-u:更新原压缩包中的文件

这五个是独立的命令,压缩解压都要用到其中一个,可以和别的命令连用但只能用其中一个。下面的参数是根嫌纳据需要在压缩或解压档案时可选的。

-z:有gzip属性的

-j:有bz2属性的

-Z:有compress属性的

-v:显示所有过程

-O:将文件解开到标准输出

下面的参数-f是必须的

-f: 使用档案名字,切记,这个参数是最后一个参数,后面只能接档案名。

# tar -cf all.tar *.jpg

这条命令是将所有.jpg的文件打成一个名为all.tar的包。-c是表示产生新的包,-f指定包的文件名。

# tar -rf all.tar *.gif

这条命令是将所有.gif的文件增加到all.tar的包里面去。-r是表示增加文件的意思。

# tar -uf all.tar logo.gif

这条命令是更新原来tar包all.tar中logo.gif文件,-u是表示更新文件的意思。

# tar -tf all.tar

这条命令是列出all.tar包中所有文件,-t是列出文件的意思

# tar -xf all.tar

这条命令是解出all.tar包中所有文件,-t是解开的意思

压缩

tar –cvf jpg.tar *.jpg //将目录里所有jpg文件打包成tar.jpg

tar –czf jpg.tar.gz *.jpg //将目录里所有jpg文件打包成jpg.tar后,并且将其用gzip压缩,生成一个gzip压缩过的包,命名为jpg.tar.gz

tar –cjf jpg.tar.bz2 *.jpg //将目录里所有jpg文件打包成jpg.tar后,并且将其用bzip2压缩,生成一个bzip2压缩过的包,命名为jpg.tar.bz2

tar –cZf jpg.tar.Z *.jpg //将目录里所有jpg文件打包成jpg.tar后,并且将其用compress压缩,生成一个umcompress压缩过的包,命名为jpg.tar.Z

rar a jpg.rar *.jpg //rar格式的压缩,需要先冲派下载rar for linux

zip jpg.zip *.jpg //zip格式的压缩,需要先下载zip for linux

解压

tar –xvf file.tar //解压 tar包

tar -xzvf file.tar.gz //解压tar.gz

tar -xjvf file.tar.bz2 //解压 tar.bz2

tar –xZvf file.tar.Z //解压tar.Z

unrar e file.rar //解芹判没压rar

unzip file.zip //解压zip

总结

1、*.tar 用 tar –xvf 解压

2、*.gz 用 gzip -d或者gunzip 解压

3、*.tar.gz和*.tgz 用 tar –xzf 解压

4、*.bz2 用 bzip2 -d或者用bunzip2 解压

5、*.tar.bz2用tar –xjf 解压

6、*.Z 用 uncompress 解压

7、*.tar.Z 用tar –xZf 解压

8、*.rar 用 unrar e解压

9、*.zip 用 unzip 解压

tar    filename…《==打包与压缩

tar    《==查看档案

tar      《==解压缩

选项与参数:

-c:建立打包档案,可搭配-v来观察过程中被打包的档案名(filename)

-t:查看打包档案的内容含有那些档案

-x:解压缩的功能,可以搭配-C在特定的目录解开;-c、-t、-x不能同时出现在一串指令列中。

-j:透过bzip2的支持进行压缩/解压缩:此时档案名更好为*.tar.bz2

-z:透过gzip的支持进行压缩/解压缩:此时档案名更好为*.tar.gz

-v:在压缩/解压缩的过程中,将正在处理文件名显羡脊示出来

-f filename:-f后面要立刻接被处理的档案名!建议-f单独写一个选项

-C 目录:这个选项用在解压缩,若要在特定目录解压缩,可以使用这个选项

tar命令是Unix/Linux系统中非常常用的备份文件方法,它的使用权限是所有用户。 

tar命令语法:

tar文件名或目录。使用该命令时,主选项是必须要有的,它告诉tar命令要做什么,辅选项是辅助使用的,可以选用。 

主选项:

-c 创建新的档案文件。如果用户想备份一个目录或是一些文件,就要选择这个选项。相当于打包。

-x 从档案文件中释放文件。相当于拆包。

-t 列出档案文件的内容,查看已经备份了哪些文件。

-r 把要存档的文件追加到档案文件的末尾。例如用户已经做好备份文件,又发现还兄桥渗有一个目录或是一些文件忘记备份了,这时可以使用该选项,将忘记的目录或文件追加到备份文件中

特别注意,主选项只能存在一个, c/x/t/r 仅能存在一个!不可同时存在!因为不可能同时压缩与解压缩。

 

辅助选项:

-z :用 gzip 程序来压缩或解压缩文件,加上该选项后可以将档案文件进行压缩,但还原时也一定要使用该选项进行解压缩。 文件格式一般为xx.tar.gz或xx. tgz

-j :使用 bzip2 程序进行文件的压缩或解压,文件格式一般为xx.tar.bz2  

-v :压缩的过程中显示文件!这个常用

-f :使用档名,请留意,在 f 之后要立即接档名!不要再加其他参数!

-p :使用原文件的原来属性(属性不会依据使用者而变)

-w 每一步都要求确认。

–exclude FILE:在压缩的过程中,不要将 FILE 打包!

 

范例:

范例一:将整个 /etc目录下的文件全部打包成/tmp/etc.tar

# tar -cvf /tmp/etc.tar /etc

# tar -zcvf /tmp/etc.tar.gz /etc

# tar -jcvf /tmp/etc.tar.bz2 /etc

# 特别注意,在参数 f 之后的文件档名是自己取的,我们习惯上都用 .tar 来作为辨识。

# 如果加 z 参数,则以 消盯.tar.gz 或 .tgz 来代表 gzip 压缩过的 tar file

# 如果加 j 参数,则以 .tar.bz2 来代表 bzip2 压缩过的 tar file

# 上述指令在执行的时候,会显示一个警告讯息:

# 『tar: Removing leading `/” from member names』那是关於绝对路径的特殊设定。

 

范例二:查看上述/tmp/etc.tar.gz 文件内有那些被压缩的文件

# tar -ztvf /tmp/etc.tar.gz 

# 由于我们使用 gzip 压缩,所以要查阅该 tar file 内的文件时,

# 就得要加上 z 这个参数了!这很重要的!

范例三:将 /tmp/etc.tar.gz 文件解压缩在 /usr/local/src 底下

# cd /usr/local/src

# tar -zxvf /tmp/etc.tar.gz

# 在预设的情况下,我们可以将压缩档在任何地方解开的!以这个范例来说

# 我先将工作目录变换到 /usr/local/src 底下,并且解开 /tmp/etc.tar.gz

# 则解开的目录会在 /usr/local/src/etc ,另外,如果您进入 /usr/local/src/etc

# 则会发现,该目录下的文件属性与 /etc/ 可能会有所不同喔!

范例四:在 /tmp 底下,我只想要将 /tmp/etc.tar.gz 内的 etc/passwd 解开而已

# cd /tmp

# tar -zxvf /tmp/etc.tar.gz etc/passwd

# 我可以透过 tar -ztvf 来查阅 tarfile 内的文件名称,如果单只要一个文件,

# 就可以透过这个方式来下达!注意到! etc.tar.gz 内的根目录 / 是被拿掉了!

范例五:我要备份 /home, /etc ,但不要 /home/dmtsai

# tar –exclude /home/dmtsai -zcvf myfile.tar.gz /home/* /etc

 

另外:tar命令的C参数

$tar -cvf file2.tar /home/usr2/file2

tar:Removing leading ‘/’ from members names

home/usr2/file2

  该命令可以将/home/usr2/file2文件打包到当前目录下的file2.tar中,需要注意的是:使用绝对路径标识的源文件,在用tar命令压缩后,文件名连同绝对路径(这里是home/usr2/,根目录’/’被自动去掉了)一并被压缩进来。使用tar命令解压缩后会出现以下情况:

$tar -xvf file2.tar

$ ls

… …… home …… …… 

解压缩后的文件名不是想象中的file2,而是home/usr2/file2。

$ tar -cvf file2.tar -C /home/usr2 file2

该命令中的-C dir参数,将tar的工作目录从当前目录改为/home/usr2,将file2文件(不带绝对路径)压缩到file2.tar中。注意:-C dir参数的作用在于改变工作目录,其有效期为该命令中下一次-C dir参数之前。

使用tar的-C dir参数,同样可以做到在当前目录/home/usr1下将文件解压缩到其他目录,例如:

$ tar -xvf file2.tar -C /home/usr2

而tar不用-C dir参数时是无法做到的:

$ tar -xvf file2.tar /home/usr2

tar: /tmp/file: Not found in archive

tar: Error exit delayed from previous errors

 

 

tar

cpio

如何在Linux下压缩解压缩文件

unrar x aa.rar

unrar e aa.rar

x参数 是解压到一个文件夹里

e参数是把所有文件解压到当前档好液目录下

注意这个命令比较特殊参数之前不能加-

前提是有unrar程序

没有就根据你的发行版 自行物己安装相应软件

linux默认是不支持解压rar格式的文件。你可以尝试一下方法:

1、使用yum安装unrar尝试解压:yum install rar, 安装好后用unrar解压。

2、将文件下载下来,用windows的解压工具,重新压缩成zip格式,上传上去。用unzip 解压即可。

安装软件方式:

linux软件有rpm包、二进制源码包等。

rpm包一般用: rpm -ivh rpm包名 即可安装

二进制源码包需要先编译然后袜槐安装(也可先指定安装路劲)

./configure

make

make install

关于linux 分割压缩的介绍到此就结束了,不知道你从中找到你需要的信息了吗 ?如果你还想了解更多这方面的信息,记得收藏关注本站。


数据运维技术 » Linux下分割和压缩文件的实用技巧 (linux 分割压缩)