如何分割Linux大文件 split命令按大小分割教程

<p>按指定大小分割大文件用split -b参数，如split -b 1g filename.ext prefix_；生成文件按字母后缀命名，可用-d参数改为数字命名；合并时用cat prefix_* > merged_file.ext确保顺序正确；注意分割大小合理、避免覆盖文件及后台运行处理。</p>

直接回答标题的问题：Linux下用split命令分割大文件，其实很简单，关键是要理解几个常用参数的含义和使用方式。

按指定大小分割文件

split 最常用的场景就是按指定大小把一个大文件拆分成多个小文件。比如你想把一个 10GB 的日志文件拆成每份 1GB 的小文件，就可以用这个方法。

使用的基本命令是：

split -b 1G filename.ext prefix_

• -b

  登录后复制
  表示按字节大小来分，后面可以跟单位，比如

  1k

  登录后复制
  、

  1M

  登录后复制
  、

  1G

  登录后复制
  ；

• filename.ext

  登录后复制
  是你要分割的原始文件；

• prefix_

  登录后复制
  是输出文件的前缀，生成的文件会类似

  prefix_aa

  登录后复制
  、

  prefix_ab

  登录后复制
  这样命名。

需要注意的是，如果文件不能整除设定的大小，最后那个文件会小于设定值，这是正常现象。

查看分割后的文件列表

分割完成后，你可以通过

ls

ls prefix_*

你会看到类似下面的文件名：

文心大模型

百度飞桨-文心大模型 ERNIE 3.0 文本理解与创作

56

查看详情

prefix_aa
prefix_ab
prefix_ac
...

这些文件默认是以两个字母后缀的方式命名的，如果你希望用数字或者其他格式，也可以调整参数，比如加上

-d

split -b 1G filename.ext prefix_ -d

这样生成的文件名会是

prefix_00

prefix_01

合并分割后的文件

既然能拆开，当然也能合并回来。用

cat

cat prefix_* > merged_file.ext

注意确保文件顺序正确，否则内容可能会错乱。split 默认生成的顺序是按字母或数字递增排列的，所以一般不会有问题。

不过如果你是在不同系统之间传输后再合并，建议先检查一下文件顺序是否一致，避免出现异常。

一些实用技巧和注意事项

• 合理设置分割大小：不要设得太小，否则会产生大量小文件，管理起来麻烦；也不要太大，失去了分割的意义。
• 使用压缩配合分割：如果空间紧张，可以在分割前先压缩原文件，或者分割后再分别压缩每个小文件。
• 避免覆盖已有文件：split 输出的前缀不要和当前目录中已有的文件重名，否则会被覆盖。
• 后台运行处理大文件：如果文件特别大，执行时间较长，可以用

  nohup

  登录后复制
  或者

  screen

  登录后复制
  放到后台运行。

基本上就这些操作了，不复杂但容易忽略细节，尤其是合并的时候要小心顺序问题。

以上就是如何分割Linux大文件 split命令按大小分割教程的详细内容，更多请关注php中文网其它相关文章！