linux:切分大文件

文章目录

  • [1. 前言](#1. 前言)
  • [2. 用法](#2. 用法)
  • [3. 例子](#3. 例子)

1. 前言

如果传输、存储过程中出现大文件,希望切分成小文件。在 Linux 中,可以使用多种工具来切分大文件,最常用的是 split 命令。split 命令可以将一个大文件按照指定大小切分成多个小文件。

2. 用法

split 命令的基本用法:

bash 复制代码
split [OPTION]... [INPUT [PREFIX]]

其中:

  • [OPTION]:可选参数,用于指定切分的规则和选项。
  • [INPUT]:要切分的输入文件。
  • [PREFIX]:生成的小文件的前缀名称。

3. 例子

(1)按照指定大小切分文件

bash 复制代码
split -b 100M largefile.txt splitfile.txt.

largefile.txt 按照 100MB 的大小切分成多个小文件,以 splitfile.txt. 作为前缀,生成的小文件名称类似于 splitfile.txt.aa, splitfile.txt.ab, splitfile.txt.ac,依此类推。

bash 复制代码
split -d -b 100M largefile.txt splitfile.txt.

这个命令与第一个示例类似,但是使用 -d 选项可以生成以数字作为后缀的文件名,例如 splitfile.txt.00, splitfile.txt.01, splitfile.txt.02 等。

(2)按照行数切分文件

bash 复制代码
split -l 1000 largefile.txt splitfile.

这个命令将 largefile.txt 按照每 1000 行切分成多个小文件

使用 cat 命令将多个包合并为一个:

bash 复制代码
cat splitfile.txt.* > splitfile.tx
相关推荐
Archy_Wang_128 分钟前
LVS+KeepAlived+Nginx实现企业级业务高可靠部署的实战教程
运维·nginx·lvs
张文君2 小时前
docker使用代理拉取镜像
运维·docker·容器
ltl3 小时前
纠删码原理与存储效率
linux
ltl3 小时前
MinIO 原理和架构:机制、AGPL 与上游 archived 风险
linux
陌路203 小时前
Docker教程从入门到精通(0基础)
运维·docker·容器
林浩杨_3 小时前
linux搜索命令(grep+sed)
linux·命令模式
W.W.H.3 小时前
将驱动编译成模块并安装到rootfs
linux·物联网·wifi·rootfs·驱动
ltl3 小时前
io_uring 在生产环境翻车实录:内核 bug、资源泄漏和你不知道的限制
linux
ltl3 小时前
内存分配器擂台:jemalloc vs tcmalloc vs mimalloc vs glibc
linux
ltl3 小时前
Zero Copy 的肮脏秘密:在什么时候反而更慢
linux