我要评论一、简介
linux服务器普通的文件上传下载一般用 sz rz 就可以满足要求了，但是遇到大文件（超过4g）时就不好使了。
这是就可以通过将大文件分割为小文件传输，之后再进行文件合并即可。
二、用法
split命令格式：
split + 参数 + 要分割的文件 + 分割后子文件前缀
参数：
| 参数 | 解释 |
|---|---|
| -a | 后缀长度，例如-a3表示后缀长度为3 |
| -l | 按照行数将文件分割成多个小文件 |
| -b | 按照字节数将文件分割成多个小文件 |
| -d | 指定后缀编码为数字，默认编码为字母 |
2.1、生成测试大文件
[root@docker][19:13:12][ok] ~ #head -c 10m < /dev/urandom >cuttinglog [root@docker][19:13:15][ok] ~ #ll -h total 10m -rw-r--r-- 1 root root 10m nov 18 19:13 cuttinglog
2.2、分割
【1】每100行分成一个文件，后缀为数字，后缀长度为3位，前缀为log.
split -a3 -l 100 -d cuttinglog log.
[root@docker][19:13:17][ok] ~ #split -a3 -l 100 -d cuttinglog log. [root@docker][19:15:30][ok] ~ #ll total 21328 -rw-------. 1 root root 1640 nov 7 23:43 anaconda-ks.cfg -rw-r--r-- 1 root root 10485760 nov 18 19:13 cuttinglog -rw-r--r-- 1 root root 23325 nov 18 19:15 log.000 -rw-r--r-- 1 root root 22546 nov 18 19:15 log.001 -rw-r--r-- 1 root root 22925 nov 18 19:15 log.002 -rw-r--r-- 1 root root 27279 nov 18 19:15 log.003 -rw-r--r-- 1 root root 29060 nov 18 19:15 log.004 -rw-r--r-- 1 root root 22118 nov 18 19:15 log.005 -rw-r--r-- 1 root root 25845 nov 18 19:15 log.006 -rw-r--r-- 1 root root 25865 nov 18 19:15 log.007 -rw-r--r-- 1 root root 25474 nov 18 19:15 log.008 -rw-r--r-- 1 root root 22842 nov 18 19:15 log.009 -rw-r--r-- 1 root root 26265 nov 18 19:15 log.010 ...
【2】每100行分成一个文件，后缀为字母，后缀长度为3位，前缀为log.
split -a3 -l 100 cuttinglog log.
[root@docker][19:16:58][ok] ~ #split -a3 -l 100 cuttinglog log. [root@docker][19:17:01][ok] ~ #ll total 21328 -rw-------. 1 root root 1640 nov 7 23:43 anaconda-ks.cfg -rw-r--r-- 1 root root 10485760 nov 18 19:13 cuttinglog -rw-r--r-- 1 root root 23325 nov 18 19:17 log.aaa -rw-r--r-- 1 root root 22546 nov 18 19:17 log.aab -rw-r--r-- 1 root root 22925 nov 18 19:17 log.aac -rw-r--r-- 1 root root 27279 nov 18 19:17 log.aad -rw-r--r-- 1 root root 29060 nov 18 19:17 log.aae -rw-r--r-- 1 root root 22118 nov 18 19:17 log.aaf -rw-r--r-- 1 root root 25845 nov 18 19:17 log.aag -rw-r--r-- 1 root root 25865 nov 18 19:17 log.aah -rw-r--r-- 1 root root 25474 nov 18 19:17 log.aai -rw-r--r-- 1 root root 22842 nov 18 19:17 log.aaj ...
【3】每2m分成一个文件，后缀为字数字，后缀长度为2位，前缀为log.
split -b 2m -d cuttinglog log.
[root@docker][19:20:26][ok] ~ #split -b 2m -d cuttinglog log. [root@docker][19:20:29][ok] ~ #ll -h total 21m -rw-------. 1 root root 1.7k nov 7 23:43 anaconda-ks.cfg -rw-r--r-- 1 root root 10m nov 18 19:13 cuttinglog -rw-r--r-- 1 root root 2.0m nov 18 19:20 log.00 -rw-r--r-- 1 root root 2.0m nov 18 19:20 log.01 -rw-r--r-- 1 root root 2.0m nov 18 19:20 log.02 -rw-r--r-- 1 root root 2.0m nov 18 19:20 log.03 -rw-r--r-- 1 root root 2.0m nov 18 19:20 log.04
注意：当分割后文件的数量大于后缀能表达的最大文件数时，会报错：split: output file suffixes exhausted
例如：split -a1 -b 2048 -d /test/logs.txt /test/logs/log.这个命令能分割出14个文件，但是使用-a1命令使得后缀只能表示10个文件，所以实际文件数量超出后缀能表达的文件数量，会报错。
2.3、合并
[root@docker][19:27:03][ok] ~ #cat log.* >cuttinglog_bak [root@docker][19:27:30][ok] ~ #ll -h total 31m -rw-------. 1 root root 1.7k nov 7 23:43 anaconda-ks.cfg -rw-r--r-- 1 root root 10m nov 18 19:13 cuttinglog -rw-r--r-- 1 root root 10m nov 18 19:27 cuttinglog_bak -rw-r--r-- 1 root root 2.0m nov 18 19:20 log.00 -rw-r--r-- 1 root root 2.0m nov 18 19:20 log.01 -rw-r--r-- 1 root root 2.0m nov 18 19:20 log.02 -rw-r--r-- 1 root root 2.0m nov 18 19:20 log.03 -rw-r--r-- 1 root root 2.0m nov 18 19:20 log.04 [root@docker][19:27:32][ok] ~ #md5sum cuttinglog* a583e4c5c9de6618b89aa9fc909cc3c8 cuttinglog a583e4c5c9de6618b89aa9fc909cc3c8 cuttinglog_bak
总结
以上为个人经验，希望能给大家一个参考，也希望大家多多支持代码网。
发表评论