Linux下檔案的切分與合併的簡單方法

pythontab發表於2017-07-28

linux下檔案分割可以透過split命令來實現,可以將一個大檔案拆分成指定大小的多個檔案,並且拆分速度非常的快,可以指定按行數分割和安大小分割兩種模式。Linux下檔案合併可以透過cat命令來實現,非常簡單。

在Linux下用split進行檔案分割

先看下幫助文件

Usage: split [OPTION]... [INPUT [PREFIX]]

Output fixed-size pieces of INPUT to PREFIXaa, PREFIXab, ...; default

size is 1000 lines, and default PREFIX is `x'.  With no INPUT, or when INPUT

is -, read standard input.


Mandatory arguments to long options are mandatory for short options too.

  -a, --suffix-length=N   use suffixes of length N (default 2) 指定拆分檔案的字尾長度

  -b, --bytes=SIZE        put SIZE bytes per output file 按位元組拆分,預設單位位元組

  -C, --line-bytes=SIZE   put at most SIZE bytes of lines per output file  指定單行的最大大小,預設單位位元組

  -d, --numeric-suffixes  use numeric suffixes instead of alphabetic 用數字作為拆分檔案的字尾

  -l, --lines=NUMBER      put NUMBER lines per output file  按行數進行拆分

      --verbose           print a diagnostic just before each

                            output file is opened

      --help     display this help and exit

      --version  output version information and exit

模式一:指定分割後檔案行數

對與txt文字檔案,可以透過指定分割後檔案的行數來進行檔案分割。

命令:

split -l 300 large_file.txt new_file_prefix

切分後預設生成加字尾aa, ab, ac...以此類推, 當然也可以自定義字尾。

模式二:指定分割後檔案大小

split -b 10m server.log waynelog

對二進位制檔案我們同樣也可以按檔案大小來分隔。


在Linux下用cat進行檔案合併

命令:

cat small_files* > large_file


相關文章