如何用 nbytes 分割文件并使用 head 和 tail

Question

我正在尝试制作一个将文件拆分为 nbytes 的脚本。 我已经注意到这一点，但我想使用 head 和 tail 而不是像我一样使用 split。

#!/bin/sh

if [ $# -eq 0 ];then
    exit 1
fi
if [ $# -eq 1 ];then
    exit 1
fi
if [ $2 -eq 0 ];then
    exit 1
fi
if [ ! -f "$1" ];then
    exit 1
fi

split -d -b 1024 bigfile.bin bigfile.bin.

它给出了这个：

-rw-rw-r-- 1 madushan madushan 1024 déc.  10 17:34 bigfile.bin.00
-rw-rw-r-- 1 madushan madushan 1024 déc.  10 17:34 bigfile.bin.01
-rw-rw-r-- 1 madushan madushan 1024 déc.  10 17:34 bigfile.bin.02
-rw-rw-r-- 1 madushan madushan 1024 déc.  10 17:34 bigfile.bin.03
-rw-rw-r-- 1 madushan madushan 1024 déc.  10 17:34 bigfile.bin.04
-rw-rw-r-- 1 madushan madushan 1024 déc.  10 17:34 bigfile.bin.05
-rw-rw-r-- 1 madushan madushan 1024 déc.  10 17:34 bigfile.bin.06
-rw-rw-r-- 1 madushan madushan 1024 déc.  10 17:34 bigfile.bin.07
-rw-rw-r-- 1 madushan madushan 1024 déc.  10 17:34 bigfile.bin.08
-rw-rw-r-- 1 madushan madushan  784 déc.  10 17:34 bigfile.bin.09

Answer 1

您可以使用bash（+head，+tail）实现轻量级拆分版本。但是，它不会很有效，因为您需要读取文件时间，其中 N=totalsize/nbytes。对于小文件，开销很小，对于大文件，开销很大。

nbytes=1024
file=bigfile.bin
k=0
i=0
while tail --bytes=+$((nbytes*i)) < $file | head --bytes=$nbytes > $file.work ; do
    # Stop unless segment has data
    [ -s "$file.work" ] || break
    let i++
    echo "Segment: $i"

    mv "$file.work" "$file.$i"
done
rm -f $file.work

如果只使用 head 没问题，那么对于大文件可能更有效。它只会读取一次输入，无需重新读取任何内容。

nbytes=1024
file=bigfile.bin
k=0
i=0
(
    while head --bytes=$nbytes > $file.work ; do
        [ -s "$file.work" ] || break
        let ++i
        mv "$file.work" "$file.$i"
    done
) < $file
rm -f $file.work

还可以考虑使用“dd”，它对大文件有更强大的逻辑。