Tách các tệp bằng tar, gz, zip hoặc bzip2 [đã đóng]

Tôi cần nén một tệp lớn khoảng 17-20 GB. Tôi cần chia nó thành nhiều tệp khoảng 1GB cho mỗi tệp.

Tôi đã tìm kiếm một giải pháp thông qua Google và tìm ra cách sử dụng splitvà catcác lệnh. Nhưng chúng không hoạt động cho các tệp lớn. Ngoài ra, họ sẽ không làm việc trong Windows; Tôi cần giải nén nó trên máy Windows.

Bạn có thể sử dụng splitlệnh với -btùy chọn:

split -b 1024m file.tar.gz

Nó có thể được lắp lại trên máy Windows bằng câu trả lời của @ Joshua .

copy /b file1 + file2 + file3 + file4 filetogether

Chỉnh sửa : Như @Charlie đã nêu trong nhận xét bên dưới, bạn có thể muốn đặt tiền tố một cách rõ ràng vì nó sẽ sử dụng xkhác, điều này có thể gây nhầm lẫn.

split -b 1024m "file.tar.gz" "file.tar.gz.part-"

// Creates files: file.tar.gz.part-aa, file.tar.gz.part-ab, file.tar.gz.part-ac, ...

Chỉnh sửa : Chỉnh sửa bài đăng vì câu hỏi đã đóng và giải pháp hiệu quả nhất rất gần với nội dung của câu trả lời này:

# create archives
$ tar cz my_large_file_1 my_large_file_2 | split -b 1024MiB - myfiles_split.tgz_
# uncompress
$ cat myfiles_split.tgz_* | tar xz

Giải pháp này tránh sự cần thiết phải sử dụng một tệp lớn trung gian khi (de) nén. Sử dụng tùy chọn tar -C để sử dụng một thư mục khác cho các tệp kết quả. btw nếu kho lưu trữ chỉ bao gồm từ một tệp duy nhất, tar có thể tránh được và chỉ sử dụng gzip:

# create archives
$ gzip -c my_large_file | split -b 1024MiB - myfile_split.gz_
# uncompress
$ cat myfile_split.gz_* | gunzip -c > my_large_file

Đối với các cửa sổ, bạn có thể tải xuống các phiên bản được chuyển của cùng một lệnh hoặc sử dụng cygwin.

Nếu bạn đang tách khỏi Linux, bạn vẫn có thể tập hợp lại trong Windows.

copy /b file1 + file2 + file3 + file4 filetogether

sử dụng tar để chia thành nhiều tài liệu lưu trữ

có rất nhiều chương trình sẽ hoạt động với các tệp tar trên windows, bao gồm cả cygwin.

Mã được kiểm tra, ban đầu tạo một tệp lưu trữ duy nhất, sau đó chia nhỏ nó:

 gzip -c file.orig > file.gz
 CHUNKSIZE=1073741824
 PARTCNT=$[$(stat -c%s file.gz) / $CHUNKSIZE]

 # the remainder is taken care of, for example for
 # 1 GiB + 1 bytes PARTCNT is 1 and seq 0 $PARTCNT covers
 # all of file
 for n in `seq 0 $PARTCNT`
 do
       dd if=file.gz of=part.$n bs=$CHUNKSIZE skip=$n count=1
 done

Biến thể này bỏ qua việc tạo một tệp lưu trữ duy nhất và đi thẳng vào việc tạo các phần:

gzip -c file.orig |
    ( CHUNKSIZE=1073741824;
        i=0;
        while true; do
            i=$[i+1];
            head -c "$CHUNKSIZE" > "part.$i";
            [ "$CHUNKSIZE" -eq $(stat -c%s "part.$i") ] || break;
        done; )

Trong biến thể này, nếu kích thước tệp của kho lưu trữ chia hết cho $CHUNKSIZE, thì tệp một phần cuối cùng sẽ có kích thước tệp 0 byte.