Sử dụng rsync để di chuyển (không sao chép) các tập tin giữa các thư mục?

Tôi đã sử dụng rsync để sao chép tập tin một thời gian. Tôi hiểu rằng rsync nhanh hơn cp khi một số tệp cần truyền đã có trong thư mục đích, chỉ chuyển chênh lệch gia tăng (tức là "deltas").

Nếu điều này là chính xác, liệu có bất kỳ lợi thế nào khi sử dụng rsync để di chuyển nội dung của thư mục A , giả sử, một thư mục B , với B trống không?

Thư mục A có gần 1TB dữ liệu (và hàng triệu tệp trong đó). Việc chuyển sẽ được thực hiện qua một mạng cục bộ ( A và B nằm trên các hệ thống tập tin khác nhau , cả hai được gắn trên siêu máy tính, ví dụ A là NFS và B là ánh ).

Ngoài ra, tôi nên sử dụng cờ nào để yêu cầu rsync di chuyển (không sao chép) các tệp từ A sang B (nghĩa là xóa A khi quá trình chuyển đã kết thúc thành công)?

Bạn có thể chuyển --remove-source-filessang rsync để di chuyển tệp thay vì sao chép chúng.

Nhưng trong trường hợp của bạn, không có điểm nào trong việc sử dụng rsync, vì đích đến trống. Một đồng bằng mvsẽ làm công việc nhanh nhất có thể.

Trong trường hợp của bạn, điều có thể tạo ra sự khác biệt về hiệu suất là sự lựa chọn giao thức mạng, nếu bạn có lựa chọn giữa NFS, Samba, sshfs, sftp, rsync trên ssh, tar piped vào ssh, v.v. Tốc độ tương đối của các phương thức này phụ thuộc về kích thước tệp, băng thông mạng và ổ đĩa và các yếu tố khác, vì vậy không có cách nào để đưa ra lời khuyên chung, bạn sẽ cần chạy điểm chuẩn của riêng mình.

Vì --remove-source-fileskhông xóa thư mục, tôi đưa ra các lệnh sau để di chuyển tệp qua ssh:

rsync -avh --progress --remove-source-files /home/user/mystuff/* user@external.server:/home/user/backup
find . -type d -empty -delete

Cá nhân tôi thích --progresstính năng này, vì tôi thực hiện chuyển khoản này một cách thủ công. Xóa nó nếu bạn đang sử dụng một tập lệnh. Tôi hy vọng rằng nó làm chậm chuyển giao nhẹ. Các findtùy chọn xóa của lệnh chỉ xóa các thư mục rỗng - không sử dụng rm -rf, vì nó có thể xóa các thư mục không rỗng trong trường hợp một tập tin không được chuyển giao. Các -deletetùy chọn bật các -depthtùy chọn sao cho cây thư mục rỗng sẽ bị xóa khỏi "đáy" lên.

Nói chung như Gilles cho biết không có lợi thế nào khi sử dụng rsyncđể di chuyển tệp khi mvsẽ thực hiện cùng một công việc đơn giản hơn và không có khả năng tăng tốc giữa các hệ thống tệp thông thường.

Tuy nhiên, có một số thời điểm khi có một lợi thế. Đặc biệt, nếu bạn có bất kỳ nghi ngờ nào về tính ổn định của nguồn, đích hoặc máy đang thực hiện công việc, việc sử dụng rsyncmang lại cho bạn khả năng tiếp tục. Đây có thể là một lợi thế đáng chú ý nếu bạn chuyển rất lớn và, giả sử, lưới điện của bạn không đáng tin cậy. Sử dụng rsync sẽ là một cách ổn định hơn để tránh hỏng dữ liệu trong trường hợp xảy ra lỗi và chọn nơi bạn rời đi.

sẽ có bất kỳ lợi thế nào khi sử dụng rsync để di chuyển nội dung của thư mục A, giả sử, một thư mục B, với B trống?

Tôi đã thấy mình trong một tình huống mà rsync IS nhanh hơn mv đơn giản vì mv không thể xử lý số lượng tệp trong thư mục. Tôi có 1,8 triệu ảnh từ camera an ninh đã chạy trong 20 ngày và lệnh mv thoát khi bị lỗi vì không thể phân bổ tài nguyên.

rsync tuy nhiên, dường như xử lý tất cả các tệp mà không có vấn đề.

Nếu bạn muốn hợp nhất đệ quy các thư mục ... di chuyển một thư mục vào một thư mục khác có tên thư mục có khả năng trùng lặp , thì vui lòng xem câu trả lời của tôi ở đây trên serverfault.com. mvthực hiện công việc kém khi các thư mục tồn tại cùng tên và rsyncsao chép (đọc + ghi dữ liệu đầy đủ) mỗi tệp thay vì chỉ di chuyển chúng (chỉ đọc và ghi siêu dữ liệu).

Không có cách nào để thực sự di chuyển các tệp bằng cách sử dụng rsync như lệnh mv Linux sẽ làm. Bằng cách sử dụng --remove-source-files, về cơ bản, bạn đang sao chép tệp vào đích và sau đó xóa các tệp (trừ thư mục) khỏi nguồn. Điều này có thể đạt được mục đích của bạn để di chuyển tệp nhưng bạn sẽ KHÔNG tiết kiệm thời gian hoặc thao tác i / o.