Di chuyển tập tin và xóa thư mục với rsync?

Gần đây tôi cần xóa một số lượng lớn tệp (hơn 1 triệu) và tôi đọc được điều đó:

rsync -av --delete `mktemp -d`/ ~/source && rmdir ~/source

Là một trong những cách tối ưu nhất để làm điều đó và tôi có thể khẳng định rằng nó nhanh hơn rm -rf.

Tôi không phải là một chuyên gia về vấn đề này, nhưng theo hiểu biết của tôi, lý do cho hiệu suất rsync có gì đó để thực hiện theo cách liệt kê các tệp (LIFO thay vì FIFO tôi cho rằng). Bây giờ, vấn đề là, tôi cũng cần phải di chuyển một số lượng lớn các tệp một cách hiệu quả. Sau khi tìm kiếm một chút, tôi thấy điều này:

rsync -av --ignore-existing --remove-source-files ~/source ~/destination

Trong khi điều này xóa tất cả các tập tin di chuyển trong ~/source, các thư mục vẫn ở đó. Vì tôi có cấu trúc thư mục giống như "vòng tròn", số lượng files/directoriesrất gần với 1, vì vậy tôi buộc phải chạy lại lệnh đầu tiên để loại bỏ hoàn toàn thư mục:

rsync -av --ignore-existing --remove-source-files ~/source ~/destination && \
rsync -av --delete `mktemp -d`/ ~/source && rmdir ~/source

Một đường thẳng mvsẽ hoàn thành gần như ngay lập tức, nhưng ~/destinationthư mục của tôi có các tệp nên được giữ, vì vậy mvkhông phải là một tùy chọn. Tôi đã tìm thấy các tùy chọn --prune-empty-dirsvà --forcersync, nhưng dường như không hoạt động như tôi mong đợi:

--force                 force deletion of directories even if not empty
--prune-empty-dirs      prune empty directory chains from the file-list
--remove-source-files   sender removes synchronized files (non-dirs)

Có cách nào để bắt chước một động thái với rsync trong một lần không?

Tôi tìm thấy chủ đề này trên stackoverflow có tiêu đề: Xóa các thư mục với rsync Wap di chuyển? , đó là hỏi về cơ bản cùng một câu hỏi. Một trong những câu trả lời được đề xuất thực hiện rsynctrong 2 lệnh vì nó xuất hiện không có một lệnh nào có thể thực hiện việc di chuyển / loại bỏ các tệp và thư mục nguồn.

$ rsync -av --ignore-existing --remove-source-files source/ destination/ && \
  rsync -av --delete `mktemp -d`/ source/ && rmdir source/

Ngoài ra, bạn có thể làm điều đó bằng cách sử dụng lệnh này:

$ rsync -axvvES --remove-source-files source_directory /destination/ && \
  rm -rf source_directory

Không lý tưởng nhưng làm công việc.

Từ nhận xét của zany đến câu trả lời của slm ( Di chuyển tệp và xóa thư mục bằng rsync? ) Tôi muốn giới thiệu 2 lệnh này dưới dạng câu trả lời:

rsync -av --ignore-existing --remove-source-files source/ destination/ && \
find source/ -depth -type d  -empty -exec rmdir "{}" \;

Ưu điểm là, như zany đã nói, vẫn còn một số nguy hiểm liên quan đến việc sử dụng rm -rf nếu bạn không hiểu đúng hoặc cho người mới bắt đầu.

Tôi đã thêm 2 tùy chọn, -depth và -empty và trong khi tôi không chắc liệu điều này có thực sự cần thiết hay không, nó làm cho lệnh thứ 2 trở nên dễ dàng hơn cho các tình huống khác và thậm chí còn an toàn hơn (nó vẫn làm đúng nếu một số thư mục không trống và bắt đầu loại bỏ từ điểm sâu nhất trong cây thư mục)

Điều này làm công việc trong một bước. Lưu ý dấu vết / dấu gạch chéo / trên cả đường dẫn nguồn và đích.

rsync \
    -ruval \
    --ignore-existing \
    --remove-source-files \
    --prune-empty-dirs \ 
    /source/path/ /target/path/

Tôi nhắc lại sự thận trọng từ user7000 không sử dụng --deletevà --remove-source-filescùng trong một cuộc gọi đến rsync. Nếu thao tác thất bại hoặc bị gián đoạn và cùng một cuộc gọi được lặp lại, bạn sẽ mất dữ liệu. Nếu có nghi ngờ, hãy sử dụng --dry-runtùy chọn để xem những gì sẽ được thực hiện.