rsync rất chậm (yếu tố 8 đến 10) so với cp khi sao chép tệp từ nfs-share sang thư mục cục bộ

Tôi có một máy chủ Ubuntu mới được cài đặt, nó phải là máy chủ dự phòng mới cho bộ lưu trữ VM của chúng tôi. Máy chủ có 4 nics, 2 trong số đó là 10Gbit (thực tế là intel x540-T2 với trình điều khiển mới nhất hiện có) được sử dụng để kết nối với SAN. Tôi có nfs-share được gắn cục bộ và so sánh sự khác biệt về tốc độ trong khi sao chép một thư mục có ~ 30 tệp, khoảng 15 vm-hình ảnh và các tệp nhật ký tương ứng. Hình ảnh có kích thước từ 8 GB đến 600 GB.

Sử dụng:

cp -rf /mnt/nfs-share /backup-storage/

Do đó, bmon cho thấy khoảng 600 MiB / s.

Sử dụng

rsync -av /mnt/nfs-share /backup-storage/

bmon hiển thị một số gói trong những giây đầu tiên, tạm dừng trong khoảng 30 giây và hơn là xây dựng lên đến khoảng 60-75 MiB / s. CPU là khoảng 60%.

Tôi nên / có thể thay đổi để sử dụng rsyncvới hiệu suất tương tự như cpthế nào?

Tôi nghĩ rằng những khác biệt này được thiết lập khá tốt giữa cpvà rsync. Xem bài viết này như một tài liệu tham khảo, có tiêu đề: Một cái nhìn về hiệu suất rsync .

The four commands tested were:

    rsync $SRC $DEST
    echo $SRC | cpio -p $DEST
    cp  $SRC $DEST
    cat $SRC > $DEST/$SRC

The results for rsync, cpio, cp, and cat were:

user    sys     elapsed hog MiB/s   test
5.24    77.92   101.86  81% 100.53  cpio
0.85    53.77   101.12  54% 101.27  cp
1.73    59.47   100.84  60% 101.55  cat
139.69  93.50   280.40  83% 36.52   rsync

Tôi sử dụng rsynchàng ngày. Có những điều bạn có thể làm để cải thiện tình hình.

Ví dụ: bạn có thể thử sử dụng công -Wtắc:

-W, --whole-file            copy files whole (w/o delta-xfer algorithm)

Ngoài ra tôi sẽ đề nghị đảm bảo rằng bạn có 3.x phiên bản của rsync. Có những cải tiến đáng chú ý khi chúng tôi chuyển sang các phiên bản mới hơn.

Cách để tạo rsync có hiệu suất tương tự như cp là đánh vần là "cp".

Sự khác biệt giữa hai lệnh là đáng kể mặc dù hiệu ứng ròng có thể giống nhau. Cụ thể, rsync thực hiện một loạt các thao tác đọc để xem liệu một số tệp hoặc một phần của tệp có nên được sao chép hay không.

Có một số lý do mà bạn muốn sử dụng rsync? Bởi vì bản sao cp "mù quáng", bạn sẽ thấy hiệu suất thô cao hơn. Nếu, đối với một tập hợp các điều kiện kích hoạt, cơ chế "chuyển đổi delta" của rsync được sử dụng, bạn sẽ thấy tốc độ truyền giảm và việc sử dụng CPU tăng lên khá nhiều theo cách bạn báo cáo.