Tại sao open-iscsi ghi chậm hơn hai lần so với Samba qua Ethernet 10G?

Trên máy chủ tệp cục bộ của tôi, tôi có raid-6 trên ổ đĩa cứng 7x.

dd if=/dev/zero of=tempfile bs=1M count=2048 conv=fdatasync

Kiểm tra tốc độ cục bộ cho tôi tốc độ ghi 349 MB / s.

Ghi từ xa vào Samba từ SSD (tốc độ đọc> 2Gb / giây) mang lại cho tôi 259 MB / s ghi. Nhưng ghi từ xa vào ổ iSCSI (trên trình khởi tạo Win10 iSCSI) chỉ cho tôi ghi 151 Mb / s.

cấu hình raid6 - kích thước chunk 128K, sọc_cache_size = 8191. Ghi bitmap ý định là trên SSD (Samsung 860 PRO, chunk bitmap 4096K).

Mảng được gắn với các tùy chọn: rw,noatime,nobarrier,commit=999,stripe=128,data=writeback

open-iscsi setup: target dựa trên tệp 4Tb.

Bất kỳ gợi ý tại sao iSCSI chậm hơn Samba khi viết? Bất kỳ gợi ý về cách cải thiện tốc độ ghi iSCSI?

Tôi giả sử nó có liên quan đến mong muốn của open-iscsi để ghi vào đĩa sau mỗi thao tác, điều này làm tăng sự khuếch đại ghi trên raid6 do viết lại chẵn lẻ quá mức. Nhưng tôi không chắc làm thế nào để sửa nó. Tốc độ nó quan trọng hơn sự an toàn của dữ liệu hiện tại trong trường hợp mất điện.

Như một lưu ý phụ, mục tiêu iSCd cũ hơn có khả năng kích hoạt chế độ ghi lại (sử dụng IOMode=wb) và tốc độ ghi duy trì nhanh hơn nhiều. Thật không may, nó dường như không được biết đến.

Trước hết, RAID-6 là vấn đề vì tính toán chẵn lẻ kép. Thứ hai, bạn có thể kết nối mục tiêu iSCSI hai lần trong MS iSCSI Initiator, kích hoạt RR hoặc Least Queue Depth (không may, Win10 không hỗ trợ đa luồng, vì vậy bạn có thể kiểm tra nó với Windows Server thay thế).

Trong thực tế, truy cập cấp khối phải nhanh hơn truy cập cấp tệp. Bạn đang sử dụng loại công cụ đo điểm chuẩn nào từ trang web Windows? Tôi khuyên bạn nên sử dụng đĩaspd hoặc FIO. Ngoài ra, bạn có thể sử dụng một cái gì đó như Starwind làm mục tiêu iSCSI nhanh hơn nhiều.

https://www.starwindsoftware.com/starwind-virtual-san#Hyper-V

iSCSI nên được sử dụng ở cấp độ khối, mô tả thiết lập của bạn có vẻ như bạn đang sử dụng một hệ thống tệp, đặt một tệp trên đó và sau đó chạy tệp này dưới dạng lớp khối iSCSI.

Điều này là xa lý tưởng, và definiteley không phải là một thiết lập để so sánh tốc độ. Hãy thử sử dụng lvm trên đầu raid6 để phân đoạn không gian và ở trên lớp khối cho iSCSI hoặc sử dụng raid6 trực tiếp làm thiết bị iSCSI.

Trong thiết lập hiện tại của bạn, dữ liệu được truyền qua mạng, nhấn một tệp trong hệ thống tệp, rất có thể không được tối ưu hóa cho loại khối lượng công việc này và cũng được chia sẻ với các quy trình khác. Có thể thực hiện thiết lập như vậy với iSCSI, nhưng nên được coi là giải pháp dự phòng chưa được tối ưu hóa.

Xin lưu ý rằng ddmột điểm chuẩn rất đơn giản và RẤT dễ bị biến dạng. Ví dụ: bạn ddđang viết số 0 - nếu có trường hợp đặc biệt cho dữ liệu đầy số không (ví dụ: vì nó có thể nén), bạn sẽ thấy hiệu suất tuyệt vời nhưng chuyển sang viết "dữ liệu thực" khác không và đột nhiên hiệu suất có thể biến mất. ..

Để trả lời câu hỏi của bạn (như trong tất cả các điểm chuẩn), bạn thực sự phải cách ly các phần để xác định bit giới thiệu vấn đề. Ví dụ, việc ghi vào hệ thống tập tin Windows trực tiếp (và không qua iSCSI) cũng cực kỳ nhanh? Nếu bạn có cùng cấu hình phần cứng và chạy Linux thay vì Windows thì nó có nhanh như vậy không hay nó có chậm không? Điều gì xảy ra nếu bạn chuyển sang sử dụng một công cụ điểm chuẩn như fio ?

Đáng buồn thay, có quá nhiều khả năng để có thể trả lời một câu hỏi như thế này ...