Chương trình duem có thể được thực hiện ít tích cực hơn?

Chúng tôi có một công việc thường xuyên là dutóm tắt một số thư mục con, chọn ra những kẻ phạm tội tồi tệ nhất và sử dụng đầu ra để tìm xem có những thứ đang tăng nhanh để phát hiện ra các vấn đề tiềm ẩn. Chúng tôi sử dụng diffchống lại ảnh chụp nhanh để so sánh chúng.

Có một thư mục cấp cao nhất, với một số (vài trăm) thư mục con, mỗi thư mục có thể chứa 10 trong số hàng ngàn tệp mỗi tệp (hoặc nhiều hơn).

Một " du -s" trong ngữ cảnh này có thể rất mạnh IO, khiến máy chủ của chúng tôi bảo lãnh bộ đệm của nó và sau đó tăng đột biến IO rất lớn, một mặt rất không mong muốn ảnh hưởng.

Chiến lược nào có thể được sử dụng để có được cùng một dữ liệu, mà không có tác dụng phụ không mong muốn?

Hãy nhìn vào ionice. Từ man ionice:

Chương trình này đặt hoặc nhận lớp lập lịch io và ưu tiên cho chương trình. Nếu không có đối số hoặc chỉ -p được đưa ra, ionice sẽ truy vấn lớp lập lịch io hiện tại và mức độ ưu tiên cho quy trình đó.

Để chạy duvới lớp I / O "nhàn rỗi", mức ưu tiên thấp nhất hiện có, bạn có thể làm một cái gì đó như thế này:

ionice -c 3 du -s

Điều này sẽ không ducan thiệp vào quá trình 'I / O khác. Bạn cũng có thể muốn xem xét việc đổi tên chương trình để giảm mức ưu tiên CPU của nó, như vậy:

renice -n 19 "$duPid"

Bạn cũng có thể làm cả hai tại thời điểm khởi tạo:

nice -n 19 ionice -c 3 du

Nếu bạn có hàng tấn tệp trong một thư mục, điều này có thể chịu trách nhiệm cho các đột biến I / O, vì nhiều hệ thống tệp không xử lý tốt các cây tệp lớn trong một thư mục. Chia nó thành nhiều thư mục con có thể giúp đỡ ở đó. Nếu bạn có hơn 10k tệp trong một thư mục và điều đó gây ra sự cố, có lẽ bạn nên tách nó ra.

Đối với việc theo dõi việc sử dụng đĩa, trước tiên bạn có thể xem xét df, nếu giá trị sử dụng không tăng nhanh thì các thư mục con cũng không và bạn có thể bỏ qua duhoàn toàn.

Một lựa chọn khác có thể là một hệ thống hạn ngạch đĩa giúp theo dõi việc sử dụng liên tục, nếu hệ thống tệp của bạn hỗ trợ nó.

Ngoài ra, ionicebạn có thể cố gắng làm cho việc truy cập đĩa hiệu quả hơn. Điều này có thể được cố gắng bằng cách thực hiện

find /du/root -printf ""
find /du/root -perm 777 -printf ""

đầu tiên (có thể thông qua ionice, quá). Nó sẽ không hoạt động nếu có quá nhiều tập tin. Có bao nhiêu là quá nhiều phụ thuộc vào dung lượng RAM miễn phí.