Không chặn đệm tên ống?

Tôi đang tìm kiếm thứ gì đó mà tôi nghi ngờ không tồn tại: Một ống có tên đệm (fifo) không bị chặn để sử dụng từ dòng lệnh. Có một điều như vậy?

Đây là trường hợp sử dụng: Giả sử tôi có một quy trình sẽ chạy một thời gian dài trong nền và tạo ra rất nhiều đầu ra cho stdout . Tôi không thực sự quan tâm đến đầu ra và không muốn lưu trữ nó (có lẽ tôi không có đủ chỗ để làm), nhưng tôi muốn "thả" theo định kỳ và làm theo những gì nó đang làm, sau đó lại bỏ đi và để nó làm công việc của nó. Vì vậy, tôi muốn chuyển hướng đầu ra của nó sang đường ống có tên đệm, không chặn theo lý thuyết này và sau đó định kỳ chạm vào nó.

Vì vậy, về cơ bản tôi muốn bắt đầu như thế này ( 10Mlà kích thước của bộ đệm):

mkmagicfifo magicfifo 10M
spewingprocess > magicfifo &

... và định kỳ ghé vào để xem chuyện gì đang xảy ra ...

tail -f magicfifo

... mà không magicfifo lưu trữ tất cả đầu ra (vì vậy, không phải là một tệp bình thường) và không có nó chặn quá trình phun ra khi nó đầy và không được gõ (vì vậy, không hoàn toàn là một ống có tên bình thường).

Tôi không nghĩ các giải pháp liên quan tailhoặc prunesẽ làm điều đó (tốt, tôi có thể nghĩ đến một cách giải quyết liên quan tail), bởi vì tailvẫn sẽ yêu cầu tôi lưu trữ tất cả dữ liệu ở đâu đó (nếu tôi muốn thả vào và bỏ qua khi xem nó), và prunephải viết lại tệp, có lẽ (tôi thừa nhận tôi đã không thử / chứng minh điều này) phá vỡ sự chuyển hướng của quá trình tạo ra tất cả đầu ra.

Tôi hy vọng tôi có thể viết một số tiện ích để làm điều này, nhưng * nix có rất nhiều khía cạnh thú vị của các tập tin và đường ống và như vậy, tôi không thể không nghĩ rằng nó tồn tại và tôi chỉ không biết về nó.

Vì vậy: Có một điều như vậy, và nếu vậy nó là gì?

Tôi nghĩ những gì bạn đang tìm kiếm là GNU screen. Nó duy trì bộ đệm để giữ toàn bộ màn hình cuối cùng hoặc hai đầu ra từ một hoặc nhiều chương trình và cho phép bạn ngắt kết nối và quay lại sau.

Bạn có thể sử dụng pv, nó cung cấp nhiều bộ đệm như bạn muốn trong một đường ống dẫn. Bạn có thể sử dụng nó như thế này:

sprewingprocess | pv -B 1g > ordinaryfifo &

Điều đó sẽ cung cấp cho bạn tới 1GB bộ đệm giữa spewingprocessvà fifo. Hầu hết các bản phân phối Linux cung cấp pvtrong một gói được gọi là, tin hay không , pv.

Tôi đã từng gặp vấn đề tương tự. Đây là giải pháp đầu tiên của tôi. Đầu tiên ghi đầu ra vào một tệp mà chúng tôi cắt ngắn sau mỗi dòng để nó không tăng trưởng vô thời hạn:

spewingprocess | while read line; do echo $line > buffer.txt ; done

Sau đó đọc từ tệp bằng đuôi (trong đó 2> /dev/nullthoát khỏi thông báo lỗi "tệp bị cắt"):

tail -f ./buffer.txt 2> /dev/null

Bằng cách này, bộ đệm không phát triển và chúng ta có thể ghép kênh, ví dụ như chạy nhiều đuôi như chúng ta muốn. Tuy nhiên, vấn đề với cách tiếp cận này là chúng ta có thể mất dữ liệu khi chúng ta cắt nhanh hơn đuôi có thể đọc được vì thử nghiệm này cho thấy:

for ((i=0; ; i++)) ; do echo "$i" ; done | while read line; do  echo $line > buffer.txt ; done
tail -f ./buffer.txt 2> /dev/null > log.txt

Sau khi chạy một thời gian, dòng đầu tiên và cuối cùng là:

$ head -n 1 log.txt
0
$ tail -n 1 log.txt
78783

Nhưng tệp có ít dòng hơn, vì vậy một số bị mất:

$ wc log.txt
67087  67087 392819 log.txt

Tuy nhiên, đây có vẻ là một giải pháp tốt nếu bạn không quan tâm quá nhiều đến việc mất dữ liệu hoặc khi quá trình phát tán của bạn không đủ nhanh để mất dữ liệu.