Làm thế nào để 'grep' một luồng liên tục?

Có thể sử dụng greptrên một luồng liên tục?

Ý tôi là một loại tail -f <file>lệnh, nhưng với grepđầu ra để chỉ giữ các dòng mà tôi quan tâm.

Tôi đã thử tail -f <file> | grep patternnhưng dường như grepchỉ có thể được thực hiện khi tailkết thúc, nghĩa là không bao giờ.

Bật grepchế độ đệm dòng khi sử dụng BSD grep (FreeBSD, Mac OS X, v.v.)

tail -f file | grep --line-buffered my_pattern

Bạn không cần phải làm điều này cho GNU grep (được sử dụng trên hầu hết mọi Linux) vì nó sẽ xóa theo mặc định (YMMV cho các lượt thích Unix khác như SmartOS, AIX hoặc QNX).

Tôi sử dụng tail -f <file> | grep <pattern>tất cả các thời gian.

Nó sẽ đợi cho đến khi grep tuôn ra, cho đến khi nó kết thúc (Tôi đang sử dụng Ubuntu).

Tôi nghĩ rằng vấn đề của bạn là grep sử dụng một số bộ đệm đầu ra. Thử

tail -f file | stdbuf -o0 grep my_pattern

nó sẽ đặt chế độ đệm đầu ra của grep thành không có bộ đệm.

Nếu bạn muốn tìm trận đấu trong toàn bộ tệp (không chỉ đuôi) và bạn muốn nó ngồi chờ bất kỳ trận đấu mới nào, điều này sẽ hoạt động tốt:

tail -c +0 -f <file> | grep --line-buffered <pattern>

Các -c +0lá cờ nói rằng đầu ra nên bắt đầu 0byte ( -c) từ đầu ( +) của tập tin.

Trong hầu hết các trường hợp, bạn có thể tail -f /var/log/some.log |grep foovà nó sẽ hoạt động tốt.

Nếu bạn cần sử dụng nhiều greps trên một tệp nhật ký đang chạy và bạn thấy rằng bạn không nhận được đầu ra, bạn có thể cần phải gắn công --line-bufferedtắc vào grep giữa của mình, như vậy:

tail -f /var/log/some.log | grep --line-buffered foo | grep bar

bạn có thể coi câu trả lời này là sự nâng cao .. thông thường tôi đang sử dụng

tail -F <fileName> | grep --line-buffered  <pattern> -A 3 -B 5

-F tốt hơn trong trường hợp xoay tệp (-f sẽ không hoạt động đúng nếu xoay tệp)

-A và -B rất hữu ích để có được các dòng ngay trước và sau khi xuất hiện mẫu .. các khối này sẽ xuất hiện giữa các dấu phân cách dòng đứt nét

Nhưng đối với tôi, tôi thích làm như sau

tail -F <file> | less

Điều này rất hữu ích nếu bạn muốn tìm kiếm bên trong các bản ghi được truyền phát. Tôi có nghĩa là quay trở lại và nhìn sâu và nhìn sâu

Không thấy ai đưa ra cách làm thông thường của tôi cho việc này:

less +F <file>
ctrl + c
/<search term>
<enter>
shift + f

Tôi thích điều này, bởi vì bạn có thể sử dụng ctrl + cđể dừng và điều hướng qua tệp bất cứ khi nào, và sau đó chỉ cần nhấn shift + fđể quay lại tìm kiếm trực tuyến, phát trực tuyến.

sed sẽ là một lựa chọn tốt hơn ( biên tập luồng )

tail -n0 -f <file> | sed -n '/search string/p'

và sau đó nếu bạn muốn lệnh tail thoát ra khi bạn tìm thấy một chuỗi cụ thể:

tail --pid=$(($BASHPID+1)) -n0 -f <file> | sed -n '/search string/{p; q}'

Rõ ràng là một bashism: $ BASHPID sẽ là id quá trình của lệnh tail. Lệnh sed tiếp theo sau đuôi trong đường ống, vì vậy id process process sẽ là $ BASHPID + 1.

Vâng, điều này thực sự sẽ làm việc tốt. Grepvà hầu hết các lệnh Unix hoạt động trên các luồng một dòng tại một thời điểm. Mỗi dòng ra khỏi đuôi sẽ được phân tích và chuyển qua nếu nó phù hợp.

Lệnh này hoạt động với tôi (Suse):

mail-srv:/var/log # tail -f /var/log/mail.info |grep --line-buffered LOGIN  >> logins_to_mail

thu thập thông tin đăng nhập vào dịch vụ thư

bạn chắc chắn sẽ không thành công với

tail -f /var/log/foo.log |grep --line-buffered string2search

khi bạn sử dụng "colortail" làm bí danh cho đuôi, vd. trong bash

alias tail='colortail -n 30'

bạn có thể kiểm tra theo bí danh nếu điều này xuất ra cái gì đó như bí danh đuôi là colortail -n 30. sau đó bạn có thủ phạm của bạn :)

Giải pháp:

xóa bí danh với

unalias tail

đảm bảo rằng bạn đang sử dụng nhị phân đuôi 'thực' bằng lệnh này

type tail

cái nào sẽ xuất ra cái gì đó như:

tail is /usr/bin/tail

và sau đó bạn có thể chạy lệnh của bạn

tail -f foo.log |grep --line-buffered something

Chúc may mắn.

Sử dụng awk (một tiện ích bash tuyệt vời khác) thay vì grep nơi bạn không có tùy chọn đệm dòng! Nó sẽ liên tục truyền dữ liệu của bạn từ đuôi.

đây là cách bạn sử dụng grep

tail -f <file> | grep pattern

Đây là cách bạn sẽ sử dụng awk

tail -f <file> | awk '/pattern/{print $0}'