Làm cách nào để grep đệ quy thông qua các tệp .gz?

Tôi đang sử dụng tập lệnh để thường xuyên tải xuống các tin nhắn gmail của mình để nén .eml thô thành các tệp .gz. Kịch bản tạo một thư mục cho mỗi ngày, sau đó nén mọi tin nhắn vào tệp riêng của nó.

Tôi muốn một cách để tìm kiếm thông qua kho lưu trữ này cho một "chuỗi."

Grep một mình không xuất hiện để làm điều đó. Tôi cũng đã thử SearchMonkey.

Nếu bạn muốn grep đệ quy trong tất cả các tệp .eml.gz trong thư mục hiện tại, bạn có thể sử dụng:

find . -name \*.eml.gz -print0 | xargs -0 zgrep "STRING"

Bạn phải thoát cái đầu tiên *để cái vỏ không diễn giải nó. -print0bảo tìm in một ký tự null sau mỗi tệp mà nó tìm thấy; xargs -0đọc từ đầu vào tiêu chuẩn và chạy lệnh sau nó cho mỗi tệp; zgrephoạt động như thế grep, nhưng giải nén tập tin trước.

Có rất nhiều nhầm lẫn ở đây vì không chỉ có một zgrep. Tôi có hai phiên bản trên hệ thống của mình, zgreptừ gzipvà zgreptừ zutils. Các cựu chỉ là một kịch bản bao bọc mà gọi gzip -cdfq. Nó không hỗ trợ -r, --recursivechuyển đổi. ¹
Sau đó là một c++chương trình và nó hỗ trợ các -r, --recursivetùy chọn.
Chạy zgrep --version | head -n 1sẽ tiết lộ cái nào (nếu có) trong số chúng là mặc định:

zgrep (gzip) 1.6

là tập lệnh bao bọc,

zgrep (zutils) 1.3

là cppthực thi.
Nếu bạn có cái sau bạn có thể chạy:

zgrep 'pattern' -r --format=gz /path/to/dir

Dù sao, như đã đề xuất, find+ zgrepsẽ hoạt động tốt như nhau với cả hai phiên bản zgrep:

find /path/to/dir -name '*.gz' -exec zgrep -- 'pattern' {} +

Nếu zgrepbị thiếu trong hệ thống của bạn (rất khó xảy ra), bạn có thể thử với:

find /path/to/dir -name '*.gz' -exec sh -c 'gzip -cd "$0" | grep -- "pattern"' {} \;

nhưng có một nhược điểm lớn: bạn sẽ không biết các trận đấu diễn ra ở đâu vì không có tên tệp nào được đặt trước các dòng khớp.

^{1: bởi vì nó sẽ có vấn đề}

aglà một biến thể của grep, với một số tính năng bổ sung tốt đẹp.

• có tùy chọn -z cho các tệp nén,
• có nhiều tính năng ack.
• nó nhanh

Vì thế:

ag -r -z your-pattern-goes-here   folder

Nếu không được cài đặt,

apt-get install silversearcher-ag   (debian and friends)
yum install the_silver_searcher     (fedora)
brew install the_silver_searcher    (mac)

Đệ quy một mình là dễ dàng:

   -r, --recursive
          Read all files  under  each  directory,  recursively,  following
          symbolic  links  only  if they are on the command line.  This is
          equivalent to the -d recurse option.

   -R, --dereference-recursive
          Read all files under each directory,  recursively.   Follow  all
          symbolic links, unlike -r.

Tuy nhiên, đối với các tệp nén, bạn cần một cái gì đó như:

shopt globstar 
for file in /path/to/directory/**/*gz; do zcat ""$file" | grep pattern; done

path/to/directory nên là thư mục mẹ chứa các thư mục con cho mỗi ngày.

zgreplà câu trả lời rõ ràng nhưng thật không may, nó không hỗ trợ -rcờ. Từ man zgrep:

Các tùy chọn grep này sẽ khiến zgrep chấm dứt với mã lỗi: (- [d rR zZ] | --di * | --exc * | --inc * | --rec * | --nu *).

Nếu hệ thống của bạn có zgrep, bạn có thể chỉ cần

zgrep -irs your-pattern-goes-here the-folder-to-search-goes-here/

Nếu hệ thống của bạn không có zgrep, bạn có thể sử dụng lệnh find để chạy zcat và grep đối với từng tệp như sau:

find the-folder-to-search-goes-here/ -name '*.gz' \ -exec sh -c 'echo "Searching {}" ; zcat "{}" | grep your-pattern-goes-here ' \;

xzgrep -l "chuỗi" ./*/*.eml.gz

xzgrep là một dẫn xuất của các tiện ích zgrep (ít hơn / bin / xzgrep)

Từ trang Man:

xzgrep gọi grep (1) trên các tệp có thể không nén hoặc nén bằng xz (1), lzma (1), gzip (1), bzip2 (1) hoặc lzop (1). Tất cả các tùy chọn được chỉ định được chuyển trực tiếp đến grep (1).

-l in tên tập tin phù hợp

-R cho phép đệ quy sẽ không hoạt động vì nó bị cấm đặc biệt trong tập lệnh, tuy nhiên việc tạo lớp vỏ đơn giản sẽ đưa chúng ta đến đó

./*/*.eml.gz

từ một đường dẫn tương đối trong đó