Cách kết hợp wget và grep

Tôi có một url trang html và tôi muốn grep nó. Làm thế nào tôi có thể làm điều đó bằng cách wget someArgs | grep keyword?

Ý tưởng đầu tiên của tôi là wget -q -O - url | grep keyword, nhưng đầu ra của wget bỏ qua grep và phát sinh trên thiết bị đầu cuối ở dạng ban đầu.

Cách đơn giản nhất là sử dụng curlvới các tùy chọn -scho im lặng:

curl -s http://somepage.com | grep whatever

Giữ điều này xung quanh vì lợi ích của sự hoàn chỉnh.

Ví dụ của bạn nên thực sự hoạt động. Cú pháp là chính xác, và đây là một screencast mà tôi vừa thực hiện , với một GNU wget1.13.4 cũ.

wget -q some-url -O - | grep something

Vì vậy, giả sử mô hình của bạn là sai và grepsẽ chỉ xuất ra mọi thứ nó có.

Lỗi này đã được sửa trong phiên bản v1.12.1 trong một phiên bản khác . Hiện tại tôi sử dụng v1.15 và nó hoạt động như mong đợi.

Nếu bạn đang tìm kiếm grep hoặc tiêu đề đường ống, chúng là tiêu chuẩn hướng đến stderr vì vậy bạn cần chuyển hướng chúng. Ví dụ:

wget -O - http://example.com/page.php > /dev/null 2>&1 | grep HTTP

Việc wgetghi đầu ra của nó thành stderr không stdout, vì vậy người ta cần chuyển hướng stderrđến stdout:

wget -q -O - url 2&>1 | grep keyword