Grep trong một tệp nhật ký khổng lồ (> 14 GB) chỉ x GB cuối cùng?

Tôi cần tìm kiếm thứ gì đó trong một tệp nhật ký khổng lồ (hơn 14 GB). Tôi khá chắc chắn rằng nó trong 4 GB gần nhất.

Có cách nào để bỏ qua X GB đầu tiên để tăng tốc mọi thứ không?

Tôi đoán bạn có thể sử dụng đuôi để chỉ xuất ra 4GB cuối cùng hoặc lâu hơn bằng cách sử dụng công -ctắc

-c, --bytes = [+] NUM
xuất ra các byte cuối cùng; hoặc sử dụng -c + NUM để xuất bắt đầu bằng byte NUM của mỗi tệp

Bạn có thể cũng có thể làm một cái gì đó với dd bằng cách đặt bs=1và skiping vào phần bù bạn muốn bắt đầu, vd

dd if=file bs=1024k skip=12g | grep something

Tôi chỉ đăng bài này vì một số ý kiến ​​yêu cầu.

Những gì tôi kết thúc bằng cách sử dụng (tệp 15 GB). Nó làm việc rất nhanh và tiết kiệm cho tôi rất nhiều thời gian.

tail -f -c 14G file | grep something

Tôi cũng đã làm một điểm chuẩn rất thô sơ trên cùng một tập tin. Tôi đã thử nghiệm:

tập tin grep xxx
// mất mãi mãi (> 5 phút)

dd if = tập tin bs = 1 bỏ qua = 14G | grep xxx
// rất nhanh <1 giây

đuôi -c 14g | grep xxx
// khá nhanh <2 giây

những tailchỉ là một chút ngắn hơn.

NB: hậu tố được sử dụng gvà Gkhác nhau cho mỗi lệnh (Ubuntu 15.10)

Điều này không trả lời câu hỏi Tiêu đề, nhưng nó sẽ làm những gì bạn muốn làm. Sử dụng tac để đảo ngược tệp, sau đó sử dụng grep để tìm chuỗi của bạn. Nếu chuỗi của bạn chỉ xảy ra một lần hoặc một số lần đã biết trong tệp, thì hãy để nó chạy cho đến khi tìm thấy số lần xuất hiện đã biết. Bằng cách đó, nếu giả định của bạn về vị trí của tệp trong tệp không chính xác, nó vẫn sẽ tìm thấy nó. Nếu bạn muốn hạn chế nó, bạn có thể sử dụng đầu để làm điều đó. Lệnh head sẽ đi giữa tac và grep.

Vì vậy, lệnh trông giống như:

tac < logfile | grep myString