So sánh hai danh sách URL và in các URL mới được thêm vào một tệp mới

Ban đầu, tôi đang tạo hai tệp chứa danh sách URL, tôi sẽ đề cập đến chúng như oldvà new. Tôi muốn so sánh hai tệp và nếu có bất kỳ URL nào trong newtệp không có trong oldtệp, tôi muốn các tệp này được hiển thị trong một extra_urlstệp.

Bây giờ, tôi đã đọc một số thứ về việc sử dụng difflệnh nhưng từ những gì tôi có thể nói, điều này cũng phân tích thứ tự của thông tin. Tôi không muốn đơn hàng có bất kỳ ảnh hưởng nào đến đầu ra. Tôi chỉ muốn các URL bổ sung newđược in vào extra_urlstệp, bất kể chúng được đặt theo thứ tự nào trong hai tệp còn lại.

Tôi có thể làm cái này như thế nào?

Bạn có thể sử dụng commlệnh để so sánh hai tệp và hiển thị có chọn lọc các dòng duy nhất với một hoặc một hoặc các dòng chung. Nó đòi hỏi các đầu vào phải được sắp xếp, nhưng bạn có thể sắp xếp chúng một cách nhanh chóng, bằng cách sử dụng thay thế quá trình.

comm -13 <(sort old.txt) <(sort new.txt)

Nếu bạn đang sử dụng một phiên bản bashkhông hỗ trợ thay thế quá trình, nó có thể được mô phỏng bằng các đường ống có tên. Một ví dụ được hiển thị trong Wikipedia .

Tôi sẽ chỉ sử dụng grep:

grep -vFf old new > extra_urls

Giải trình

• -f: bảo grepđọc các mẫu tìm kiếm của nó từ một tệp. Trong trường hợp này , old.
• -v : bảo grep đảo ngược trận đấu, chỉ in các dòng không khớp.
• -F: bảo grep diễn giải các mẫu tìm kiếm của nó dưới dạng chuỗi, không phải biểu thức chính quy. Bằng cách đó, .URL sẽ được khớp theo nghĩa đen.

Kết hợp lại, chúng tạo grepra bất kỳ dòng nào trong newđó không có trong old. Thứ tự của các URL trong tệp là không liên quan.

Vì thứ tự là quan trọng đối với bạn, sử dụng awk

awk '
    NR == FNR {old[$1]=1; next}
    !($1 in old)
' old new > extra

Tôi có một ứng dụng gọi là meld. Nó cho phép xem hai (hoặc ba) tệp, cạnh nhau, cho thấy sự khác biệt và cho phép sao chép có chọn lọc từ cái này sang cái kia hoặc xóa các ký tự.

Meld có thể được cài đặt từ một thiết bị đầu cuối với

sudo apt-get install meld