Tìm và thay thế văn bản trong một tệp bằng các lệnh

Làm cách nào tôi có thể tìm và thay thế các từ cụ thể trong tệp văn bản bằng dòng lệnh?

sed -i 's/original/new/g' file.txt

Giải trình:

• sed = Truyền phát trực tuyến
• -i = tại chỗ (nghĩa là lưu lại vào tệp gốc)

• Chuỗi lệnh:

  • s = lệnh thay thế
  • original = một biểu thức chính quy mô tả từ cần thay thế (hoặc chỉ chính từ đó)
  • new = văn bản để thay thế nó bằng
  • g = toàn cầu (nghĩa là thay thế tất cả và không chỉ là lần xuất hiện đầu tiên)

• file.txt = tên tệp

Có một số cách khác nhau để làm điều này. Một là sử dụng sedvà Regex. SED là một Trình chỉnh sửa luồng để lọc và chuyển đổi văn bản. Một ví dụ như sau:

marco@imacs-suck: ~$ echo "The slow brown unicorn jumped over the hyper sleeping dog" > orly
marco@imacs-suck: ~$ sed s/slow/quick/ < orly > yarly
marco@imacs-suck: ~$ cat yarly
The quick brown unicorn jumped over the hyper sleeping dog

Một cách khác có thể có ý nghĩa hơn < strinvà > stroutlà với đường ống!

marco@imacs-suck: ~$ cat yarly | sed s/unicorn/fox/ | sed s/hyper/lazy/ > nowai
marco@imacs-suck: ~$ cat nowai 
The quick brown fox jumped over the lazy sleeping dog

Có vô số cách để đạt được nó. Tùy thuộc vào mức độ phức tạp của những gì người ta cố gắng đạt được khi thay thế chuỗi và tùy thuộc vào công cụ mà người dùng quen thuộc, một số phương pháp có thể được ưa thích hơn các phương pháp khác.

Trong câu trả lời này, tôi đang sử dụng input.txttệp đơn giản , bạn có thể sử dụng để kiểm tra tất cả các ví dụ được cung cấp ở đây. Nội dung tập tin:

roses are red , violets are blue
This is an input.txt and this doesn't rhyme

BASH

Bash không thực sự có nghĩa là để xử lý văn bản, nhưng thay thế đơn giản có thể được thực hiện thông qua mở rộng tham số , đặc biệt ở đây chúng ta có thể sử dụng cấu trúc đơn giản ${parameter/old_string/new_string}.

#!/bin/bash
while IFS= read -r line
do
    case "$line" in
       *blue*) printf "%s\n" "${line/blue/azure}" ;;
       *) printf "%s\n" "$line" ;;
    esac
done < input.txt

Tập lệnh nhỏ này không thực hiện thay thế tại chỗ, nghĩa là bạn sẽ phải lưu văn bản mới vào tệp mới và loại bỏ tệp cũ hoặc mv new.txt old.txt

Lưu ý bên lề: nếu bạn tò mò về lý do tại sao while IFS= read -r ; do ... done < input.txtđược sử dụng, về cơ bản, cách đọc từng dòng tệp của shell. Xem cái này để tham khảo.

AWK

AWK, là một tiện ích xử lý văn bản, khá thích hợp cho nhiệm vụ đó. Nó có thể thay thế đơn giản và nâng cao hơn nhiều dựa trên các biểu thức thông thường . Nó cung cấp hai chức năng: sub()và gsub(). Cái đầu tiên chỉ thay thế lần xuất hiện đầu tiên, trong khi lần thứ hai - thay thế lần xuất hiện trong toàn bộ chuỗi. Chẳng hạn, nếu chúng ta có chuỗi one potato two potato, đây sẽ là kết quả:

$ echo "one potato two potato" | awk '{gsub(/potato/,"banana")}1'
one banana two banana

$ echo "one potato two potato" | awk '{sub(/potato/,"banana")}1'                                      
one banana two potato 

AWK có thể lấy một tệp đầu vào làm đối số, do đó, thực hiện cùng một việc với input.txt, sẽ dễ dàng:

awk '{sub(/blue/,"azure")}1' input.txt

Tùy thuộc vào phiên bản AWK mà bạn có, nó có thể có hoặc không có chỉnh sửa tại chỗ, do đó, thông lệ là lưu và thay thế văn bản mới. Ví dụ như một cái gì đó như thế này:

awk '{sub(/blue/,"azure")}1' input.txt > temp.txt && mv temp.txt input.txt

SED

Sed là một biên tập viên dòng. Nó cũng sử dụng các biểu thức thông thường, nhưng đối với các thay thế đơn giản, nó đủ để làm:

sed 's/blue/azure/' input.txt

Điều tốt về công cụ này là nó có chỉnh sửa tại chỗ, bạn có thể bật bằng -icờ.

Perl

Perl là một công cụ khác thường được sử dụng để xử lý văn bản, nhưng nó là ngôn ngữ có mục đích chung và được sử dụng trong mạng, quản trị hệ thống, ứng dụng máy tính để bàn và nhiều nơi khác. Nó đã mượn rất nhiều khái niệm / tính năng từ các ngôn ngữ khác như C, sed, awk và các ngôn ngữ khác. Thay thế đơn giản có thể được thực hiện như vậy:

perl -pe 's/blue/azure/' input.txt

Giống như sed, perl cũng có cờ -i.

Con trăn

Ngôn ngữ này rất linh hoạt và cũng được sử dụng trong rất nhiều ứng dụng. Nó có rất nhiều hàm để làm việc với các chuỗi, trong số đó là replace(), vì vậy nếu bạn có biến như thế var="Hello World", bạn có thể làmvar.replace("Hello","Good Morning")

Cách đơn giản để đọc tệp và thay thế chuỗi trong đó sẽ là như vậy:

python -c "import sys;lines=sys.stdin.read();print lines.replace('blue','azure')" < input.txt

Tuy nhiên, với Python, bạn cũng cần xuất ra tệp mới, bạn cũng có thể thực hiện từ bên trong tập lệnh. Ví dụ, đây là một đơn giản:

#!/usr/bin/env python
import sys
import os
import tempfile

tmp=tempfile.mkstemp()

with open(sys.argv[1]) as fd1, open(tmp[1],'w') as fd2:
    for line in fd1:
        line = line.replace('blue','azure')
        fd2.write(line)

os.rename(tmp[1],sys.argv[1])

Kịch bản lệnh này được gọi với input.txtđối số dòng lệnh. Lệnh chính xác để chạy tập lệnh python với đối số dòng lệnh sẽ là

 $ ./myscript.py input.txt

hoặc là

$ python ./myscript.py input.txt

Tất nhiên, đảm bảo rằng ./myscript.pytrong thư mục làm việc hiện tại của bạn và theo cách đầu tiên, hãy đảm bảo rằng nó được thiết lập có thể thực thi được vớichmod +x ./myscript.py

Python cũng có thể có các biểu thức chính quy, đặc biệt, có remô-đun, có re.sub()chức năng, có thể được sử dụng để thay thế nâng cao hơn.

Bạn có thể sử dụng Vim trong chế độ Ex:

ex -s -c '%s/OLD/NEW/g|x' file

1. % chọn tất cả các dòng

2. s thay thế

3. g thay thế tất cả các trường hợp trong mỗi dòng

4. x viết nếu thay đổi đã được thực hiện (họ có) và thoát

Thông qua lệnh gsub của awk,

awk '{gsub(/pattern/,"replacement")}' file

Thí dụ:

awk '{gsub(/1/,"0");}' file

Trong ví dụ trên, tất cả các số 1 được thay thế bằng 0 bất kể cột nằm ở đâu.

Nếu bạn muốn thay thế trên một cột cụ thể, thì hãy làm như thế này,

awk '{gsub(/pattern/,"replacement",column_number)}' file

Thí dụ:

awk '{gsub(/1/,"0",$1);}' file

Nó chỉ thay thế 1 bằng 0 trên cột đầu tiên.

Thông qua Perl,

$ echo 'foo' | perl -pe 's/foo/bar/g'
bar

sedlà s tream ed itor , trong đó bạn có thể sử dụng |(ống) để gửi con suối chuẩn (STDIN và STDOUT cụ thể) thông qua sedvà thay đổi chúng theo chương trình một cách nhanh chóng, làm cho nó một công cụ hữu ích trong truyền thống triết lý Unix; nhưng cũng có thể chỉnh sửa các tập tin trực tiếp bằng cách sử dụng -itham số được đề cập dưới đây.
Hãy xem xét những điều sau đây :

sed -i -e 's/few/asd/g' hello.txt

s/được sử dụng để s ubstitute biểu thức tìm thấy fewvới asd:

Số ít, những người dũng cảm.

---

Các asd, dũng cảm.

/glà viết tắt của "toàn cầu", có nghĩa là làm điều này cho toàn bộ dòng. Nếu bạn rời khỏi /g(với s/few/asd/, luôn cần có ba dấu gạch chéo bất kể điều gì) và fewxuất hiện hai lần trên cùng một dòng, chỉ lần đầu tiên fewđược thay đổi thành asd:

Số ít đàn ông, ít phụ nữ, dũng cảm.

---

Đàn ông asd, ít phụ nữ, dũng cảm.

Điều này hữu ích trong một số trường hợp, như thay đổi các ký tự đặc biệt ở đầu dòng (ví dụ, thay thế các ký hiệu lớn hơn một số người sử dụng để trích dẫn tài liệu trước đó trong các chủ đề email bằng một tab ngang trong khi để lại bất đẳng thức đại số được trích dẫn sau dòng không bị ảnh hưởng), nhưng trong ví dụ của bạn, nơi bạn xác định rằng bất cứ nơi nào few xảy ra nó nên được thay thế, hãy chắc chắn rằng bạn có điều đó /g.

Hai tùy chọn (cờ) sau đây được kết hợp thành một , -ie:

-itùy chọn được sử dụng để chỉnh sửa i n đặt trên các tập tin hello.txt.

-etùy chọn này cho biết lệnh e xpression / lệnh chạy, trong trường hợp này s/.

Lưu ý: Điều quan trọng là bạn sử dụng -i -eđể tìm kiếm / thay thế. Nếu bạn làm như vậy -ie, bạn tạo một bản sao lưu của mọi tệp có chữ 'e' được thêm vào.

Bạn có thể làm như thế này:

locate <part of filaname to locate> | xargs sed -i -e "s/<Old text>/<new text>/g" 

Ví dụ: để thay thế tất cả các lần xuất hiện [logdir ',' '] (không có []) bằng [logdir', os.getcwd ()] trong tất cả các tệp là kết quả của lệnh định vị, hãy:

ex1:

locate tensorboard/program.py | xargs sed -i -e "s/old_text/NewText/g"

ex2:

locate tensorboard/program.py | xargs sed -i -e "s/logdir', ''/logdir', os.getcwd()/g"

trong đó [tenorboard / program.py] là tệp để tìm kiếm