Làm cách nào tôi có thể xóa các bản sao trong .bash_history, giữ trật tự?

Tôi thực sự thích sử dụng control+rđể tìm kiếm đệ quy lịch sử lệnh của tôi. Tôi đã tìm thấy một vài lựa chọn tốt mà tôi muốn sử dụng với nó:

# ignore duplicate commands, ignore commands starting with a space
export HISTCONTROL=erasedups:ignorespace

# keep the last 5000 entries
export HISTSIZE=5000

# append to the history instead of overwriting (good for multiple connections)
shopt -s histappend

Vấn đề duy nhất đối với tôi là erasedupschỉ xóa các bản sao liên tiếp - do đó với chuỗi lệnh này:

ls
cd ~
ls

Các lslệnh thực sự sẽ được ghi lại hai lần. Tôi đã nghĩ về việc chạy định kỳ w / cron:

cat .bash_history | sort | uniq > temp.txt
mv temp.txt .bash_history

Điều này sẽ đạt được loại bỏ các bản sao, nhưng tiếc là thứ tự sẽ không được bảo tồn. Nếu tôi không sorttập tin trước, tôi không tin uniqcó thể hoạt động bình thường.

Làm cách nào tôi có thể xóa các bản sao trong .bash_history, giữ trật tự?

Tín dụng thêm:

Có bất kỳ vấn đề với việc ghi đè .bash_historytập tin thông qua một tập lệnh? Ví dụ: nếu bạn xóa tệp nhật ký apache, tôi nghĩ rằng bạn cần gửi tín hiệu nohup / reset killđể nó xóa kết nối của nó với tệp. Nếu đó là trường hợp của .bash_historytệp, có lẽ bằng cách nào đó tôi có thể sử dụng psđể kiểm tra và đảm bảo không có phiên nào được kết nối trước khi tập lệnh lọc được chạy?

Sắp xếp lịch sử

Lệnh này hoạt động như thế nào sort|uniq, nhưng giữ cho các dòng ở đúng vị trí

nl|sort -k 2|uniq -f 1|sort -n|cut -f 2

Về cơ bản, chuẩn bị cho mỗi dòng số của nó. Sau khi sort|uniq-ing, tất cả các dòng được sắp xếp lại theo thứ tự ban đầu của chúng (sử dụng trường số dòng) và trường số dòng được xóa khỏi các dòng.

Giải pháp này có một lỗ hổng là không xác định được đại diện nào của một lớp các đường bằng nhau sẽ làm cho nó ở đầu ra và do đó vị trí của nó trong đầu ra cuối cùng không được xác định. Tuy nhiên, nếu chọn đại diện mới nhất, bạn có thể sortnhập dữ liệu bằng khóa thứ hai:

nl|sort -k2 -k 1,1nr|uniq -f1|sort -n|cut -f2

Quản lý .bash_history

Để đọc lại và viết lại lịch sử, bạn có thể sử dụng history -avà history -wtương ứng.

Vì vậy, tôi đã tìm kiếm điều tương tự chính xác sau khi bị làm phiền bởi các bản sao và thấy rằng nếu tôi chỉnh sửa ~ / .bash_profile (Mac) của mình bằng:

export HISTCONTROL=ignoreboth:erasedups

Nó thực hiện chính xác những gì bạn muốn, nó chỉ giữ lệnh mới nhất. ignoreboththực sự giống như làm ignorespace:ignoredupsvà điều đó cùng với erasedupsviệc hoàn thành công việc.

Ít nhất trên thiết bị đầu cuối Mac của tôi với bash công việc này hoàn hảo. Tìm thấy nó ở đây trên Askubfox.com .

Tìm thấy giải pháp này trong tự nhiên và đã thử nghiệm:

awk '!x[$0]++'

Lần đầu tiên nhìn thấy giá trị cụ thể của một dòng ($ 0), giá trị của x [$ 0] bằng không.
Giá trị của 0 được đảo ngược với !và trở thành một.
Một câu lệnh đánh giá một nguyên nhân gây ra hành động mặc định, đó là in.

Do đó, lần đầu tiên một cụ thể $0được nhìn thấy, nó được in.

Mỗi lần tiếp theo (lặp lại) giá trị của x[$0]đã được tăng lên,
giá trị bị phủ định của nó là 0 và một câu lệnh ước tính bằng 0 không được in.

Để giữ giá trị lặp lại cuối cùng, đảo ngược lịch sử và sử dụng cùng một awk:

awk '!x[$0]++' ~/.bash_history                 # keep the first value repeated.

tac ~/.bash_history | awk '!x[$0]++' | tac     # keep the last.

Mở rộng câu trả lời của Clayton:

tac $HISTFILE | awk '!x[$0]++' | tac | sponge $HISTFILE

tacđảo ngược tệp, đảm bảo bạn đã cài đặt moreutilsđể bạn có spongesẵn, nếu không hãy sử dụng tệp tạm thời.

Chúng sẽ giữ các dòng trùng lặp cuối cùng:

ruby -i -e 'puts readlines.reverse.uniq.reverse' ~/.bash_history
tac ~/.bash_history | awk '!a[$0]++' | tac > t; mv t ~/.bash_history

Đây là một bài viết cũ, nhưng là một vấn đề vĩnh viễn cho người dùng muốn mở nhiều thiết bị đầu cuối và có lịch sử được đồng bộ hóa giữa các cửa sổ, nhưng không bị trùng lặp.

Giải pháp của tôi trong .bashrc:

shopt -s histappend
export HISTCONTROL=ignoreboth:erasedups
export PROMPT_COMMAND="history -n; history -w; history -c; history -r"
tac "$HISTFILE" | awk '!x[$0]++' > /tmp/tmpfile  &&
                tac /tmp/tmpfile > "$HISTFILE"
rm /tmp/tmpfile

• tùy chọn histappend thêm lịch sử của bộ đệm vào cuối tệp lịch sử ($ HISTFILE)
• ignboth và erasingup ngăn các mục trùng lặp được lưu trong $ HISTFILE
• Lệnh prompt cập nhật bộ đệm lịch sử
  • history -n đọc tất cả các dòng từ $ HISTFILE có thể đã xảy ra ở một thiết bị đầu cuối khác kể từ lần trả hàng cuối cùng
  • history -w ghi bộ đệm được cập nhật vào $ HISTFILE
  • history -c lau bộ đệm để không xảy ra sự trùng lặp
  • history -r đọc lại $ HISTFILE, thêm vào bộ đệm trống
• tập lệnh awk lưu trữ lần xuất hiện đầu tiên của mỗi dòng mà nó gặp. tacđảo ngược nó, và sau đó đảo ngược nó để có thể được lưu với các lệnh gần đây nhất vẫn còn gần đây nhất trong lịch sử
• tập tin / tmp

Mỗi khi bạn mở một shell mới, lịch sử sẽ bị xóa tất cả các bản sao và mỗi lần bạn nhấn Enterphím trong một cửa sổ shell / terminal khác nhau, nó sẽ cập nhật lịch sử này từ tệp.

Để đơn phương ghi lại mọi lệnh mới là khó khăn. Đầu tiên bạn cần thêm ~/.profilehoặc tương tự:

HISTCONTROL=erasedups
PROMPT_COMMAND='history -w'

Sau đó, bạn cần thêm vào ~/.bash_logout:

history -a
history -w