Có Windows tương đương với uniq Unix không?

Tôi cần xóa các dòng trùng lặp khỏi một tệp văn bản, nó đơn giản trong Linux bằng cách sử dụng

cat file.txt |sort | uniq

khi file.txt chứa

aaa
bbb
aaa
ccc

Nó sẽ xuất

aaa
bbb
ccc

Có tương đương Windows không? hoặc làm thế nào để làm điều này theo cách Windows?

Các Sort-Objectlệnh trong PowerShell hỗ trợ một -Uniquecông tắc mà làm điều tương tự như uniq:

Get-Content file.txt | Sort-Object -unique

Tất nhiên, do sự hiện diện của các bí danh trong PowerShell, bạn cũng có thể viết:

type file.txt | sort -unique

Ngoài ra, có một /uniquecông tắc không có giấy tờ trong sort.exeWindows 10, do đó, công cụ này sẽ hoạt động trong Dấu nhắc lệnh:

type file.txt | sort /unique

Có các cổng uniq hoạt động giống hệt với các phiên bản gnu / coreutils. Cá nhân tôi sử dụng biến thể từ GOW nhưng git cho windows có phiên bản mới hơn đáng kể . Không yêu cầu cygwin mặc dù sau này bạn cần tìm trong / usr / bin

Vì các gói này cũng chứa cat, sort và uniq - quy trình làm việc của bạn nên giống hệt nhau và cat file.txt |sort | uniqnên hoạt động chủ yếu giống hệt nhau

Bạn có thể dễ dàng viết lệnh "uniq" một mình. Lưu tệp này trong một tệp bó "uniq.cmd" ở đâu đó trong% path% của bạn có thể tìm thấy nó (ví dụ: trong% Windir% \ system32). Phiên bản này KHÔNG phân biệt chữ hoa chữ thường:

@echo off
setlocal DisableDelayedExpansion
set "prev="
for /f "delims=" %%F in ('sort %*') do (
    rem "set" needs to be done without delayed expansion
    set "line=%%F"
    setlocal EnableDelayedExpansion
        set "line=!line:<=<!"
        if /i "!prev!" neq "!line!" echo(!line!
        set "prev=!line!"
    endlocal
)

Điều này hoạt động với "uniq mytextfile" cũng như "cat mytextfile | uniq"; vì tất cả các đầu vào và đối số chỉ đơn giản được truyền cho lệnh sort.

Bắt đầu với Windows 7, bạn có thể muốn có một phiên bản phân biệt chữ hoa chữ thường (sự khác biệt giữa chuyển đổi không có giấy tờ "sort / C" và không "if / i"):

@echo off
setlocal DisableDelayedExpansion
set "prev="
for /f "delims=" %%F in ('sort /C %*') do (
    rem "set" needs to be done without delayed expansion
    set "line=%%F"
    setlocal EnableDelayedExpansion
        set "line=!line:<=<!"
        if "!prev!" neq "!line!" echo(!line!
        set "prev=!line!"
    endlocal
)

Ngoài câu trả lời của Yu Jiaao. Bạn có thể gọi sort-objectlệnh ghép ngắn powershell trong dấu nhắc lệnh như:

type file.txt | powershell -nop "$input | sort -unique"