Đếm các tệp trong thư mục Linux

Làm cách nào tôi có thể đếm đệ quy các tệp trong thư mục Linux?

Tôi đã tìm thấy cái này:

find DIR_NAME -type f ¦ wc -l

Nhưng khi tôi chạy nó sẽ trả về lỗi sau.

tìm: đường dẫn phải đi trước biểu thức:

Điều này sẽ làm việc:

find DIR_NAME -type f | wc -l

Giải trình:

• -type f chỉ bao gồm các tập tin.
• |( và không¦ ) chuyển hướng findđầu ra wctiêu chuẩn của lệnh sang đầu vào tiêu chuẩn của lệnh.
• wc(viết tắt của đếm từ) đếm các dòng mới, từ và byte trên đầu vào của nó ( tài liệu ).
• -l để chỉ đếm dòng mới.

Ghi chú:

• Thay thế DIR_NAMEbằng .để thực thi lệnh trong thư mục hiện tại.
• Bạn cũng có thể loại bỏ các -type fthư mục để bao gồm (và liên kết tượng trưng) trong số đếm.
• Có thể lệnh này sẽ vượt qua nếu tên tệp có thể chứa các ký tự dòng mới.

Giải thích tại sao ví dụ của bạn không hoạt động:

Trong lệnh bạn đã hiển thị, bạn không sử dụng "ống" ( |) để kết nối hai lệnh, nhưng thanh bị hỏng ( ¦) mà trình bao không nhận ra đó là lệnh hoặc thứ gì đó tương tự. Đó là lý do tại sao bạn nhận được thông báo lỗi đó.

Đối với thư mục hiện tại:

find -type f | wc -l

Nếu bạn muốn phân tích có bao nhiêu tệp trong mỗi thư mục theo thư mục hiện tại của bạn:

for i in */ .*/ ; do 
    echo -n $i": " ; 
    (find "$i" -type f | wc -l) ; 
done

Điều đó có thể đi tất cả trên một dòng, tất nhiên. Dấu ngoặc đơn làm rõ mà đầu ra wc -lđược cho là đang xem ( find $i -type ftrong trường hợp này).

Bạn có thể dùng

$ tree

Sau khi cài đặt gói cây với

$ sudo apt-get install tree

(trên máy Debian / Mint / Ubuntu Linux).

Lệnh không chỉ hiển thị số lượng tập tin mà còn cả số lượng thư mục riêng biệt. Tùy chọn -L có thể được sử dụng để chỉ định mức hiển thị tối đa (theo mặc định, là độ sâu tối đa của cây thư mục).

Các tập tin ẩn cũng có thể được bao gồm bằng cách cung cấp -atùy chọn.

Trên máy tính của tôi, rsyncnhanh hơn một chút so với find | wc -lcâu trả lời được chấp nhận:

$ rsync --stats --dry-run -ax /path/to/dir /tmp

Number of files: 173076
Number of files transferred: 150481
Total file size: 8414946241 bytes
Total transferred file size: 8414932602 bytes

Dòng thứ hai có số lượng tệp, 150.481 trong ví dụ trên. Là một phần thưởng, bạn cũng có được tổng kích thước (tính bằng byte).

Nhận xét:

• dòng đầu tiên là một số tập tin, thư mục, symlink, v.v ... tất cả cùng nhau, đó là lý do tại sao nó lớn hơn dòng thứ hai.
• các --dry-run(hoặc -ntùy chọn cho ngắn) là rất quan trọng để không thực sự chuyển các tập tin!
• Tôi đã sử dụng -xtùy chọn "không vượt qua ranh giới hệ thống tập tin", có nghĩa là nếu bạn thực thi nó /và bạn có các ổ cứng gắn ngoài, nó sẽ chỉ đếm các tệp trên phân vùng gốc.

Vì tên tệp trong UNIX có thể chứa dòng mới (vâng, dòng mới), wc -lcó thể đếm quá nhiều tệp. Tôi sẽ in một dấu chấm cho mỗi tệp và sau đó đếm số chấm:

find DIR_NAME -type f -printf "." | wc -c

Kết hợp một số câu trả lời ở đây với nhau, giải pháp hữu ích nhất dường như là:

find . -maxdepth 1 -type d -print0 |
xargs -0 -I {} sh -c 'echo -e $(find "{}" -printf "\n" | wc -l) "{}"' |
sort -n

Nó có thể xử lý những thứ kỳ lạ như tên tệp bao gồm dấu ngoặc đơn và thậm chí cả dòng mới. Nó cũng sắp xếp đầu ra theo số lượng tập tin.

Bạn có thể tăng số lượng sau -maxdepthđể có được thư mục phụ được tính quá. Hãy nhớ rằng điều này có thể có khả năng mất nhiều thời gian, đặc biệt nếu bạn có cấu trúc thư mục được lồng cao kết hợp với -maxdepthsố lượng cao .

Nếu bạn muốn biết có bao nhiêu tệp và thư mục con tồn tại từ thư mục làm việc hiện tại, bạn có thể sử dụng lớp lót này

find . -maxdepth 1 -type d -print0 | xargs -0 -I {} sh -c 'echo -e $(find {} | wc -l) {}' | sort -n

Điều này sẽ hoạt động trong hương vị GNU và chỉ cần bỏ qua -e từ lệnh echo cho BSD linux (ví dụ OSX).

Nếu bạn muốn tránh các trường hợp lỗi, không cho phép wc -lxem các tệp có dòng mới (sẽ được tính là 2+ tệp)

ví dụ: Hãy xem xét trường hợp chúng ta có một tệp có một ký tự EOL duy nhất trong đó

> mkdir emptydir && cd emptydir
> touch $'file with EOL(\n) character in it'
> find -type f
./file with EOL(?) character in it
> find -type f | wc -l
2

Vì ít nhất gnu wcdường như không có tùy chọn để đọc / đếm danh sách kết thúc null (ngoại trừ từ tệp), giải pháp đơn giản nhất là không truyền tên tệp, nhưng đầu ra tĩnh mỗi khi tìm thấy tệp, ví dụ: trong cùng thư mục như trên

> find -type f -exec printf '\n' \; | wc -l
1

Hoặc nếu bạn findhỗ trợ nó

> find -type f -printf '\n' | wc -l
1 

Bạn có thể sử dụng lệnh ncdu. Nó sẽ đệ quy đếm xem có bao nhiêu tệp trong thư mục Linux. Dưới đây là một ví dụ về đầu ra:

Nó có một thanh tiến trình, thuận tiện nếu bạn có nhiều tệp:

Để cài đặt nó trên Ubuntu:

sudo apt-get install -y ncdu

Điểm chuẩn: Tôi đã sử dụng https://archive.org/details/cv_corpus_v1.tar (380390 tệp, 11 GB) làm thư mục mà người ta phải đếm số lượng tệp.

• find . -type f | wc -l: khoảng 1m20 để hoàn thành
• ncdu: khoảng 1m20 để hoàn thành

tree $DIR_PATH | tail -1

Đầu ra mẫu:

5309 thư mục, 2122 tệp

Để xác định có bao nhiêu tệp trong thư mục hiện tại, hãy đặt vào ls -1 | wc -l. Điều này sử dụng wcđể thực hiện đếm số lượng dòng (-l)trong đầu ra của ls -1. Nó không tính dotfiles. Xin lưu ý rằng ls -l(đó là "L" chứ không phải là "1" như trong các ví dụ trước) mà tôi đã sử dụng trong các phiên bản trước của HOWTO này sẽ thực sự cung cấp cho bạn số lượng tệp lớn hơn số lượng thực tế. Cảm ơn Kam Nejad cho điểm này.

Nếu bạn chỉ muốn đếm các tệp và KHÔNG bao gồm các liên kết tượng trưng (chỉ là một ví dụ về những gì bạn có thể làm), bạn có thể sử dụng ls -l | grep -v ^l | wc -l(đó là "L" không phải là "1" lần này, chúng tôi muốn có một danh sách "dài" ở đây) . grepkiểm tra bất kỳ dòng nào bắt đầu bằng "l" (chỉ ra một liên kết) và loại bỏ dòng đó (-v).

Tốc độ tương đối: "ls -1 / usr / bin / | wc -l" mất khoảng 1,03 giây trên 486SX25 không tải (/ usr / bin / trên máy này có 355 tệp). " ls -l /usr/bin/ | grep -v ^l | wc -l" mất khoảng 1,19 giây.

Nguồn: http://www.tldp.org/HOWTO/Bash-Prompt-HOWTO/x700.html

Nếu những gì bạn cần là đếm một loại tệp cụ thể theo cách đệ quy , bạn có thể làm:

find YOUR_PATH -name '*.html' -type f | wc -l 

-l chỉ để hiển thị số lượng dòng trong đầu ra.

Với bash:

Tạo một mảng các mục với () và lấy số đếm bằng #.

FILES=(./*); echo ${#FILES[@]}

Ok điều đó không tính đệ quy các tập tin nhưng tôi muốn hiển thị tùy chọn đơn giản trước tiên. Một trường hợp sử dụng phổ biến có thể là để tạo các bản sao lưu cuộn qua của một tệp. Điều này sẽ tạo logfile.1, logfile.2, logfile.3, v.v.

CNT=(./logfile*); mv logfile logfile.${#CNT[@]}

Số đệ quy với bash 4+ globstarđược bật (như được đề cập bởi @tripleee)

FILES=(**/*); echo ${#FILES[@]}

Để có được số lượng tệp đệ quy, chúng ta vẫn có thể sử dụng find theo cùng một cách.

FILES=(`find . -type f`); echo ${#FILES[@]}

Đối với các thư mục có khoảng trắng trong tên ... (dựa trên các câu trả lời khác nhau ở trên) - in đệ quy tên thư mục với số lượng tệp trong:

find . -mindepth 1 -type d -print0 | while IFS= read -r -d '' i ; do echo -n $i": " ; ls -p "$i" | grep -v / | wc -l ; done

Ví dụ (được định dạng để dễ đọc):

pwd
  /mnt/Vancouver/Programming/scripts/claws/corpus

ls -l
  total 8
  drwxr-xr-x 2 victoria victoria 4096 Mar 28 15:02 'Catabolism - Autophagy; Phagosomes; Mitophagy'
  drwxr-xr-x 3 victoria victoria 4096 Mar 29 16:04 'Catabolism - Lysosomes'

ls 'Catabolism - Autophagy; Phagosomes; Mitophagy'/ | wc -l
  138

## 2 dir (one with 28 files; other with 1 file):
ls 'Catabolism - Lysosomes'/ | wc -l
  29

Cấu trúc thư mục được hiển thị tốt hơn bằng cách sử dụng tree:

tree -L 3 -F .
  .
  ├── Catabolism - Autophagy; Phagosomes; Mitophagy/
  │   ├── 1
  │   ├── 10
  │   ├── [ ... SNIP! (138 files, total) ... ]
  │   ├── 98
  │   └── 99
  └── Catabolism - Lysosomes/
      ├── 1
      ├── 10
      ├── [ ... SNIP! (28 files, total) ... ]
      ├── 8
      ├── 9
      └── aaa/
          └── bbb

  3 directories, 167 files

man find | grep mindep
  -mindepth levels
    Do not apply any tests or actions at levels less than levels
    (a non-negative integer).  -mindepth 1 means process all files
    except the starting-points.

ls -p | grep -v /(được sử dụng bên dưới) là từ câu trả lời 2 tại /unix/48492/list-only-THER-files-but-not-directories-in-civerse-directory

find . -mindepth 1 -type d -print0 | while IFS= read -r -d '' i ; do echo -n $i": " ; ls -p "$i" | grep -v / | wc -l ; done
./Catabolism - Autophagy; Phagosomes; Mitophagy: 138
./Catabolism - Lysosomes: 28
./Catabolism - Lysosomes/aaa: 1

Ứng dụng: Tôi muốn tìm số lượng tệp tối đa trong số hàng trăm thư mục (tất cả độ sâu = 1) [đầu ra bên dưới một lần nữa được định dạng để dễ đọc]:

date; pwd
    Fri Mar 29 20:08:08 PDT 2019
    /home/victoria/Mail/2_RESEARCH - NEWS

time find . -mindepth 1 -type d -print0 | while IFS= read -r -d '' i ; do echo -n $i": " ; ls -p "$i" | grep -v / | wc -l ; done > ../../aaa
    0:00.03

[victoria@victoria 2_RESEARCH - NEWS]$ head -n5 ../../aaa
    ./RNA - Exosomes: 26
    ./Cellular Signaling - Receptors: 213
    ./Catabolism - Autophagy; Phagosomes; Mitophagy: 138
    ./Stress - Physiological, Cellular - General: 261
    ./Ancient DNA; Ancient Protein: 34

[victoria@victoria 2_RESEARCH - NEWS]$ sed -r 's/(^.*): ([0-9]{1,8}$)/\2: \1/g' ../../aaa | sort -V | (head; echo ''; tail)

    0: ./Genomics - Gene Drive
    1: ./Causality; Causal Relationships
    1: ./Cloning
    1: ./GenMAPP 2
    1: ./Pathway Interaction Database
    1: ./Wasps
    2: ./Cellular Signaling - Ras-MAPK Pathway
    2: ./Cell Death - Ferroptosis
    2: ./Diet - Apples
    2: ./Environment - Waste Management

    988: ./Genomics - PPM (Personalized & Precision Medicine)
    1113: ./Microbes - Pathogens, Parasites
    1418: ./Health - Female
    1420: ./Immunity, Inflammation - General
    1522: ./Science, Research - Miscellaneous
    1797: ./Genomics
    1910: ./Neuroscience, Neurobiology
    2740: ./Genomics - Functional
    3943: ./Cancer
    4375: ./Health - Disease 

sort -Vlà một loại tự nhiên. ... Vì vậy, số lượng tệp tối đa của tôi trong bất kỳ thư mục nào (Claws Mail) là 4375 tệp. Nếu tôi để lại pad ( https://stackoverflow.com/a/55409116/1904943 ) những tên tệp đó - chúng đều được đặt tên bằng số, bắt đầu bằng 1, trong mỗi thư mục - và đệm đến 5 chữ số, tôi sẽ ổn .

Phụ lục

Tìm tổng số tệp, thư mục con trong một thư mục.

$ date; pwd
Tue 14 May 2019 04:08:31 PM PDT
/home/victoria/Mail/2_RESEARCH - NEWS

$ ls | head; echo; ls | tail
Acoustics
Ageing
Ageing - Calorie (Dietary) Restriction
Ageing - Senescence
Agriculture, Aquaculture, Fisheries
Ancient DNA; Ancient Protein
Anthropology, Archaeology
Ants
Archaeology
ARO-Relevant Literature, News

Transcriptome - CAGE
Transcriptome - FISSEQ
Transcriptome - RNA-seq
Translational Science, Medicine
Transposons
USACEHR-Relevant Literature
Vaccines
Vision, Eyes, Sight
Wasps
Women in Science, Medicine

$ find . -type f | wc -l
70214    ## files

$ find . -type d | wc -l
417      ## subdirectories

Tôi đã viết ffcnt để tăng tốc độ đếm tệp đệ quy trong các trường hợp cụ thể: đĩa quay và hệ thống tệp hỗ trợ ánh xạ phạm vi.

Nó có thể là một thứ tự cường độ nhanh hơn lshoặc findtiếp cận dựa trên, nhưng YMMV.

Có rất nhiều câu trả lời đúng ở đây. Đây là một cái khác!

find . -type f | sort | uniq -w 10 -c

nơi .là thư mục để tìm trong và 10là số ký tự mà theo đó để nhóm các thư mục.

tìm -type f | wc -l

HOẶC (Nếu thư mục là thư mục hiện tại)

tìm thấy . -type f | wc -l

Điều này sẽ hoạt động hoàn toàn tốt. Đơn giản ngắn. Nếu bạn muốn đếm số lượng tập tin có trong một thư mục.

ls | wc -l

Cách tiếp cận thay thế này với tính năng lọc định dạng sẽ đếm tất cả các mô-đun hạt nhân có sẵn:

ls -l /boot/grub/*.mod | wc -l

ls -l | grep -e -x -e -dr | wc -l 

1. danh sách dài
2. tập tin lọc và thư mục
3. đếm dòng đã lọc