rsync loại trừ theo .gitignore & .hgignore & svn: bỏ qua như --filter =: C

Rsync bao gồm một tùy chọn tiện lợi --cvs-excludeđể "bỏ qua các tệp theo cách giống như CVS", nhưng CVS đã lỗi thời trong nhiều năm. Có cách nào để làm cho nó cũng loại trừ các tệp sẽ bị bỏ qua bởi các hệ thống kiểm soát phiên bản hiện đại (Git, Mercurial, Subversion) không?

Ví dụ: tôi có rất nhiều dự án Maven được kiểm tra từ GitHub. Thông thường, chúng bao gồm .gitignoreít nhất một danh sách target, thư mục xây dựng Maven mặc định (có thể có ở cấp cao nhất hoặc trong các mô-đun con). Vì nội dung của các thư mục này hoàn toàn dùng một lần và chúng có thể lớn hơn nhiều so với mã nguồn, tôi muốn loại trừ chúng khi sử dụng rsync để sao lưu.

Tất nhiên tôi có thể rõ ràng --exclude=target/nhưng điều đó sẽ vô tình ngăn chặn các thư mục không liên quan chỉ tình cờ được đặt tên targetvà không được phép bỏ qua.

Và tôi có thể cung cấp một danh sách đầy đủ các đường dẫn tuyệt đối cho tất cả các tên tập tin và các mẫu nêu tại bất kỳ .gitignore, .hgignorehoặc svn:ignoretài sản trên đĩa của tôi, nhưng đây sẽ là một danh sách rất lớn mà có thể có được sản xuất bởi một số loại kịch bản.

Vì rsync không có hỗ trợ tích hợp cho các kiểm tra VCS ngoài CVS, có mẹo hay nào để cung cấp cho nó các mẫu bỏ qua của họ không? Hoặc một số loại hệ thống gọi lại, theo đó một kịch bản người dùng có thể được hỏi liệu một tệp / thư mục nhất định có nên được đưa vào hay không?

Cập nhật : --filter=':- .gitignore'theo đề xuất của LordJavac dường như hoạt động tốt cho Git cũng như --filter=:Ccho CVS, ít nhất là trên các ví dụ tôi đã tìm thấy, mặc dù không rõ liệu cú pháp có khớp chính xác hay không. --filter=':- .hgignore'không hoạt động rất tốt cho Mercurial; ví dụ: một .hgignorechứa một dòng như ^target$(tương đương Mercurial của Git /target/) không được rsync nhận dạng là một biểu thức chính quy. Và dường như không có gì hoạt động đối với Subversion, mà bạn sẽ phải phân tích cú pháp .svn/dir-prop-basecho một bản sao làm việc 1.6 hoặc cũ hơn, và thất vọng đối với bản sao làm việc 1.7 hoặc mới hơn.

Như đã đề cập bởi luksan, bạn có thể làm điều này với --filternút chuyển sang rsync. Tôi đã đạt được điều này với --filter=':- .gitignore'(có một khoảng trắng trước ".gitignore") cho biết rsyncthực hiện hợp nhất thư mục với .gitignorecác tệp và yêu cầu chúng loại trừ theo quy tắc của git. Bạn cũng có thể muốn thêm tệp bỏ qua chung của mình, nếu bạn có. Để dễ sử dụng hơn, tôi đã tạo một bí danh rsyncbao gồm bộ lọc.

Bạn có thể sử dụng git ls-filesđể xây dựng danh sách các tệp bị loại trừ bởi các .gitignoretệp của kho lưu trữ . https://git-scm.com/docs/git-ls-files

Các tùy chọn:

• --exclude-standardXem xét tất cả .gitignorecác tệp.
• -o Đừng bỏ qua những thay đổi không theo giai đoạn.
• -i Chỉ xuất các tệp bị bỏ qua.
• --directory Chỉ xuất đường dẫn thư mục nếu toàn bộ thư mục bị bỏ qua.

Điều duy nhất tôi bỏ qua là .git.

rsync -azP --exclude=.git --exclude=`git -C <SRC> ls-files --exclude-standard -oi --directory` <SRC> <DEST>

làm thế nào về rsync --exclude-from='path/.gitignore' --exclude-from='path/myignore.txt' source destination?
Nó đã làm việc cho tôi.
Tôi tin rằng bạn cũng có thể có nhiều --exclude-fromthông số hơn .

Giải pháp năm 2018 được xác nhận

rsync -ah --delete 
    --include .git --exclude-from="$(git -C SRC ls-files \
        --exclude-standard -oi --directory >.git/ignores.tmp && \
        echo .git/ignores.tmp')" \
    SRC DST 

Chi tiết: --exclude-fromlà bắt buộc thay vì --exclude vì có khả năng trường hợp loại trừ danh sách sẽ không được phân tích cú pháp như một đối số. Loại trừ khỏi yêu cầu tệp và không thể hoạt động với đường ống.

Giải pháp hiện tại lưu tệp loại trừ bên trong thư mục .git để đảm bảo tệp sẽ không ảnh hưởng git statustrong khi vẫn giữ kín. Nếu bạn muốn, bạn có thể sử dụng / tmp.

Đối với sự lanh lợi, bạn có thể sử dụng

hg status -i | sed 's/^I //' > /tmp/tmpfile.txt

để thu thập danh sách các tệp KHÔNG bị kiểm soát trọng thương vì các hạn chế .hgignore và sau đó chạy

rsync -avm --exclude-from=/tmp/tmpfile.txt --delete source_dir/ target_dir/

để rsync tất cả các tệp ngoại trừ những tệp bị bỏ qua. Thông báo -m gắn cờ trong rsync sẽ loại trừ các thư mục trống khỏi đồng bộ hóa vì trạng thái hg -i sẽ chỉ liệt kê các tệp bị loại trừ, không phải dirs

Thử cái này:

rsync -azP --delete --filter=":- .gitignore" <SRC> <DEST>

Nó có thể sao chép tất cả các tệp vào thư mục từ xa, ngoại trừ các tệp trong '.gitignore' và xóa các tệp không có trong thư mục hiện tại của bạn.

Trên rsynctrang người đàn ông, ngoài danh sách tiêu chuẩn của các mẫu tệp:

các tệp được liệt kê trong $ HOME / .cvsignore được thêm vào danh sách và bất kỳ tệp nào được liệt kê trong biến môi trường CVSIGNORE

Vì vậy, tệp $ HOME / .cvsignore của tôi trông giống như sau:

.git/
.sass-cache/

để loại trừ .git và các tệp do Sass tạo ra .

Tôi có một số .gitignoretệp rất lớn và không có giải pháp "thuần rsync" nào phù hợp với tôi. Tôi đã viết tập lệnh trình bao bọc rsync này , nó hoàn toàn tôn trọng .gitignorecác quy tắc (bao gồm các !ngoại lệ kiểu và .gitignoretệp trong thư mục con) và đã hoạt động như một sự quyến rũ đối với tôi.

Kiểm tra phần QUY TẮC BỘ LỌC MERGE-FILES trong rsync (1).

Có vẻ như có thể tạo quy tắc rsync --filter sẽ bao gồm các tệp .gitignore khi duyệt qua cấu trúc thư mục.

Thay vì tạo bộ lọc loại trừ, bạn có thể sử dụng git ls-filesđể chọn từng tệp để rsync:

#!/usr/bin/env bash

if [[ ! $# -eq 2 ]] ; then
    echo "Usage: $(basename $0) <local source> <rsync destination>"
    exit 1
fi

cd $1
versioned=$(git ls-files --exclude-standard)
rsync --verbose --links --times --relative --protect-args ${versioned} $2

Điều này hoạt động ngay cả khi git ls-filestrả về các đường dẫn phân cách dòng mới. Có thể sẽ không hoạt động nếu bạn có các tệp được tạo phiên bản có khoảng trắng trong tên tệp.

Các lựa chọn thay thế:

git ls-files -zi --exclude-standard |rsync -0 --exclude-from=- ...

git ls-files -zi --exclude-per-directory=".gitignore" |...

(rsync chỉ hiểu một phần .gitignore)

Câu trả lời ngắn

rsync -r --info=progress2 --filter=':- .gitignore' SOURCE DEST/

Ý nghĩa thông số:

-r: đệ quy

--info=...: hiển thị tiến trình

--filter=...: loại trừ theo các quy tắc được liệt kê trên tệp .gitignore