rsync mengecualikan menurut .gitignore & .hgignore & svn: ignore like --filter =: C

Rsync menyertakan opsi bagus --cvs-excludeuntuk "mengabaikan file dengan cara yang sama seperti CVS", tetapi CVS sudah usang selama bertahun-tahun. Apakah ada cara untuk membuatnya juga mengecualikan file yang akan diabaikan oleh sistem kontrol versi modern (Git, Mercurial, Subversion)?

Misalnya, saya memiliki banyak proyek Maven yang diperiksa dari GitHub. Biasanya mereka menyertakan .gitignoredaftar setidaknya target, direktori build Maven default (yang mungkin ada di tingkat atas atau di submodul). Karena isi dari direktori ini sepenuhnya dapat dibuang, dan mereka bisa jauh lebih besar dari kode sumber, saya ingin mengecualikannya saat menggunakan rsync untuk backup.

Tentu saja saya bisa secara eksplisit --exclude=target/tetapi itu akan secara tidak sengaja menekan direktori yang tidak terkait yang kebetulan diberi nama targetdan tidak seharusnya diabaikan.

Dan saya bisa memasok daftar lengkap path absolut untuk semua nama file dan pola disebutkan dalam .gitignore, .hgignoreatau svn:ignoreproperti pada disk saya, tetapi ini akan menjadi daftar besar yang harus diproduksi oleh semacam script.

Karena rsync tidak memiliki dukungan bawaan untuk pemeriksaan VCS selain CVS, apakah ada trik bagus untuk memberinya pola pengabaian mereka? Atau sejenis sistem panggilan balik di mana skrip pengguna dapat ditanyai apakah file / direktori tertentu harus disertakan atau tidak?

Pembaruan : --filter=':- .gitignore'seperti yang disarankan oleh LordJavac tampaknya berfungsi dengan baik untuk Git seperti --filter=:Chalnya untuk CVS, setidaknya pada contoh yang saya temukan, meskipun tidak jelas apakah sintaksnya sama persis. --filter=':- .hgignore'tidak bekerja dengan baik untuk Mercurial; misalnya sebuah .hgignorebaris yang mengandung seperti ^target$(Mercurial equivalent dari Git /target/) tidak dikenali oleh rsync sebagai ekspresi reguler. Dan sepertinya tidak ada yang berhasil untuk Subversion, yang harus Anda parse .svn/dir-prop-baseuntuk copy pekerjaan 1.6 atau sebelumnya, dan angkat tangan Anda dengan cemas untuk copy pekerjaan 1.7 atau yang lebih baru.

Seperti yang disebutkan oleh luksan, Anda dapat melakukan ini dengan --filtertombol ke rsync. Saya mencapai ini dengan --filter=':- .gitignore'(ada spasi sebelum ".gitignore") yang memberitahu rsyncuntuk melakukan penggabungan direktori dengan .gitignorefile dan meminta mereka mengecualikan sesuai aturan git. Anda mungkin juga ingin menambahkan file abaikan global Anda, jika ada. Untuk membuatnya lebih mudah digunakan, saya membuat alias rsyncyang menyertakan filter.

Anda dapat menggunakan git ls-filesuntuk membuat daftar file yang dikecualikan oleh file repositori .gitignore. https://git-scm.com/docs/git-ls-files

Pilihan:

• --exclude-standardPertimbangkan semua .gitignorefile.
• -o Jangan abaikan perubahan tidak bertahap.
• -i Hanya mengeluarkan file yang diabaikan.
• --directory Hanya mengeluarkan jalur direktori jika seluruh direktori diabaikan.

Satu-satunya hal yang saya abaikan adalah .git.

rsync -azP --exclude=.git --exclude=`git -C <SRC> ls-files --exclude-standard -oi --directory` <SRC> <DEST>

bagaimana rsync --exclude-from='path/.gitignore' --exclude-from='path/myignore.txt' source destination?
Itu berhasil untuk saya.
Saya yakin Anda juga dapat memiliki lebih banyak --exclude-fromparameter.

Solusi 2018 dikonfirmasi

rsync -ah --delete 
    --include .git --exclude-from="$(git -C SRC ls-files \
        --exclude-standard -oi --directory >.git/ignores.tmp && \
        echo .git/ignores.tmp')" \
    SRC DST 

Detail: --exclude-fromadalah wajib daripada --exclude karena kemungkinan kasus yang mengecualikan daftar tidak akan diuraikan sebagai argumen. Kecualikan dari membutuhkan file dan tidak dapat bekerja dengan pipa.

Solusi saat ini menyimpan file kecualikan di dalam folder .git untuk memastikan itu tidak akan mempengaruhi git statussementara menyimpannya sendiri. Jika mau, Anda dapat menggunakan / tmp.

Untuk lincah Anda mungkin menggunakan

hg status -i | sed 's/^I //' > /tmp/tmpfile.txt

untuk mengumpulkan daftar file yang TIDAK berada di bawah kendali lincah karena pembatasan .hgignore dan kemudian jalankan

rsync -avm --exclude-from=/tmp/tmpfile.txt --delete source_dir/ target_dir/

untuk rsync semua file kecuali yang diabaikan. Perhatikan -m flag di rsync yang akan mengecualikan direktori kosong dari sinkronisasi karena hg status -i hanya akan mencantumkan file yang dikecualikan, bukan dirs

Coba ini:

rsync -azP --delete --filter=":- .gitignore" <SRC> <DEST>

Itu dapat menyalin semua file ke direktori jarak jauh tidak termasuk file di '.gitignore', dan menghapus file yang tidak ada di direktori Anda saat ini.

Sesuai rsynchalaman manual, selain daftar standar pola file:

file yang terdaftar di $ HOME / .cvsignore ditambahkan ke daftar dan file apa pun yang terdaftar di variabel lingkungan CVSIGNORE

Jadi, file $ HOME / .cvsignore saya terlihat seperti ini:

.git/
.sass-cache/

untuk mengecualikan .git dan file yang dihasilkan oleh Sass .

Saya memiliki sejumlah .gitignorefile yang sangat besar dan tidak ada solusi "rsync murni" yang berhasil untuk saya. Saya menulis skrip pembungkus rsync ini , itu sepenuhnya menghormati .gitignoreaturan (termasuk !pengecualian -style dan .gitignorefile di subdirektori) dan telah bekerja seperti pesona bagi saya.

Lihat bagian ATURAN FILTER GABUNGAN di rsync (1).

Sepertinya dimungkinkan untuk membuat aturan rsync --filter yang akan menyertakan file .gitignore saat melintasi struktur direktori.

Alih-alih membuat filter pengecualian, Anda dapat menggunakan git ls-filesuntuk memilih setiap file untuk rsync:

#!/usr/bin/env bash

if [[ ! $# -eq 2 ]] ; then
    echo "Usage: $(basename $0) <local source> <rsync destination>"
    exit 1
fi

cd $1
versioned=$(git ls-files --exclude-standard)
rsync --verbose --links --times --relative --protect-args ${versioned} $2

Ini berfungsi meskipun git ls-filesmengembalikan jalur yang dipisahkan baris baru. Mungkin tidak akan berfungsi jika Anda memiliki file berversi dengan spasi di nama file.

Alternatif:

git ls-files -zi --exclude-standard |rsync -0 --exclude-from=- ...

git ls-files -zi --exclude-per-directory=".gitignore" |...

(rsync hanya memahami sebagian .gitignore)

Jawaban singkat

rsync -r --info=progress2 --filter=':- .gitignore' SOURCE DEST/

Parameter arti:

-r: rekursif

--info=...: tunjukkan kemajuan

--filter=...: kecualikan menurut aturan yang tercantum pada file .gitignore