Bandingkan dua daftar URL dan cetak URL yang baru ditambahkan ke file baru

Saya awalnya membuat dua file yang berisi daftar URL — saya akan menyebutnya sebagai olddan new. Saya ingin membandingkan dua file dan jika ada URL di newfile yang tidak ada dalam oldfile, saya ingin ini ditampilkan dalam extra_urlsfile.

Sekarang, saya sudah membaca beberapa hal tentang menggunakan diffperintah tetapi dari apa yang bisa saya katakan, ini juga menganalisis urutan informasi. Saya tidak ingin pesanan memiliki efek pada output. Saya hanya ingin URL tambahan newdicetak ke extra_urlsfile, tidak peduli apa urutannya ditempatkan di salah satu dari dua file lainnya.

Bagaimana saya bisa melakukan ini?

Anda dapat menggunakan commperintah untuk membandingkan dua file, dan secara selektif menunjukkan baris yang unik untuk satu atau yang lain, atau garis yang sama. Ini membutuhkan input untuk diurutkan, tetapi Anda dapat mengurutkannya dengan cepat, dengan menggunakan substitusi proses.

comm -13 <(sort old.txt) <(sort new.txt)

Jika Anda menggunakan versi bashyang tidak mendukung substitusi proses, itu dapat ditiru menggunakan pipa bernama. Contohnya ditampilkan di Wikipedia .

Saya hanya akan menggunakan grep:

grep -vFf old new > extra_urls

Penjelasan

• -f: memberitahu grepuntuk membaca pola pencariannya dari file. Dalam hal ini old,.
• -v : memberitahu grep untuk membalikkan kecocokan, untuk hanya mencetak garis yang tidak cocok.
• -F: memberitahu grep untuk mengartikan pola pencariannya sebagai string, bukan ekspresi reguler. Dengan begitu, .URL akan dicocokkan secara harfiah.

Digabungkan, ini membuat grepmencetak garis apa pun newyang tidak ada di old. Urutan URL dalam file tidak relevan.

Karena pesanan penting bagi Anda, gunakan awk

awk '
    NR == FNR {old[$1]=1; next}
    !($1 in old)
' old new > extra

Saya memiliki aplikasi yang disebut berbaur. Ini memungkinkan melihat dua (atau tiga) file, berdampingan, menunjukkan perbedaan dan memungkinkan untuk menyalin selektif dari satu ke yang lain atau menghapus karakter.

Meld dapat diinstal dari terminal dengan

sudo apt-get install meld