Pertanyaan yang diberi tag parallel-processing

Menjalankan banyak perintah (atau bahkan komputer) secara paralel untuk efisiensi lebih.

30
Paralelisasi rsync

Saya baru saja pindah dan menemukan setelah beberapa percobaan dan kesalahan bahwa di suatu tempat antara rumah saya dan server jarak jauh saya, ada beberapa pelambatan yang terjadi ... tetapi pelambatan tidak terlalu cerdas. Ini hanya membatasi koneksi individual. Jadi jika saya menyalin satu file...

12
netcat sebagai server multithread

Saya menggunakan netcat untuk menjalankan server sederhana seperti ini: while true; do nc -l -p 2468 -e ./my_exe; done Dengan cara ini, siapa pun dapat terhubung ke host saya di port 2468 dan berbicara dengan "my_exe". Sayangnya, jika orang lain ingin terhubung selama sesi terbuka, itu akan...

11
Loop shell paralel

Saya ingin memproses banyak file dan karena saya sudah ada di sini sekelompok core saya ingin melakukannya secara paralel: for i in *.myfiles; do do_something $i `derived_params $i` other_params; done Saya tahu solusi Makefile tetapi perintah saya membutuhkan argumen dari daftar globbing shell....

10
Sortir --parallel tidak sejajar

Saya mencoba membuat unik satu set garis yang ditarik dari file dengan egrep dengan sort -u, lalu hitung. Sekitar 10% dari baris (semua 100 karakter dari alfabet [ATCG]) digandakan. Ada dua file, masing-masing sekitar 3 gigs, 50% tidak relevan, jadi mungkin 300 juta baris. LC_ALL=C grep -E...

-1
scp file secara paralel DARI beberapa server

Apakah ada skrip atau sesuatu yang dapat menggunakan scp untuk menyalin satu file dari beberapa server / sumber, masing-masing koneksi dengan chunk / chunk sendiri? Saya ingin sesuatu seperti bagaimana torrent bertindak. Saya tidak memiliki opsi untuk benar-benar menjalankan server torrent. Saya...