Bagaimana cara membuat wget lebih cepat atau multithreading?

Saya baru saja memutakhirkan perangkat keras komputer saya (cpu + motherboard + kartu grafis + memori + hard disk), sehingga menginstal OS baru diperlukan. Saya mencoba mengunduh debian-6.0.6-amd64-netinst.isodengan wgetperintah tetapi kecepatannya sangat lambat sehingga saya tidak tahan. 4Kb/s ~ 17 Kb/s, lambat seperti kura-kura berlari, atau bahkan lebih lambat jika saya menggunakan Chrome.

Saya sudah membaca informasi bantuan wget , sepertinya tidak ada pilihan yang bisa membuatnya lebih cepat.

Apakah ada cara untuk membuat wget lebih cepat? Atau mungkinkah membuatnya menjadi unduhan multi-threading ?

PS: bandwidth saya 4M. Saya menggunakan perintah ini:

wget -c url  http://hammurabi.acc.umu.se/debian-cd/6.0.6/amd64/iso-cd/debian-6.0.6-amd64-netinst.iso

Kenapa tidak mencobanya axel? Ini adalah Pengunduh berbasis Command line sepenuhnya matang.

Instal axeldan spawn unduhan oleh

axel -a -n [Num_of_Thread] link1 link2 link3 ...

di mana '[Num_of_Thread]'jumlah koneksi paralel yang dibuat untuk setiap tautan yang ingin Anda unduh.

-a cukup tampilkan bilah kemajuan yang ditingkatkan.

Tidak seperti banyak manajer unduhan lainnya, Axel mengunduh semua data langsung ke file tujuan, menggunakan satu utas tunggal. Ini menghemat waktu pada akhirnya karena program tidak harus menggabungkan semua bagian yang diunduh.

Saya mencoba axelatas rekomendasi Gufran tetapi sangat mengecewakan saya. Tujuan saya adalah untuk menemukan pengganti CLI DownThemAllkarena ia menggunakan CPU dan hard disk dan memperlambat seluruh sistem bahkan pada Mac Pro 8-core. Saya juga menginginkan penggantian multithreaded untuk wgetdan curl, bukan beberapa naskah yang menjalankan banyak contoh ini. Jadi saya mencari lebih jauh dan menemukan apa yang saya pikirkan saat ini adalah pengunduh CLI multithreaded paling modern yang ada - aria2 . Masalah besar yang saya miliki axeladalah 'memalsukan' mengunduh file melalui SSL. Aku ketahuan melakukannya dengan itu tcdump. Itu mengunduh httpstautan seperti biasahttp. Itu benar-benar membuatku jengkel dan jika aku tidak memeriksanya, aku akan memiliki rasa aman yang salah. Saya ragu bahwa banyak orang tahu tentang pelanggaran keamanan yang serius ini. Kembali ke aria2, itu lebih maju daripada pengunduh lainnya. Ini mendukung protokol HTTP (S), FTP, BitTorrent, dan Metalink, adalah multiplatform, dan merupakan gerilya unduhan. Ini memaksimalkan bandwidth ISP saya tanpa beban pada CPU atau hard disk, tidak seperti DTA. Halaman manual raksasa. Saya tidak akan pernah menggunakan lebih dari beberapa dari banyak pilihannya. Dan oh, BTW, saya memeriksa kinerja SSL-nya tcdumpdan itu solid, bukan palsu. Saya menulis sebuah skrip yang meniru perilaku DTA, jika bukan kenyamanannya.

Perintah dasar yang saya gunakan untuk mendapatkan bandwidth maks adalah

aria2c --file-allocation=none -c -x 10 -s 10 -d "mydir" URL

-cmemungkinkan kelanjutan pengunduhan jika terputus, -x 10dan -s 10memungkinkan hingga 10 koneksi per server, dan -d "mydir"menampilkan file ke direktori mydir.

aria2files.sh:

#!/bin/bash

filename="$1" # get filename from command line argument

while read -r line
do
    if [ "$line" ] # skip blank lines
    then
        if [[ "$line" =~ (https?|ftp)\:\/\/ ]] # line contains a URL, download file
        then
            echo "URL: '$line'"
            aria2c --file-allocation=none -c -x 10 -s 10 -d "$currdir" "$line"
        else # line contains a directory name, create directory if not already present
            echo "Directory: '$line'"
            currdir="$line"
            if [ ! -d "$currdir" ]
            then
                mkdir -p "$currdir" # '-p' enables creation of nested directories in one command
            fi
        fi
    fi
done < "$filename"

Bunyinya file teks format:

files.txt:

dierctory 1
url1
url2
…
directory 2/subdirectory/sub-subdirectory/…
url3
url4
…
…
…

Script membaca nama file dari baris perintah:

aria2files.sh files.txt

Itu menciptakan direktori dan unduhan untuk mereka. Itu dapat membuat direktori bersarang seperti yang ditunjukkan pada contoh kedua.

Untuk lebih jelasnya lihat skrip Bash posting saya untuk mengunduh file dari URL ke direktori tertentu yang tercantum dalam file teks .