Cara mengunduh objek S3 besar dari baris perintah jauh lebih cepat daripada s3cmd

1

Dengan perintah s3cmd Anda dapat mengunduh file dari S3 seperti ini:

s3cmd get s3://my.private.bucket/some/location/hugefile.dat

Tapi itu bisa memakan waktu cukup lama jika file yang disimpan benar-benar besar. Apakah ada solusi baris perintah alternatif untuk contoh di atas yang mempercepat proses ini secara signifikan?

amazon-web-services amazon-s3 multi-threaded s3cmd Erik
sumber
Silakan hitung kecepatan maksimum yang dimungkinkan (sesuai dengan ISP Anda atau tes kecepatan) dan kecepatan yang Anda dapatkan sekarang.
Daniel B

Jawaban:

1

klaim s4cmd untuk mendukung operasi multi-utas.
Ini adalah utilitas baris perintah untuk mengakses Amazon S3, terinspirasi oleh s3cmd.

Ini mendukung perintah reguler yang Anda harapkan untuk mengambil dan menyimpan file dalam S3: ls, put, get, cp, mv, sync, del, du.

James Roth
sumber
Meskipun tautan ini dapat menjawab pertanyaan, lebih baik untuk memasukkan bagian-bagian penting dari jawaban di sini dan memberikan tautan untuk referensi. Jawaban hanya tautan dapat menjadi tidak valid jika halaman tertaut berubah.
DavidPostill
Ini bukan jawaban tautan saja. Saya memberikan solusi alternatif baris perintah dan memberikan penjelasan mengapa. Tautan tidak perlu dipahami.
James Roth