Saya memiliki program pemodelan dan penilaian yang banyak menggunakan DataFrame.isin fungsi panda, mencari melalui daftar facebook "seperti" catatan pengguna individu untuk masing-masing dari beberapa ribu halaman tertentu. Ini adalah bagian yang paling memakan waktu dari program, lebih dari...
Apa perbedaan antara komputasi paralel dan terdistribusi? Ketika datang ke skalabilitas dan efisiensi, sangat umum untuk melihat solusi berurusan dengan perhitungan dalam kelompok mesin, dan kadang-kadang disebut sebagai pemrosesan paralel, atau sebagai pemrosesan terdistribusi. Dengan cara...
Bekerja pada apa yang sering disebut proyek "data menengah", saya dapat memparalelkan kode saya (kebanyakan untuk pemodelan dan prediksi dalam Python) pada sistem tunggal di mana saja dari 4 hingga 32 core. Sekarang saya sedang mencari peningkatan skala pada EC2 (mungkin dengan StarCluster /...
Saat ini saya mengambil makalah tentang Big Data yang telah kami gunakan R banyak untuk analisis data. Saya kebetulan memiliki GTX1070 di PC saya untuk alasan bermain game. Jadi, saya pikir akan sangat keren jika saya bisa menggunakannya untuk mempercepat beberapa pemrosesan untuk beberapa hal yang...
Saya sedang mengerjakan model Seq2Seq menggunakan LSTM dari Keras (menggunakan latar Theano) dan saya ingin memaralelkan prosesnya, karena bahkan beberapa MB data memerlukan beberapa jam untuk pelatihan. Jelas bahwa GPU jauh lebih baik dalam paralelisasi daripada CPU. Saat ini, saya hanya punya...