Saya mulai melihat ke area di bawah kurva (AUC) dan saya sedikit bingung tentang kegunaannya. Ketika pertama kali menjelaskan kepada saya, AUC tampaknya menjadi ukuran kinerja yang hebat tetapi dalam penelitian saya, saya telah menemukan bahwa beberapa mengklaim keunggulannya sebagian besar...
Teknik umum setelah pelatihan, memvalidasi dan menguji model Machine Learning preferensi adalah dengan menggunakan dataset lengkap, termasuk subset pengujian, untuk melatih model akhir untuk menyebarkannya , misalnya produk. Pertanyaan saya adalah: Apakah selalu yang terbaik untuk dilakukan?...
Dengan semua kehebohan tentang Ilmu Data, Pembelajaran Mesin, dan semua kisah sukses di sekitarnya, ada banyak harapan yang dibenarkan, juga terlalu banyak, dari Ilmuwan Data dan model prediksi mereka. Pertanyaan saya untuk berlatih Ahli Statistik, ahli Pembelajaran Mesin, dan Ilmuwan Data adalah...
Saya menggunakan contoh OpenCV letter_recog.cpp untuk bereksperimen pada pohon acak dan pengklasifikasi lainnya. Contoh ini memiliki implementasi enam pengklasifikasi - pohon acak, penguat, MLP, kNN, Bayes naif dan SVM. Kumpulan data pengenalan huruf UCI dengan 20.000 instance dan 16 fitur...
Saya telah melalui artikel di blog kaggle. Berulang kali, penulis menyebutkan 'skor LB' dan 'LB fit') sebagai metrik untuk efektivitas pembelajaran mesin (bersama dengan skor cross validation (CV)). Dengan penelitian untuk makna 'LB' saya menghabiskan sedikit waktu, saya menyadari bahwa umumnya...
Statistik validasi model umum seperti uji Kolmogorov-Smirnov (KS), AUROC , dan koefisien Gini semuanya terkait secara fungsional. Namun, pertanyaan saya berkaitan dengan pembuktian bagaimana semua ini terkait. Saya ingin tahu apakah ada yang bisa membantu saya membuktikan hubungan ini. Saya belum...
Setelah saya mengembangkan model prediktif saya menggunakan Random Forest saya mendapatkan metrik berikut: Train Accuracy :: 0.9764634601043997 Test Accuracy :: 0.7933284397683713 Confusion matrix [[28292 1474] [ 6128 889]] Ini adalah hasil dari kode ini: training_features, test_features,...
Ditutup . Pertanyaan ini perlu lebih fokus . Saat ini tidak menerima jawaban. Ingin meningkatkan pertanyaan ini? Perbarui pertanyaan sehingga berfokus pada satu masalah hanya dengan mengedit posting ini . Ditutup 5 tahun yang lalu . Sepertinya sebagian...
Saya ingin menguji akurasi metodologi. Saya menjalankannya ~ 400 kali, dan saya mendapat klasifikasi berbeda untuk setiap putaran. Saya juga memiliki kebenaran dasar, yaitu klasifikasi nyata untuk diuji. Untuk setiap klasifikasi saya menghitung matriks kebingungan. Sekarang saya ingin...