Statistik dan Big Data

Sedikit info lagi; seandainya Anda tahu sebelumnya berapa banyak variabel untuk dipilih dan bahwa Anda menetapkan penalti kompleksitas dalam prosedur LARS seperti memiliki banyak variabel dengan koefisien bukan 0, biaya perhitungan bukan masalah (jumlah total variabel kecil, katakanlah 50), bahwa...

Saya baru mengenal ridge regression. Ketika saya menerapkan regresi linear ridge, saya mendapat hasil berikut: >myridge = lm.ridge(y ~ ma + sa + lka + cb + ltb , temp, lamda = seq(0,0.1,0.001)) > select(myridge) modified HKB estimator is 0.5010689 modified L-W estimator is 0.3718668...

Saya telah menggunakan R selama beberapa tahun, tetapi saya selalu menggunakan GUI seperti Tinn-R, JGR, dan yang terbaru R-Studio. Walaupun saya menyukai antarmuka R-Studio, saya merasa bahwa untuk program yang lebih panjang dengan sedikit / tanpa grafik, saya dapat membuat kode lebih efisien...

Pertanyaan ini membahas distribusi normal, tetapi saya bertanya-tanya apa yang diketahui tentang distribusi standar deviasi sampel ukuran n yang diambil dari distribusi sewenang-wenang. Secara khusus, apa standar deviasi dari standar deviasi? Untuk distribusi normal, sd dari sd adalah . Apakah ini...

Mari kita katakan bahwa kita mendefinisikan jarak, yang bukan metrik , antara N item. Berdasarkan jarak ini kami kemudian menggunakan pengelompokan hierarki Agglomerative . Bisakah kita menggunakan masing-masing algoritma yang dikenal (tautan tunggal / maksimum / rata-rata dll), untuk mendapatkan...

Saya perlu menggambar 20 distribusi dalam satu grafik dalam R, dan tidak terlihat bagus (berantakan) dengan boxplot biasa (20 kotak) bahkan dengan boxwex = 0,3. Bisakah Anda memberi tahu saya bagaimana saya bisa memplot semacam boxplot di R untuk 20 distribusi, dengan titik-titik untuk median dan...

Saya memiliki jangka waktu berikut diperoleh dengan menggunakan data yang diposting di bawah ini. Untuk ukuran jendela geser 10, saya mencoba menghitung KL-divergensi antara nilai-nilai PMF dalam jendela geser saat ini dan PMF sejarah dengan tujuan akhir memplot nilai KL-divergensi sepanjang...

Saya sedang melihat beberapa masalah regresi logistik. ("reguler" dan "bersyarat"). Idealnya, saya ingin memberi bobot pada masing-masing kasus masukan sehingga GLM akan lebih fokus pada memprediksi kasing yang lebih tinggi dengan benar dengan mengorbankan kemungkinan kesalahan klasifikasi pada...

Merumuskan model matematika untuk suatu masalah adalah salah satu aspek statistik yang paling subyektif, tetapi juga salah satu yang paling penting. Apa referensi terbaik yang berhubungan dengan topik penting ini tetapi sering diabaikan? Dan ahli statistik terkenal mana yang mengatakan sesuatu,...

Saya perlu membuat kesimpulan tentang parameter positif . Untuk mengakomodir kepositifan, saya memvariasikan ulang p = exp ( q ) . Menggunakan rutin MLE saya menghitung estimasi titik dan se untuk q . Properti invarian dari MLE secara langsung memberi saya estimasi titik untuk p , tapi saya tidak...

Misalkan, dalam penelitian terhadap 15 subjek, variabel respons (res) dimodelkan dengan dua variabel penjelas, satu (level) dikategorikan dengan 5 level dan lainnya (waktu respons: RT) kontinu. Dengan lmer dalam paket lme4 dari R, saya punya: fm1 <- lmer(res ~ level * RT + (level-1 | subject),...

Distribusi diskrit dengan fungsi massa p(x;k)=k(x+k)(x+k−1),x=1,2,…p(x;k)=k(x+k)(x+k−1),x=1,2,…p(x;k) = \frac{k}{(x+k)(x+k-1)},\quad x = 1,2,\ldots muncul di halaman 9 tulisan ini . Untuk ini adalah distribusi Yule-Simon dengan , tapi saya belum menemukan contoh

Misalkan saya mengamati vektor variabel independen dan dan variabel dependen . Saya ingin mencocokkan model formulir: mana adalah beberapa fungsi bernilai positif yang dapat dua kali, adalah parameter penskalaan yang tidak diketahui, dan adalah variabel rata-rata, varians unit Gaussian variabel...

Saya seorang pemula dalam statistik dan saya memiliki beberapa kebingungan tentang asumsi independensi untuk tes statistik. Saya mencari di internet dan beberapa informasi mengatakan bahwa untuk uji-t, pengamatan dalam dua kelompok harus independen (yaitu, pengukuran dalam sampel 1 dan...

Saya menjalankan Tes AB pada halaman yang hanya menerima kunjungan 5k per bulan. Akan terlalu lama untuk mencapai tingkat lalu lintas yang diperlukan untuk mengukur perbedaan + -1% antara pengujian dan kontrol. Saya telah mendengar bahwa saya dapat menggunakan statistik Bayesian untuk memberi saya...

Diberikan pengaturan eksperimental berikut: Banyak sampel diambil dari subjek dan setiap sampel diperlakukan dengan berbagai cara (termasuk perlakuan kontrol). Yang paling menarik adalah perbedaan antara kontrol dan masing-masing perlakuan. Saya dapat memikirkan dua model sederhana untuk data...

Mengikuti dari posting saya sebelumnya, sejauh yang saya bisa mengerti, jika saya memiliki tiga koefisien korelasi, saya harus mengujinya berpasangan untuk melihat apakah ada perbedaan yang signifikan di antara mereka. Ini berarti bahwa saya harus menggunakan transformasi Nelayan untuk menghitung...

Saya baru saja membaca bahwa Anda sekarang dapat membeli komputer kuantum (meskipun hanya ada satu yang terjual sejauh ini!). Apakah komputasi kuantum memiliki aplikasi dalam statistik? {sunting - untuk keperluan pertanyaan, mari kita asumsikan bahwa komputer kuantum akhirnya (dalam beberapa...

Saya sedang menyelidiki apakah kondisi hadiah yang berbeda dapat mempengaruhi kinerja tugas. Saya memiliki data dari studi kecil dengan dua kelompok, masing-masing dengan n = 20. Saya mengumpulkan data pada tugas yang melibatkan kinerja dalam 3 kondisi "hadiah" yang berbeda. Tugas tersebut...

Saya menjalankan temuan ANOVA misalnya interaksi antara jenis kelamin dan kelas daripada yang saya ingin tahu dalam apa nilai anak laki-laki dan perempuan berbeda, tetapi dalam banyak kasus saya menemukan (disesuaikan) nilai-p 0 dan 1. Bagaimana / mengapa ini mungkin? Sepertinya tidak benar...