Statistik dan Big Data

Apakah ada uji statistik formal untuk menguji apakah proses itu white

Saya memiliki file CSV dengan 4 juta tepi jaringan terarah yang mewakili orang yang berkomunikasi satu sama lain (mis. John mengirim pesan kepada Mary, Mary mengirim pesan ke Ann, John mengirim pesan lain ke Mary, dll.). Saya ingin melakukan dua hal: Temukan derajat, perantara, dan (mungkin)...

Saya telah melakukan beberapa penelitian internet kasual tentang biclusters. (Saya telah membaca artikel Wiki beberapa kali.) Sejauh ini, sepertinya ada beberapa definisi atau terminologi standar. Saya ingin tahu apakah ada makalah standar atau buku yang harus dibaca oleh siapa pun yang tertarik...

Apakah ada paket R, situs web, atau perintah yang akan memungkinkan seseorang untuk mencari prosedur statistik tertentu yang mereka inginkan? Misalnya, jika saya ingin menemukan paket yang memiliki Transformasi Box-Cox, situs web / paket / perintah mungkin mengembalikan "MASS" dan merujuk saya ke...

Apa metode untuk meminimalkan efek batas dalam dekomposisi wavelet? Saya menggunakan R dan paket Wavelim . Saya telah menemukan fungsi misalnya ?brick.wall tapi Saya tidak terlalu menggunakan cara menggunakannya. Saya tidak yakin solusi terbaik adalah dengan menghapus beberapa koefisien....

Saya telah menjelajahi Google dan situs ini dan saya masih bingung tentang fungsi lmer di perpustakaan lme4. Saya memiliki beberapa data yang dikumpulkan dari bangsal psikiatri yang berbeda, yang memiliki struktur bertingkat. Untuk menyederhanakan, saya akan memilih dua level 2 dan dua variabel...

Adakah yang punya saran atau paket yang akan menghitung koefisien determinasi parsial? Koefisien determinasi parsial dapat didefinisikan sebagai persentase variasi yang tidak dapat dijelaskan dalam model yang direduksi, tetapi dapat dijelaskan oleh prediktor yang ditentukan dalam model lengkap...

Saya melatih jaringan saraf tiruan (backpropagation, feed-forward) dengan data terdistribusi tidak normal. Selain kesalahan rata-rata kuadrat akar, literatur sering menyarankan koefisien korelasi Pearson untuk mengevaluasi kualitas jaring yang dilatih. Tetapi, apakah koefisien korelasi Pearson...

Beberapa pengeditan dilakukan ... Pertanyaan ini hanya untuk bersenang-senang, jadi jika itu tidak menyenangkan, silakan abaikan saja. Saya sudah mendapatkan banyak bantuan dari situs ini sehingga saya tidak ingin menggigit tangan yang memberi saya makan. Ini didasarkan pada contoh kehidupan nyata...

Pertanyaannya cukup banyak terkandung dalam judul. Berapa jarak Mahalanobis untuk dua distribusi matriks kovarian yang berbeda? Apa yang saya temukan sampai sekarang mengasumsikan kovarian yang sama untuk kedua distribusi, yaitu, semacam ini: ΔTΣ−1ΔΔTΣ−1Δ\Delta^T \Sigma^{-1} \Delta Bagaimana jika...

Dalam Rsaya dapat melakukan tes Breusch-Pagan untuk heteroskedastisitas menggunakan ncvTestfungsi carpaket. Tes Breusch – Pagan adalah jenis tes chi kuadrat. Bagaimana cara menginterpretasikan hasil ini: > require(car) > set.seed(100) > x1 = runif(100, -1, 1) > x2 = runif(100, -1,...

Membangun posting Bagaimana mengelola proyek analisis statistik dan ProjectTemplatepaket dalam R ... T: Bagaimana Anda membangun struktur direktori proyek statistik Anda ketika banyak bahasa banyak fitur (misalnya, R DAN Splus)? Sebagian besar diskusi tentang topik ini terbatas pada proyek yang...

Apakah mungkin untuk menggunakan analisis komponen utama kernel (kPCA) untuk Latent Semantic Indexing (LSI) dengan cara yang sama seperti PCA digunakan? Saya melakukan LSI dalam R menggunakan prcompfungsi PCA dan mengekstrak fitur dengan memuat tertinggi dari komponen pertama . Dengan itu saya...

Saya memiliki dataset peristiwa yang terjadi selama periode waktu yang sama. Setiap acara memiliki tipe (ada beberapa tipe berbeda, kurang dari sepuluh) dan lokasi, direpresentasikan sebagai titik 2D. Saya ingin memeriksa apakah ada korelasi antara jenis peristiwa, atau antara jenis dan lokasi....

Dalam sebuah makalah yang saya baca baru-baru ini saya menemukan bit berikut di bagian analisis data mereka: Tabel data kemudian dipecah menjadi jaringan dan garis sel, dan kedua subtabel secara terpisah dipoles median (baris dan kolom secara iteratif disesuaikan memiliki median 0) sebelum...

Lembaga pemungutan suara Prancis saat ini menghadapi krisis besar setelah mereka baru-baru ini menerbitkan apa yang hanya bisa disebut polling paling konyol sejauh ini pada pacuan kuda pemilihan presiden 2012. Senat Prancis sekarang mempertimbangkan untuk membuat undang-undang tentang masalah ini...

Kami membuat bagan yang menunjukkan lalu lintas menurut waktu hari selama periode tertentu. Jadi sumbu y adalah lalu lintas, sumbu x adalah tengah malam, 1 pagi, 2 pagi, dll. Bisa juga hari dalam seminggu. Apa nama generik untuk jenis bagan ini? Saya telah datang dengan "diagram siklus". Apakah itu...

Distribusi stabil positif dijelaskan oleh empat parameter: parameter skewness , parameter skala , parameter lokasi , dan sebagainya -called index parameter . Ketika adalah nol distribusi simetris di sekitar , ketika itu positif (resp. negatif) distribusi miring ke kanan (resp. ke kiri) Distribusi...

Saya sedang mencari referensi yang solid (atau referensi) pada teknik optimasi numerik yang ditujukan untuk ahli statistik, yaitu, itu akan menerapkan metode ini untuk beberapa masalah inferensial standar (misalnya MAP / MLE dalam model umum). Hal-hal seperti gradient descent (lurus dan stokastik),...

Saya menggunakan tutorial yang saya temukan dan merencanakan nilai rata-rata bersama dengan kesalahan standar untuk menampilkan data saya. Tapi saya mengalami masalah dalam membahas hasil. Plot saya seperti yang ditunjukkan di bawah ini: beberapa kesalahan standar (ditampilkan sebagai bilah...