Statistik dan Big Data

Saya baru-baru mengambil tes HackerRank untuk posisi Ilmu Data dan mendapatkan pertanyaan ini salah. Saya datang ke 1/200. Begini caranya: Ada 50 kombinasi yang akan membuat ini benar. (yaitu {1,2}, {2,4}, {3,6} ... {50.100}). Kemungkinan nomor tertentu yang dipilih adalah 1/100. Kemungkinan bahwa...

Kami sering mempelajari model Gaussian Mixture sebagai model yang berguna dalam pembelajaran mesin dan aplikasinya. Apa signifikansi fisik dari " Campuran " ini? Apakah ini digunakan karena Gaussian Mixture Model memodelkan probabilitas sejumlah variabel acak masing-masing dengan nilai rata-rata...

Saya mencoba memahami perbedaan antara Newton-Raphsonteknik dan Fisher scoringteknik dengan menghitung iterasi pertama untuk setiap metode untuk Bernoullisampel. (Saya tahu bahwa dalam hal ini saya dapat secara eksplisit dan segera menghitung tetapi saya ingin melakukannya secara iteratif hanya...

Saya telah mencoba untuk merasakan masalah yang berbeda dalam pengaturan sering di mana MCMC digunakan. Saya tahu bahwa MCMC (atau Monte Carlo) digunakan dalam pemasangan GLMM dan mungkin juga algoritma Monte Carlo EM. Apakah ada masalah yang lebih sering terjadi di mana MCMC

Saya mengalami kesulitan memahami pembatasan pengecualian dalam variabel instrumental. Saya mengerti bahwa efek pengobatan yang tidak bias adalah , di mana adalah hasilnya, adalah pengobatan, dan adalah instrumen. Dengan kata lain, .B =Co v ( Y, Z)Co v ( S, Z)B=CHaiv(Y,Z)CHaiv(S,Z)B =...

Pertimbangkan regresi binomial berikut: # Create some data set.seed(10) n <- 500 x <- runif(n,0,100) y <- x + rnorm(n,sd=100) < 0   # Fit a binomial regression model model <- glm(y ~ x, family="binomial") summary(model) The summarymengembalikan fungsi p-nilai 1.03e-05. Saat...

Saya baru mengonversi rumus ke bentuk matriks. Tetapi ini diperlukan untuk kode pembelajaran mesin yang efisien. Jadi saya ingin mengerti cara "benar", bukan hal koboi yang saya lakukan. Baiklah kita mulai, saya mencoba untuk mengubah jumlah kuadrat tertimbang dari bentuk di bawah ini ke dalam...

Dalam entri Wikipedia untuk kriteria informasi Akaike , kita membaca di bawah Perbandingan dengan BIC (kriteria informasi Bayesian) yang ... AIC / AICc memiliki keunggulan teoritis dibandingkan BIC ... AIC / AICc berasal dari prinsip-prinsip informasi; BIC bukan ... BIC memiliki prioritas 1 / R...

Mencari tahu bagaimana mensimulasikan sesuatu sering kali merupakan cara terbaik untuk memahami prinsip-prinsip yang mendasarinya. Saya sedikit bingung bagaimana tepatnya mensimulasikan yang berikut ini. Misalkan dan bahwa memiliki distribusi sebelumnya yaitu . Berdasarkan sampel pengamatan...

Saya mencoba untuk membandingkan variabilitas dalam dua sampel yang sangat berbeda dalam skala (kapasitas murid dari berbagai jenis lembaga pendidikan (pembibitan, sekolah dasar dan menengah). Pendekatan saya adalah untuk menghitung standar deviasi untuk setiap sampel, kemudian bagi dengan mean...

Saya menghadapi distribusi terbatas dengan nol kovarians antara dua variabel tetapi korelasinya adalah . Apakah ada distribusi seperti itu? Bagaimana bisa dijelaskan?111 Anda benar, mungkin saya perlu memberikan lebih banyak detail. OK, X dan Y adalah distribusi normal bivariat dengan varians...

Seperti dicatat oleh Wand dan Jones (1995), sebagian besar kernel standar dapat dilihat sebagai kasus K(x;p)={22p+1B(p+1,p+1)}−1(1−x2)p1{|x|<1}K(x;p)={22p+1B(p+1,p+1)}−1(1−x2)p1{|x|<1} K(x;p) = \{ 2^{2p+1} \; \mathrm{B}(p+1,p+1) \}^{-1} \; (1-x^2)^p

Saya mengerti bahwa rumus untuk probabilitas konvergensi adalah P[|Xn−X∞|>ϵ]→0P[|Xn−X∞|>ϵ]→0P[|X_n − X_\infty| \gt \epsilon ]\to 0dan saya bisa memecahkan masalah menggunakan rumus. Adakah yang bisa menjelaskannya secara intuitif (seperti saya berusia lima tahun), terutama dalam hal...

Saya memiliki dataset pengukuran suhu air yang diambil dari badan air besar dengan interval tidak teratur selama beberapa dekade. (Galveston Bay, TX jika Anda tertarik) Inilah kepala data: STATION_ID DATE TIME LATITUDE LONGITUDE YEAR MONTH DAY SEASON MEASUREMENT 1 13296 6/20/91 11:04 29.50889...

Untuk non-negatif variabel acak , bagaimana membuktikan bahwa adalah nondecreasing di

Saya menggunakan PCA untuk menganalisis beberapa deret waktu terkait spasial, dan tampaknya vektor eigen pertama sesuai dengan turunan dari tren rata-rata deret tersebut (contoh diilustrasikan di bawah). Saya ingin tahu mengapa vektor eigen pertama berhubungan dengan turunan dari tren yang...

Mengikuti pertanyaan yang diajukan sebelumnya, varians inflation factor (VIFs) dapat dinyatakan sebagai adalah versi skala satuan panjang dariVIFj=Var(b^j)σ2=[w′jwj−w′jW−j(W′−jW−j)−1W′−jwj]−1VIFj=Var(b^j)σ2=[wj′wj−wj′W−j(W−j′W−j)−1W−j′wj]−1 \textrm{VIF}_j = \frac{\textrm{Var}(\hat{b}_j)}{\sigma^2}...

\newcommand{\P}{\mathbb{P}} Saya prihatin dengan data pengamatan di mana tugas perawatan dapat dijelaskan dengan sangat baik. Misalnya, regresi logistik P (A=1 | X) = ( 1 + exp( - ( Xβ) ))- 1P(SEBUAH=1|X)=(1+exp⁡(-(Xβ)))-1\P(A =1 |X) = (1+ \exp(-(X\beta)))^{-1} wehre tugas perawatan dan kovariat...

Apakah lazim memiliki teknik regresi yang berbeda pada daun pohon regresi (misalnya regresi linier)? Saya telah mencarinya selama satu jam terakhir, tetapi yang saya temukan hanyalah implementasi yang memiliki nilai konstan pada daun pohon. Apakah ada alasan mengapa ini tidak

Saya mencoba melihat apakah variabel x dan y bersama-sama atau secara terpisah mempengaruhi Q_7 secara signifikan (histogram yang di atas). Saya sudah menjalankan tes normalitas Shapiro-Wilk dan mendapatkan yang berikut shapiro.test(Q_7) ## data: Q_7 ## W = 0.68439, p-value < 2.2e-16 Dengan...