Apa arti "normalisasi" dan bagaimana memverifikasi bahwa sampel atau distribusi dinormalisasi?

18

Saya memiliki pertanyaan di mana ia meminta untuk memverifikasi apakah distribusi Uniform ( ) dinormalisasi. ${\rm Uniform}(a,b)$

Untuk satu, apa artinya distribusi akan dinormalisasi?
Dan kedua, bagaimana kita memverifikasi apakah suatu distribusi dinormalisasi atau tidak?

Saya mengerti dengan menghitung kita mendapatkan data yang dinormalisasi , tetapi di sini diminta untuk memverifikasi apakah suatu distribusi dinormalisasi atau tidak.

\frac{X - mean}{sd}

$\frac{X-\text{mean}}{\text{sd}}$

data-transformation terminology normalization standardization Ada
sumber

3

Apa artinya distribusi dinormalisasi tidak begitu sederhana (dan biasanya distribusi itu sendiri tidak dinormalisasi, tetapi variabel acak). Sebagai contoh, dalam kasus seragam, beberapa orang mungkin berarti "dinaikkan secara linear sehingga mendapatkan seragam standar" (yaitu untuk mendapatkan dan ) ... sedangkan orang lain mungkin berarti "dinaikkan secara linear sehingga untuk mendapatkan mean 0 dan sd 1 ". Untuk seragam, saya biasanya menganggap yang pertama, tetapi seperti yang Anda lihat dari jawaban di bawah, orang lain mungkin menganggapnya sesuatu yang lain. Pilihan terbaik adalah meminta orang yang menggunakan istilah tersebut menjadi kurang ambigu.

a = 0

$a=0$

b = 1

$b=1$

Glen_b -Reinstate Monica

1

Istilah yang lebih konvensional distandarisasi (untuk mencapai rata-rata nol dan SD dari satu) dan dinormalisasi (untuk membawa kisaran ke interval atau untuk mengubah skala norma vektor ke ). Jadi ekspresi ulang adalah standarisasi sedangkan mengalikan kepadatan dengan konstanta untuk membuat adalah normalisasi , karena adalah norma dari .

[0, 1]

$[0,1]$

1

$1$

X \to (X - mean) / S D

$X\to (X-\text{mean})/SD$

f

$f$

C

$C$

\int_{- \infty}^{\infty} C f (x) d x = 1

$\int_{-\infty}^\infty Cf(x)dx=1$

\int f (x) d x

$\int f(x)dx$

L^{1}

$L^1$

f

$f$

whuber

Juga ditanya tentang matematika.SE.

Dilip Sarwate

1

Tolong jangan lintas pos , @Ada. Itu bertentangan dengan kebijakan SE. Jika Anda memposting Q di 1 situs & kemudian berpikir Anda harus mempostingnya di yang lain, tandai Q Anda & minta moderator untuk memigrasikannya untuk Anda.

gung - Reinstate Monica

33

Sayangnya, istilah digunakan secara berbeda di bidang yang berbeda, oleh orang yang berbeda di bidang yang sama, dll. Jadi saya tidak yakin seberapa baik jawaban ini untuk Anda di sini. Anda harus memastikan Anda tahu definisi yang digunakan instruktur / buku teks Anda untuk "dinormalisasi". Namun, berikut adalah beberapa definisi umum:

Centered:

X - m e a n

$X-{\rm mean}$ Standar:

\frac{X - mean}{sd}

$\frac{X-\text{mean}}{\text{sd}}$

\frac{X - min (X)}{max (X) - min (X)}

$\frac{X-\min(X)}{\max(X)-\min(X)}$ Normalisasi dalam hal ini mengubah data Anda ke interval unit. Standarisasi mengubah data Anda menjadi skor- , sebagai catatan @Jeff. Dan pemusatan membuat rata-rata data Anda sama dengan .

z

$z$

0

$0$

Perlu diakui di sini bahwa ketiganya adalah transformasi linear ; dengan demikian, mereka tidak mengubah bentuk distribusi Anda . Yaitu, kadang-kadang orang menyebut transformasi skor "normalisasi" dan percaya, karena hubungan skor dengan distribusi normal, bahwa ini telah membuat data mereka terdistribusi secara normal. Ini tidak begitu (seperti @Jeff juga mencatat, dan seperti yang Anda tahu dengan memplot data Anda sebelum dan sesudah). Jika Anda tertarik, Anda bisa mengubah bentuk data Anda menggunakan keluarga transformasi Box-Cox , misalnya. $z$ $z$

Sehubungan dengan bagaimana Anda dapat memverifikasi transformasi ini, itu tergantung pada apa yang dimaksud dengan itu. Jika maksudnya hanya untuk memeriksa apakah kode tersebut berjalan dengan benar, Anda dapat memeriksa nilai rata-rata, SD, minimum, dan maksimum.

gung - Reinstate Monica
sumber

1

Saya telah melihat dinormalisasi digunakan untuk menyarankan standar atau menyarankan dipasang ke distribusi normal standar yaitu

, jadi dari tiga yang dinormalisasi kemungkinan besar akan disalahpahami. Komentar Ada tentang penerapan konstanta normalisasi ke fungsi kemungkinan adalah interpretasi lain yang mungkin.

Φ^{- 1} (F (X))

$\Phi^{-1}(F(X))$

Henry

4

Dengan menggunakan rumus yang Anda berikan pada setiap skor dalam sampel Anda, Anda mengonversikan semuanya menjadi skor-z .

Untuk memverifikasi bahwa Anda menghitung semua skor-z dengan benar, temukan mean dan standar deviasi baru dari sampel Anda. Jika rata-rata adalah dan standar deviasi adalah , Anda telah melakukan semuanya dengan benar. $0$ $1$

Tujuan melakukan ini adalah untuk meletakkan semuanya dalam satuan relatif terhadap standar deviasi sampel Anda. Ini mungkin berguna untuk berbagai keperluan, seperti membandingkan dua set data yang berbeda yang dinilai menggunakan unit yang berbeda (sentimeter dan inci, mungkin).

Penting untuk tidak bingung dengan menanyakan apakah suatu distribusi normal , yaitu apakah ia mendekati distribusi Gauss .

Jeff
sumber

jadi untuk memeriksa apakah distribusi Uniform dinormalisasi atau tidak itu akan setara dengan mengatakan E (X) = 0 dan Var (X) = 1 di mana X ~ Uniform (a, b)?

2

data bahkan tidak harus dari distribusi yang seragam, mereka bisa dari distribusi apa pun. juga, ini hanya berlaku menggunakan rumus yang Anda berikan; data dapat dinormalisasi dengan cara selain menggunakan skor-z. misalnya, skor IQ dikatakan dinormalisasi dengan skor 100 dan standar deviasi 15.

Jeff

1

Setelah berkonsultasi dengan TA, pertanyaan yang diajukan adalah apakah jika

\int_{- \infty}^{\infty} f (x) d x = 1

$\int_{-\infty}^{\infty}f(x)dx=1$

di mana dalam hal ini adalah densitas seragam (a, b). $f(x)$

Ada
sumber

2

Terminologi yang digunakan di sini adalah fungsi kepadatan probabilitas distribusi dinormalisasi. Karena ini mencerminkan fakta aksiomatis bahwa probabilitas total harus sama dengan

, menanyakan apakah setiap distribusi itu sendiri dinormalisasi (dalam pengertian ini) selalu memiliki jawaban sepele yang sama: tentu saja.

1

$1$

whuber

Inilah yang kami diminta untuk memverifikasi. f (x) tidak benar-benar harus berupa pdf, dan dapat berupa fungsi non-negatif. Untuk fungsi non-negatif mana yang di atas tidak memuaskan, kita selalu dapat berkembang biak dengan konstanta normalisasi

Ada

1

Tidak selalu. Sebagai contoh, misalkan

, fungsi non-negatif yang didefinisikan pada semua bilangan real: tidak ada konstanta normalisasi. Tetapi ketika Anda diberitahu, seperti dalam pernyataan pertanyaan Anda, bahwa "ini-dan-itu adalah PDF untuk distribusi ini-dan-itu" maka tidak ada apa pun untuk memverifikasi: menurut definisi itu terintegrasi ke persatuan.

f (x) = e^{- x}

$f(x)=e^{-x}$

Whuber

Memang benar tidak ada fungsi non-negatif di mana kita dapat membuatnya memenuhi kondisi di atas bahkan jika kita mengalikannya dengan konstanta normalisasi.

Ada

Apa arti "normalisasi" dan bagaimana memverifikasi bahwa sampel atau distribusi dinormalisasi?

Jawaban: