Apakah Anda menolak hipotesis nol ketika

14

Ini jelas hanya masalah definisi atau konvensi, dan hampir tidak ada kepentingan praktis. Jika α diatur ke nilai tradisionalnya 0,05, apakah nilai p 0,0500000000000 ... dianggap signifikan secara statistik atau tidak? Apakah aturan untuk mendefinisikan signifikansi statistik biasanya dianggap sebagai p<α atau pα ??

Harvey Motulsky
sumber
3
Dalam banyak kasus (misalnya atau t -tests biasa) perbedaan secara harfiah tidak masalah karena probabilitas bahwa p -value tepat .05 adalah 0. Ini adalah kasus setiap kali distribusi nol kontinu. ztp
Makro
1
Dalam pengertian yang sangat umum, itu tidak terlalu menjadi masalah, karena (hanya diberi asumsi yang sangat sederhana) nilai- didistribusikan secara seragam di bawah hipotesis nol. p
kardinal
4
Masalah ini timbul dengan diskrit keluarga distribusi, @Cardinal.
whuber
1
@MichaelChernick, saya setuju dengan semua yang Anda katakan, tetapi OP menanyakan pertanyaan ini dalam konteks pemrograman fungsi pengujian hipotesis otomatis: haruskah fungsi itu menolak atau tidak ketika -value persis sama dengan α ? pα
Makro
2
@ Macro Dalam hal itu benar-benar tidak masalah melakukannya. Saya akan mengatakan melempar koin tapi itu memperkenalkan elemen acak. Saya pikir hal termudah adalah untuk selalu menolak pada nilai p yang dihitung tepat 0,05 jika Anda harus mengambil 0,05 sebagai cutoff. Untuk algoritma komputer, yang penting adalah konsistensi dan dokumentasi. Dari mana kita mendapatkan semua jawaban yang tampak canggih ini untuk yang sederhana dan seperti yang dikatakan Harvey sendiri sebuah konvensi yang tidak memiliki kepentingan prectical.
Michael R. Chernick

Jawaban:

13

Mengandalkan Lehmann dan Romano, Menguji Hipotesis Statistik, . Mendefinisikan S 1 sebagai wilayah penolakan dan Ω H sebagai wilayah hipotesis nol, secara longgar, kita memiliki pernyataan berikut, hal. 57 dalam salinan saya:S1ΩH

Jadi seseorang memilih angka antara 0 dan 1, disebut tingkat signifikansi , dan memaksakan kondisi bahwa:α

... Pθ{XS1}α for all θΩH

Karena mungkin saja Pθ{XS1}=α , maka Anda akan menolak untuk nilai-p .α

Pada tingkat yang lebih intuitif, bayangkan pengujian pada ruang parameter diskrit, dan wilayah penolakan (paling kuat) terbaik dengan probabilitas tepat 0,05 di bawah hipotesis nol. Asumsikan wilayah penolakan terbaik terbesar berikutnya (dalam hal probabilitas) memiliki probabilitas 0,001 berdasarkan hipotesis nol. Akan agak sulit untuk dibenarkan, lagi-lagi secara intuitif berbicara, mengatakan bahwa wilayah pertama tidak setara dengan keputusan "pada tingkat kepercayaan 95% ..." tetapi Anda harus menggunakan wilayah kedua untuk mencapai 95% tingkat kepercayaan.

Jbowman
sumber
11

Anda telah menyentuh masalah yang menarik dan agak kontroversial. Ini dapat diringkas secara lucu oleh gambar ini (ditemukan di blog Andrew Gelman tetapi awalnya milik Dan Goldstein ):

Nilai-p ajaib

Pertama-tama, tidak ada yang ajaib tentang 0,05. Selama Anda memilih ambang sebelumnya, ambang 0,1 atau 0,01 bisa masuk akal. Untuk itu, baik memilih yang ingin Anda gunakan cutoff dari atau .05<.05.05 akan sama-sama dibenarkan, asalkan Anda tidak menipu dengan mengubah cutoff Anda setelah mengamati nilai-p Anda.

<.05

Michael McGowan
sumber
Terima kasih untuk grafik yang bagus. Saya belum pernah melihatnya sebelumnya. Lucu. Dan tepat. Ya, para ilmuwan menempatkan terlalu banyak empati pada batas 0,05. Saya setuju bahwa <0,05 atau ≤ 0,05 dapat dibenarkan dari sudut pandang logis atau matematis. Yang saya tanyakan adalah apakah ada konvensi yang lebih sering digunakan.
Harvey Motulsky
Cinta grafik!
rolando2