Awọn anfani:
- Agbara lati ṣalaye asọye asan ni deede, p-iye, aarin igbẹkẹle ati agbara iṣiro ati lo oye atọwọda ni yiyan idanwo ati itumọ.
- Agbara lati ṣe iyatọ ohun ti o jẹ ati kii ṣe p-iye (kii ṣe iwọn ipa, kii ṣe iṣeeṣe ti deede) ati loye idi ti atunṣe lafiwe pupọ ṣe pataki
- Agbara lati ṣe idanimọ awọn asọye ti a ṣe nipasẹ itetisi atọwọda ti o daamu itumọ pẹlu ohun elo ati jabo wọn pẹlu iwọn ipa ati aidaniloju
Ohun elo ti o lo julọ ati ti ko loye julọ ti awọn iṣiro jẹ idanwo ilewq. Ero ipilẹ jẹ rọrun: a ni ẹtọ kan (fun apẹẹrẹ “itumọ ti awọn ẹgbẹ meji wọnyi yatọ”) ati idakeji rẹ, arosọ asan (H0 — “ko si iyatọ kosi”). Idanwo naa ṣe iwọn bawo ni data ṣe gba pẹlu ile-aye asan. Ninu ẹyọ yii a yoo rii bii itetisi atọwọda (AI) ṣe jẹ ki yiyan idanwo ati itumọ rọrun, ṣugbọn idi ti awọn ọfin ni ayika p-iye jẹ eyiti o wọpọ ati eewu. Jẹ ki a bẹrẹ lati ibẹrẹ: AI mọ iru sintasi idanwo lati kọ; ṣugbọn o jẹ iṣẹ rẹ lati tumọ boya arosinu ti idanwo naa ni itẹlọrun ati kini abajade tumọ si gaan.
Kini gangan ni p-iye?
P-iye jẹ iṣeeṣe pe abajade ti o ṣe akiyesi, tabi abajade ti o ga julọ, yoo waye nipasẹ ayeraye nigbati arosọ asan jẹ otitọ (ie, kosi ipa kankan). A kekere p-iye (0.05 ni awọn ibile ala) tumo si "yoo jẹ iyalenu lati ri iru data ti o ba ti nibẹ gan ko si ipa"; Eyi ni a gba ẹri ti o lodi si idawọle asan.
Bayi jẹ ki a ṣalaye kini p-iye kii ṣe - eyiti AI nigbagbogbo n daamu:
- P-iye kii ṣe iṣeeṣe pe arosọ asan jẹ otitọ. p=0.03 ko tumọ si "iṣeeṣe 3% ti ko si ipa".
- Awọn p-iye ko ṣe afihan iwọn ipa naa. Ipa ti o kere pupọ le jẹ ki iye p-kekere kan ni ayẹwo nla kan.
- P-iye ko jẹri pe wiwa jẹ pataki tabi gidi. "Ti o ṣe pataki" jẹ ọrọ iṣiro, "pataki" jẹ idajọ.
- p>0.05 ko tumọ si "ko si ipa"; O tumọ si "a ko le ṣe afihan ipa naa pẹlu data yii." Isansa ẹri kii ṣe ẹri isansa.
Išọra: Aṣiṣe itumọ AI ti o wọpọ julọ n ṣafihan ọrọ naa “pataki” bi “pataki/ipa/ipa nla.” Iṣiro iṣiro ati iwulo pataki jẹ awọn nkan oriṣiriṣi meji; Nigbagbogbo jabo awọn meji lọtọ.
Aarin igbẹkẹle ati iwọn ipa: alaye ti o ni oro sii
Dipo p-iye kan, aarin igbẹkẹle jẹ alaye pupọ diẹ sii: o funni ni iwọn awọn iye to ṣeeṣe fun iṣiro rẹ. Awọn gbolohun ọrọ "Ipa 1,200, 95% igba igbekele [300, 2,100]" fihan itọnisọna mejeeji, titobi, ati aidaniloju; "p<0.05" kan sọ "jina si odo". Iwa iṣiro ode oni nlo p-iye kii ṣe nikan; ṣe iṣeduro ijabọ pẹlu iwọn mẹta ti ipa + aarin igbẹkẹle + p-iye.
Agbara iṣiro ati apẹẹrẹ
Agbara iṣiro jẹ iṣeeṣe ti iṣawari ipa kan ti o wa gangan (1 iyokuro iṣeeṣe ti iru aṣiṣe II, ie “sonu ipa gidi”). Iwadi ti ko ni agbara ni ifaragba si awọn ewu meji: (1) o padanu awọn ipa otitọ (odi eke); (2) Awọn abajade diẹ ti o yipada lati jẹ pataki gbe awọn iwọn inflated — eyi ti a pe ni eegun olubori nitori pe awọn asọtẹlẹ ti o pọ si nikan le kọja iloro. Nitorinaa, o jẹ adaṣe ti o dara lati ṣe iṣiro agbara / apẹẹrẹ ṣaaju itupalẹ. AI ṣe koodu fun akọọlẹ yii; O pinnu iwọn ipa ibi-afẹde pẹlu imọ-jinlẹ.
Iṣoro lafiwe pupọ
Nigbati o ba n ṣe idanwo kan, ala ti 0.05 tumọ si “ewu 5% ti awọn idaniloju eke”. Ṣugbọn ti o ba ṣe awọn idanwo 20, ni apapọ ọkan yoo nireti lati fun p<0.05 nipasẹ aye, paapaa nigbati gbogbo wọn ko ni doko gidi. Eyi ni a npe ni iṣoro lafiwe pupọ. Iṣeeṣe awọn idaniloju eke n pọ si ni iyara nigbati awọn nọmba nla ti awọn oniyipada, awọn ẹgbẹ-ẹgbẹ, tabi awọn oniyipada abajade ni idanwo. Ojutu ni lati ṣe atunṣe ẹnu-ọna: Bonferroni (pinpin ẹnu-ọna nipasẹ nọmba awọn idanwo - ti o muna), awọn ọna Holm tabi Benjamini-Hochberg ti o ṣakoso awọn oṣuwọn wiwa eke (FDR). Ewu yii paapaa pọ si ni ọjọ-ori AI, bi AI le ṣe agbejade awọn dosinni ti awọn idanwo ni iṣẹju-aaya - eyi ni koko-ọrọ taara ti ẹyọ ti o tẹle (p-sasaka).
Tabili afiwe: kini p-iye sọ ati ohun ti ko sọ
ikosile
Se ooto ni?
Apejuwe
"p=0.02, iṣeeṣe ti ko si ipa jẹ 2%"
ti ko tọ
p kii ṣe iṣeeṣe H0
"p <0.05, ipa naa tobi"
ti ko tọ
p ko tọka iwọn
"p=0.20, ko si ipa"
ti ko tọ
Ko ni anfani lati ṣafihan kii ṣe isansa
"p<0.05, ẹri wa lodi si H0"
Otitọ
Ṣọra ati lori aaye
"Ipa 1.200 [300; 2.100], p = 0.01"
ti o dara ju
Iwọn + aidaniloju + ẹri
Mẹrin daakọ ta
1. Yiyan idanwo to tọ:
Ipa rẹ: oluranlọwọ idanwo iṣiro. Mo fẹ lati fi ṣe afiwe awọn tumosi ti meji ominira awọn ẹgbẹ (tesiwaju oniyipada). Fun mi: idanwo wo ni o yẹ (pẹlu awọn arosinu rẹ: deede, dọgbadọgba ti iyatọ), yiyan ti a ko ba pade arosinu (fun apẹẹrẹ Welch, Mann-Whitney), ati koodu R. Emi yoo ṣiṣe abajade ati ṣayẹwo awọn awqn.
2. Ijabọ p-iye ni deede:
Ṣe ijabọ abajade idanwo ni isalẹ, ṣugbọn Awọn ofin: - MAA ṢE ṣafihan p-iye bi “iṣeeṣe ti H0” tabi “iwọn ipa”, rii daju pe o ni iwọn ipa ati aarin igba 95%, - kọ “pataki” ati “pataki” lọtọ, ti p> 0.05, MAA ṢE sọ “ko si ipa”, sọ “a ko le ṣafihan”. Abajade: [lẹẹmọ]
3. Iṣiro agbara/apẹẹrẹ:
Mo n gbero idanwo kan: awọn ẹgbẹ meji, iwọn ipa ti a nireti (Cohen's d) ~ 0.4, agbara 0.80, alpha 0.05. Kọ koodu R ti o ṣe iṣiro iwọn ayẹwo ti a beere (packwr pwr) ati ṣe alaye awọn ewu ti ikẹkọ agbara kekere (egun olubori).
4. Atunse lafiwe pupọ:
Mo ti ṣe awọn idanwo ile-aye lọtọ 15 ati pe Mo ni awọn iye-p. Kọ koodu R ti o kan awọn atunṣe Bonferroni ati Benjamin-Hochberg (FDR), ṣe alaye iyatọ laarin awọn ọna meji, ati ṣe akopọ ninu gbolohun kan idi ti Emi ko gbọdọ gbẹkẹle igboro p<0.05.
Ailagbara kiakia / Alagbara kiakia
Ibere ailagbara:
Ṣe abajade idanwo yii ni itumọ bi? Ọrọìwòye lori esi.
Ibeere yii ṣe idẹkùn AI ni alakomeji "itumọ / ti kii ṣe itumọ"; o ṣeese ṣe agbejade gbolohun kan ti o daamu titobi pẹlu pataki, gẹgẹbi "bẹẹni, o ṣe pataki, ipa naa lagbara."
Ibere ti o lagbara:
Ipa rẹ: oluranlọwọ iṣiro akiyesi. Tumọ abajade ṣugbọn: (1) fun iwọn ipa + 95% aarin igbẹkẹle + p-iye papọ, (2) pataki lọtọ lati pataki, (3) p>0.05 ni “ko le ṣafihan”, (4) beere awọn idanwo melo ni mo ṣe; Ti o ba ju ọkan lọ, daba atunṣe lafiwe pupọ, (5) leti pe awọn arosinu ti idanwo yẹ ki o ṣayẹwo.
Iyatọ: iyara to lagbara nfi ipa mu ijabọ ọlọrọ ati aabo lodi si awọn ẹgẹ p-iye.
mẹta mini igba
Ọran 1 - “Imi pataki” ti kii ṣe pataki ni apẹẹrẹ nla. Oluyanju kan rii iyatọ iyatọ laarin awọn ẹgbẹ mejeeji “pataki pupọ” ni p<0.001 ninu data pẹlu awọn akiyesi 500,000. Ṣugbọn iyatọ jẹ awọn aaye 0.3 nikan (ti 100) ati pe o jẹ asan. Apeere nla naa ṣe paapaa iyatọ kekere “pataki”. Nigbati iwọn ipa ti royin, wiwa ti a rii pe ko ṣe pataki. Ẹkọ: pataki kii ṣe titobi; Ti n ba tobi, gbogbo iyatọ jẹ pataki.
Case 2 - Multiple igbeyewo iruju. Ẹgbẹ kan ṣe idanwo awọn oniyipada abajade 22; Ọkan ninu wọn ṣe afihan p=0.04 ati pe a kede bi “a rii ipa naa”. Pẹlu atunṣe Bonferroni, ẹnu-ọna dinku si 0.05/22 = 0.0023; 0.04 ko kọja ẹnu-ọna yii. Abajade “itumọ” nikan ni yoo jẹ nipasẹ ayeraye ninu awọn idanwo 22. Ẹkọ: nigba idanwo pupọ, atunṣe jẹ pataki.
Irú 3 - Underpower ati awọn Winner ká egún. Iwadii awaoko kekere kan (n=15 fun ẹgbẹ kọọkan) rii ipa ti o tobi pupọ (d=0.9) ati pataki. Iwadi isọdọtun nla kan dinku ipa si d = 0.2. Apeere kekere ti gba laaye apọju nikan lati kọja iloro naa. Ẹkọ: Awọn iwọn ipa pataki ni agbara kekere ko le ni igbẹkẹle.
Awọn aṣiṣe ti o wọpọ
- Idarudapọ itumọ pẹlu pataki / titobi. Ipa naa ko tobi nitori p kere; Iroyin iwọn ipa lọtọ.
- Asise p-iye fun iṣeeṣe ti H0. p kii ṣe “iṣeeṣe ti ipa kankan”; ni conceptually o yatọ si.
- Kika p>0.05 bi "ko si ipa". Ikuna lati ṣafihan kii ṣe ẹri isansa; Sọ aidaniloju naa.
- Ko ṣe atunṣe fun idanwo-pupọ. Pupọ awọn idanwo ṣe agbejade awọn idaniloju eke; Waye Bonferroni/FDR.
- Foju agbara. Ipa pataki ti o wa ninu ayẹwo kekere jẹ abumọ; Ṣe iṣiro agbara ṣaaju itupalẹ.
Imọran: Ṣaaju ki o to kọ abajade bi “pataki,” beere awọn ibeere meji: “Ṣe ipa ti o ṣe pataki (titobi)?” ati “Ayewo melo ni MO ṣe ṣaaju ki Mo to rii abajade yii?” Ibeere keji ni idanwo litmus ti otitọ.
Ni soki
Idanwo arosọ ati p-iye jẹ alagbara ṣugbọn awọn irinṣẹ ti ko loye. Awọn p-iye ni iṣeeṣe ti ri data nigbati awọn asan ilewq jẹ otitọ; Iṣeeṣe ti H0 kii ṣe titobi ipa tabi pataki ti wiwa. Nigbagbogbo jabo pataki pẹlu iwọn ipa ati aarin igbẹkẹle; Maṣe ka p>0.05 bi "ko si ipa"; lo atunṣe lafiwe pupọ ti o ba ti ṣe ọpọlọpọ awọn idanwo; Ṣe akiyesi eewu ti awọn ipa abumọ lati awọn ẹkọ-kekere. AI ṣe agbejade koodu idanwo ati alaworan; O jẹ ojuṣe rẹ lati ṣe iyatọ laarin itumọ ati ohun elo ati lati ṣayẹwo awọn ero inu.
Ohun elo iṣẹ-ṣiṣe
Ṣe afiwe awọn ọna laarin awọn ẹgbẹ meji ninu eto data kan. Beere AI fun idanwo ti o yẹ (pẹlu awọn ero inu rẹ) ati koodu, ṣiṣẹ ki o ṣayẹwo awọn arosinu. Jabọ abajade pẹlu awọn paati mẹta: iwọn ipa, aarin igbẹkẹle 95%, p-iye. Lẹhinna ronu nipa ọpọlọpọ awọn afiwera oriṣiriṣi ti o le ṣe lori data kanna; Ti o ba ti ṣiṣe awọn idanwo pupọ, lo atunṣe Bonferroni tabi FDR ki o jabo ti abajade naa ba wa. Ni ipari, kọ iṣiro agbara inira fun itupalẹ rẹ.
akojọ ayẹwo
- [] Mo ti yan idanwo naa pẹlu awọn ero inu rẹ ati ṣayẹwo awọn ero inu.
- [] Mo royin abajade bi iwọn ipa + aarin igbẹkẹle + p-iye.
- [] Mo tọju “pataki” ati “pataki” lọtọ; Emi ko ro pe p jẹ iṣeeṣe H0.
- [] Mo ti kowe p>0.05 bi "a ko le fi han" kuku ju "ko si ipa".
- [] Mo lo atunṣe lafiwe pupọ ti MO ba sare awọn idanwo pupọ.
- [] Mo ṣe ayẹwo agbara iṣapẹẹrẹ; Mo ṣe akiyesi nipa iwọn ipa ni agbara kekere.