zisky:
- Vedieť jasne definovať vesmír a vyhodnotiť reprezentatívnosť metódy vzorkovania a toho, kto je systematicky vylúčený
- Schopnosť rozlišovať medzi zaujatosťou v údajoch a stereotypmi prenášanými umelou inteligenciou a ovládať oboje
- Schopnosť vyjadriť zistenia obmedzené na vzorku bez preháňania a napísať úprimnú časť o obmedzeniach.
Najdôležitejším konceptom sociálneho výskumu je vzorka – teda podskupina, ktorú si vyberiete, pretože nemôžete skúmať celú skupinu, ktorá vás zaujíma (vesmír/populácia: všetci ľudia alebo jednotky, o ktorých chce výskum hovoriť) jednu po druhej. Na koho možno zovšeobecniť zistenia štúdie (t. j. „či tento výsledok platí len pre týchto ľudí alebo pre širšiu skupinu“), závisí výlučne od reprezentatívnosti vzorky. Výsledok nesprávnej alebo skreslenej vzorky je nesprávny, bez ohľadu na to, ako dobre je analyzovaný. V tejto lekcii sa naučíte, ako pomocou AI premýšľať o vzorovom dizajne, zisťovať skreslenie – systematický posun údajov alebo interpretáciu jedným smerom a úprimne vyjadrovať hranice zovšeobecňovania.
Tu je potrebné rozlišovať dva druhy predsudkov. Prvým je skreslenie údajov: vzorka nadmerne reprezentuje jednu skupinu a nedostatočne reprezentuje inú skupinu (napr. tých, ktorí sa môžu zúčastniť iba online prieskumu, t. j. tých, ktorí majú prístup na internet). Druhým je vlastné zaujatie AI: AI nesie vzory textov, na ktorých bola vyškolená, a môže vytvárať stereotypné zovšeobecnenia o sociálnej skupine. Dobrý sociálny výskumník musí byť ostražitý voči obom; AI vám môže pomôcť rozpoznať oboje alebo zväčšiť oboje.
Krok za krokom: premýšľanie o reprezentácii
1. Opíš vesmír. Komu chcete povedať o svojom náleze? „Všetci voliči v Türkiye“ a „mladí voliči v štvrti v Istanbule“ sú veľmi odlišné vesmíry. Vzorku nemožno vytvoriť bez toho, aby ste to jasne napísali.
2. Vyberte metódu vzorkovania. Metódy ako náhodné (každý má rovnakú šancu, že budú vybraní), stratifikované (rozdelenie vesmíru do skupín a výber z každej skupiny), snehová guľa (jeden účastník odporúča druhého) poskytujú rôzne možnosti reprezentácie. Umelá inteligencia dokáže vysvetliť výhody a nevýhody každej metódy v jednoduchom jazyku.
3. Opýtajte sa, kto je vynechaný. Každé vzorkovanie niekoho míňa. Online prieskumu chýbajú tí, ktorí nemajú internet, telefonickému prieskumu chýbajú tí, ktorí nemajú pevnú linku, počas denného rozhovoru chýbajú zamestnanci. AI vytvára dobrý kontrolný zoznam pre „koho táto metóda systematicky vylučuje?“
4. Mapové zdroje skreslenia. Uveďte zdroje, ako je skreslenie výberu (kto je vybraný), skreslenie odpovede (kto odpovedá), zaujatosť pripomínania (nesprávne zapamätanie si minulosti).
5. Napíšte limit zovšeobecnenia. Frázujte nález ako „mladí ľudia v tejto vzorke“, nie „všetci tínedžeri“. Umelá inteligencia môže vo vašom koncepte označiť prílišné zovšeobecnenia.
Tip: Dobrú výskumnú správu časť „obmedzenia“ posilňuje, nie oslabuje. Úprimné písanie o tom, koho vaša vzorka nereprezentuje, robí vašu štúdiu spoľahlivejšou. Nechajte si navrhnúť túto sekciu AI, ale sami potvrďte prípadné obmedzenia.
tri mini prípady
Prípad 1 – Skryté skreslenie výberu. Na meranie spokojnosti so službami obce jeden tím umiestnil prieskum na webovú stránku obce a zistil 78% spokojnosť. Keď som sa AI spýtal „komu chýba táto vzorka?“, ukázalo sa, že segment, ktorý už stránku používa (teda má prístup k službe a je pravdepodobne spokojnejší), je zastúpený nadmerne. Zistenie bolo opravené na „78 % medzi používateľmi stránok“.
Prípad 2 – Stereotyp AI. Keď výskumník nechal AI zhrnúť „názor vidieckych starších ľudí na technológiu“, AI pridala stereotypný rámec, ktorý v údajoch nebol, ako napríklad „starší ľudia sa boja technológie“. Keď si to výskumník uvedomil a povedal „spoliehaj sa len na vyhlásenia v prepise“, bolo vidieť, že v údajoch skutočne existuje široká škála postojov.
Prípad 3 – Stratifikovaná korekcia vzorkovania. Vo vzorke 500 ľudí bolo žien 30% v porovnaní s 51% v populácii. AI vysvetlila logiku váženia v jednoduchom jazyku a tím zvážil výsledky podľa proporcií populácie, čo viedlo k reprezentatívnejšiemu obrazu.
Štyri kopírovateľné šablóny
1) Kritika vzorky:
Vesmír môjho výskumu: [popis]. Moja metóda vzorkovania je: [metóda]. Vaša úloha: uveďte, koho by táto vzorka mohla systematicky nedostatočne alebo nadmerne reprezentovať. Samostatne zvážte chyby výberu, reakcie a vyvolania. Pre každé riziko uveďte odporúčanie na zmiernenie. Nezveličujte moje zistenie; Úprimne ukážte hranice.
2) Kontrola zovšeobecnenia:
Preskúmajte tieto nálezové vety: [text]. Označte každú nadmernú generalizáciu. Prepíšte tvrdenia ako „všetci/každý/mladí ľudia/ženy“ užším tvrdením, ktoré údaje skutočne podporujú. Napríklad namiesto „mladí ľudia robia X“ „Y % tínedžerov v tejto vzorke uviedlo X“. Označte akýkoľvek nárok neistého pôvodu.
3) Zachytenie skreslenia AI:
Nižšie som vám dal zhrnutie. Skontrolujte: sú v danom texte SKUTOČNE prítomné nejaké úsudky, prídavné mená alebo zovšeobecnenia, ktoré ste pridali? Označte a odstráňte všetky výrazy, ktoré nie sú v texte, ale pochádzajú z vašich vlastných vzorov. Stačí sa držať toho, čo je v texte.
4) Časť s obmedzeniami konceptu:
Napíšte návrh časti „Obmedzenia“ na základe nasledujúcich informácií o metóde: veľkosť vzorky [n], metóda [x], kontext [y]. Vysvetlite, ako môže každé obmedzenie ovplyvniť zistenia. Ani preháňanie, ani podceňovanie; Buďte vyrovnaní a úprimní. Každú položku potvrdím.
Slabá výzva / Silná výzva
Slabá výzva:
Podľa výsledkov môjho prieskumu má tento názor väčšina mladých ľudí. Napíšte to silnou vetou.
To vedie k nadmernému zovšeobecňovaniu bez toho, aby sme spochybnili vzorku. AI ľahko skĺzne do tvrdenia, ktoré údaje nenesú, ako napríklad „Mladí ľudia v Türkiye...“
Výkonná výzva:
Moja vzorka: 220 vysokoškolákov na jednej univerzite, online prieskum, dobrovoľná účasť. Chcel by som vyjadriť zistenie: 61 % účastníkov vyjadrilo názor X. Napíšte to jednoduchou akademickou vetou, ktorá jasne vyjadrí hranice vzorky (zastúpenie, dobrovoľnícka zaujatosť). Obmedzte zovšeobecňovanie na túto vzorku.
Rozdiel: druhá veta vytvára obhájiteľné tvrdenie, ktoré údaje skutočne podporujú.
Metódy odberu vzoriek a reprezentatívnosť
Metóda
ako to funguje
moc zastupovania
Typické riziko
jednoduchý náhodný
Rovnaká šanca pre všetkých
vysoká
náklady na dopravu
stratifikované
Rozdeľte a vyberte do skupín
vysoká
Chyba definície skupiny
kvóta
Plnenie skupinových sadzieb
stredná
Zaujatosť v rámci skupiny
ľahké
Nepýtajte sa nikoho, kto je zastihnuteľný
nízka
Silné skreslenie výberu
snehová guľa
Podľa návrhu účastníka
nízka
Podobnosť vo vnútri siete
Časté chyby
- Vytvorenie vzorky bez definovania vesmíru. Reprezentáciu nemožno hodnotiť bez toho, aby ste vedeli, na koho budete zovšeobecňovať.
- Zovšeobecnenie výhodného vzorkovania na celú populáciu. Najčastejšia chyba; „respondenti prieskumu“ sú zamieňaní s „všetci“.
- Nikdy sa nepýtaj, kto je vynechaný. Každá metóda niekoho unesie; Hľadajte to vedome.
- Nevšímajúc si stereotyp pridaný AI. Model môže pridať stereotypy, ktoré nie sú prítomné v údajoch.
- Skrytie obmedzení. Skrytie krehkosti vzorky robí štúdiu krehkou a nespoľahlivou.
V súhrne
Hodnota zistenia je taká, aká je reprezentatívnosť vzorky, z ktorej vychádza. AI; je mocnou pomôckou pri vysvetľovaní metód vzorkovania, zmapovaní toho, kto je nedostatočne zastúpený, pri označovaní nadmerných zovšeobecnení a pri zostavovaní úprimnej časti o obmedzeniach. Dajte si však pozor na dve zaujatosti: zaujatosť samotných údajov a stereotypy prenášané AI. Jasne definujte vesmír, opýtajte sa, kto je vynechaný, obmedzte zovšeobecňovanie na vzorku a úprimne si zapíšte obmedzenia.
Aplikačná úloha
Opíšte populáciu a metódu odberu vzoriek pre skutočnú alebo hypotetickú štúdiu. Vyberte, kto môže byť nedostatočne/nadmerne zastúpený z AI, pomocou šablóny „kritika vzorkovania“ a identifikujte aspoň tri zdroje zaujatosti. Potom preložte vyhlásenie o zistení na úzke vyhlásenie, ktoré údaje skutočne podporujú pomocou vzoru „kontrola zovšeobecnenia“. Nakoniec napíšte poctivú časť o obmedzení na polovicu strany.
kontrolný zoznam
- [ ] Jasne som definoval vesmír (na koho to zovšeobecním).
- [ ] Hodnotila som reprezentatívnosť metódy odberu vzoriek.
- [ ] Uviedol som, kto bol systematicky vynechaný.
- [ ] Vyjadril som zistenia obmedzené na vzorku a bez preháňania.
- [ ] Odstránil som stereotypy/zovšeobecnenia, ktoré pridala AI.