Eining 3 / 11

Sýnataka, framsetning og hlutdrægni

Hagnaður:

  • Að geta skilgreint alheiminn á skýran hátt og metið dæmigerð sýnatökuaðferðina og hverjir eru kerfisbundið útilokaðir
  • Hæfni til að greina á milli hlutdrægni í gögnum og staðalímynda sem gerðar eru af gervigreind og stjórna báðum
  • Geta til að tjá niðurstöður takmarkaðar við sýnishorn, án þess að ýkja, og skrifa heiðarlegan takmarkanahluta.

Mikilvægasta hugtakið í samfélagsrannsóknum er úrtakið — það er, undirhópurinn sem þú velur vegna þess að þú getur ekki skoðað allan hópinn sem þú hefur áhuga á (alheimurinn/þjóðin: allt fólkið eða einingarnar sem rannsóknin vill tala um) eitt í einu. Til hvers hægt er að alhæfa niðurstöður rannsókna (þ.e. „hvort þessi niðurstaða gildir eingöngu fyrir þetta fólk eða fyrir breiðari hóp“) fer algjörlega eftir því hvort úrtakið sé dæmigert. Niðurstaðan af rangu eða hlutdrægu sýni er röng, sama hversu vel það er greint. Í þessari einingu muntu læra hvernig á að nota gervigreind til að hugsa um sýnishönnun, greina hlutdrægni - kerfisbundið gagnastreymi eða túlkun í eina átt og tjá heiðarlega takmörk alhæfingar.

Hér þarf að greina tvenns konar fordóma. Í fyrsta lagi er hlutdrægni í gögnum: úrtakið er ofurfulltrúi einn hóps og vantáklar fyrir annan hóp (t.d. þeir sem geta aðeins tekið þátt í netkönnuninni, þ.e. þeir sem hafa netaðgang). Annað er eigin hlutdrægni gervigreindarinnar: gervigreindin ber mynstur textanna sem hann hefur verið þjálfaður á og getur framleitt staðalímyndar alhæfingar um félagslegan hóp. Góður félagsfræðingur verður að vera vakandi fyrir hvoru tveggja; AI getur hjálpað þér að þekkja bæði, eða það getur stækkað bæði.

Skref fyrir skref: að hugsa um framsetningu

1. Lýstu alheiminum. Hverjum viltu segja frá uppgötvun þinni? „Allir kjósendur í Türkiye“ og „ungir kjósendur í hverfi í Istanbúl“ eru mjög ólíkir alheimar. Ekki er hægt að koma á sýni án þess að skrifa þetta skýrt.

2. Veldu sýnatökuaðferðina. Aðferðir eins og handahófskenndar (allir hafa jafna möguleika á að verða valdir), lagskipt (skipta alheiminum í hópa og velja úr hverjum hópi), snjóbolti (einn þátttakandi mælir með öðrum) gefa mismunandi framsetningarkraft. AI getur útskýrt kosti og galla hverrar aðferðar á einföldu máli.

3. Spyrðu hver er skilinn útundan. Sérhver sýnishorn saknar einhvers. Netkönnun saknar þeirra sem eru án nets, símakönnunar sakna þeirra sem eru án jarðlína, dagviðtal saknar starfsmanna. AI framleiðir góðan gátlista fyrir „hverja útilokar þessi aðferð kerfisbundið?

4. Korta heimildir hlutdrægni. Skráðu heimildir eins og valhlutdrægni (hver er valinn), svarhlutdrægni (hver svarar), muna hlutdrægni (mismuna fortíðina).

5. Skrifaðu alhæfingarmörkin. Setjið niðurstöðuna sem „ungt fólk í þessu úrtaki,“ ekki „allir unglingar“. AI getur flaggað ofalhæfingar í drögunum þínum.

Ábending: Góð rannsóknarskýrsla er styrkt, ekki veikt, með hlutanum „takmarkanir“. Að skrifa heiðarlega um hverja úrtakið þitt stendur ekki fyrir gerir rannsóknina þína áreiðanlegri. Láttu gervigreindina búa til þennan hluta, en staðfestu allar takmarkanir sjálfur.

þrjú smámál

Tilfelli 1 - Falinn valhlutdrægni. Til að mæla ánægju með þjónustu sveitarfélags setti eitt teymi könnun á heimasíðu sveitarfélagsins og fann 78% ánægju. Þegar ég spurði AI „hvern vantar þetta sýnishorn?“ kom í ljós að sá hluti sem þegar notar síðuna (þ.e. hefur aðgang að þjónustunni og er líklega ánægðari) er ofboðinn. Niðurstaðan var leiðrétt í „78% meðal notenda vefsins.

Tilvik 2 — Staðalmynd gervigreindar. Þegar rannsakandi lét gervigreind draga saman „sýn aldraðra í dreifbýli á tækni,“ bætti gervigreind við staðalímyndum ramma sem var ekki í gögnunum, eins og „aldrað fólk er hræddur við tækni“. Þegar rannsakandi áttaði sig á þessu og sagði „reiðu þig bara á staðhæfingarnar í afritinu“ sást að það var í raun margs konar viðhorf í gögnunum.

Tilvik 3 — Lagskipt úrtaksleiðrétting. Í 500 manna úrtaki voru konur 30% samanborið við 51% í þýðinu. AI útskýrði vigtunarrökfræðina á einföldu máli og teymið vigtaði niðurstöðurnar í samræmi við íbúahlutföll, sem leiddi til dæmigerðar myndar.

Fjögur afritanleg sniðmát

1) Gagnrýni á úrtakið:

Alheimur rannsókna minnar: [lýsing]. Úrtaksaðferðin mín er: [aðferð]. Verkefni þitt: skrá hver þetta úrtak gæti kerfisbundið undir- eða offulltrúa. Íhugaðu val, svörun og munavillur sérstaklega. Gefðu ráðleggingar um mótvægisaðgerðir fyrir hverja áhættu. Ekki ýkja niðurstöðu mína; Sýndu mörk heiðarlega.

2) Alhæfingareftirlit:

Skoðaðu þessar finna setningar: [texti]. Merktu við hverja ofalhæfingu. Endurskrifaðu fullyrðingar eins og „allir/allir/ungt fólk/konur“ með þrengri fullyrðingu sem gögnin styðja í raun og veru. Til dæmis, í stað „ungt fólk gerir X,“ sagði „Y% unglinga í þessu úrtaki X“. Merktu allar fullyrðingar um óvissan uppruna.

3) AI hlutdrægni fanga:

Ég gaf þér samantektina hér að neðan. Athugaðu: eru einhverjir dómar, lýsingarorð eða alhæfingar sem þú bættir VIRKLEGA við í þessum texta? Merktu og fjarlægðu allar tjáningar sem eru ekki í textanum en koma frá þínum eigin mynstrum. Haltu þig bara við það sem stendur í textanum.

4) Drög að takmörkunum:

Skrifaðu drög að „Takmörkunum“ hluta byggt á eftirfarandi upplýsingum um aðferðina: úrtaksstærð [n], aðferð [x], samhengi [y]. Útskýrðu hvernig hver takmörkun getur haft áhrif á niðurstöðurnar. Hvorki ýkjur né vanmat; Vertu yfirvegaður og heiðarlegur. Ég mun staðfesta hvert atriði.

Veik kvaðning / Sterk kvaðning

Veik kvaðning:

Samkvæmt niðurstöðum könnunarinnar hefur flest ungt fólk þessa skoðun. Skrifaðu þetta í sterkri setningu.

Þetta veldur ofalhæfingu án þess að efast um úrtakið. AI rennur auðveldlega inn í fullyrðingu sem gögnin bera ekki, eins og "Ungt fólk í Türkiye..."

Öflug tilvitnun:

Úrtakið mitt: 220 grunnnemar við einn háskóla, netkönnun, frjáls þátttaka. Mig langar til að koma á framfæri niðurstöðu: 61% þátttakenda lýstu skoðun X. Skrifaðu þetta í einfaldri fræðilegri setningu sem segir skýrt frá mörkum úrtaksins (framsetning, hlutdrægni sjálfboðaliða). Takmarkaðu alhæfingu við þetta úrtak.

Munurinn: önnur setningin gefur af sér forsvaranlega fullyrðingu sem gögnin styðja í raun.

Úrtaksaðferðir og dæmigerð

Aðferð

Hvernig virkar það

framsetningarvald

Dæmigerð áhætta

einfalt handahófi

Jöfn tækifæri fyrir alla

hátt

flutningskostnaður

lagskipt

Skiptu og veldu í hópa

hátt

Hópskilgreiningarvilla

kvóta

Fylling hópaverð

miðlungs

Hlutdrægni innan hóps

auðvelt

Ekki spyrja neinn sem hægt er að ná í

lágt

Alvarleg valhlutdrægni

snjóbolti

Eftir tillögu þátttakenda

lágt

Innra netkerfi líkt

Algeng mistök

  • Að koma á sýni án þess að skilgreina alheiminn. Ekki er hægt að meta framsetningu án þess að vita til hvers þú munt alhæfa.
  • Alhæfa þægindaúrtak fyrir allt þýðið. Algengustu mistökin; „viðmælendum könnunar“ er ruglað saman við „allir“.
  • Aldrei að spyrja hver sé skilinn útundan. Sérhver aðferð rænir einhverjum; Leitaðu að þessu meðvitað.
  • Tek ekki eftir staðalímyndinni sem AI hefur bætt við. Líkanið gæti bætt við staðalímyndum sem eru ekki til staðar í gögnunum.
  • Að fela takmarkanir. Að fela veikleika úrtaksins gerir rannsóknina viðkvæma, ekki áreiðanlega.

Í stuttu máli

Gildi niðurstöðu er jafn mikið og dæmigerður úrtakinu sem hún byggir á. gervigreind; er öflugt hjálpartæki við að útskýra úrtaksaðferðir, kortleggja hverjir eru undirfulltrúar, flagga ofalhæfingar og semja heiðarlegan takmarkanakafla. En varist tvenns konar hlutdrægni: hlutdrægni gagnanna sjálfra og staðalímyndirnar sem gervigreindin ber með sér. Skilgreindu alheiminn skýrt, spurðu hverjir eru útundan, takmarkaðu alhæfingu við úrtakið og skrifaðu niður takmarkanir heiðarlega.

Umsóknarverkefni

Lýstu þýði og sýnatökuaðferð fyrir raunverulega eða ímyndaða rannsókn. Dragðu út hverjir gætu verið undir/offulltrúar úr gervigreindinni með „sýnishornsgagnrýni“ sniðmátinu og auðkenndu að minnsta kosti þrjár uppsprettur hlutdrægni. Þýddu síðan niðurstöðuyfirlýsingu í þrönga staðhæfingu sem gögnin styðja í raun með „alhæfingarathugun“ mynstrinu. Að lokum skaltu skrifa heiðarlegan hálfsíðu takmarkanahluta.

gátlisti

  • [ ] Ég hef skýrt skilgreint alheiminn (sem ég mun alhæfa yfir).
  • [ ] Ég lagði mat á dæmigerni sýnatökuaðferðarinnar.
  • [ ] Ég taldi upp hverjir voru kerfisbundið útundan.
  • [ ] Ég tjáði niðurstöðurnar takmarkaðar við úrtakið og án þess að ýkja.
  • [ ] Ég fjarlægði staðalmyndirnar/alhæfingarnar sem gervigreind bætti við.