Enota 4 / 11

Zasnova raziskave in kvantitativna analiza podatkov

Dobički:

  • Sposobnost odkrivanja vodilnih, dvojnih in dvoumnih pasti v anketnih vprašanjih ter povezovanja vsakega vprašanja s konceptom
  • Sposobnost izvajanja resničnih statističnih izračunov v programu in uporabe umetne inteligence samo za izbiro in interpretacijo metod
  • Sposobnost razlikovanja statistične pomembnosti od praktične pomembnosti in preverjanja predpostavk testa

Kvantitativna raziskava je pristop, ki družbene pojave meri s številkami in jih analizira s statistiko: išče odgovore na vprašanja, kot so koliko ljudi, v kolikšni meri, kakšna je razlika med katerimi skupinami. Najpogostejše orodje za ta pristop je anketa – metoda zbiranja primerljivih podatkov od velikega števila ljudi z uporabo standardnih vprašanj. Nastavitev dobre ankete in pravilna analiza vhodnih podatkov zahteva spretnost; Slabo vprašanje pokvari rezultat že na samem začetku. V tej enoti se boste naučili uporabljati AI za oblikovanje anketnih vprašanj, sestavljanje lestvic (možnosti odgovorov, ki ocenjujejo odnos, npr. "popolnoma se strinjam … sploh se ne strinjam") in analizirati dohodne podatke; vendar boste izvedeli, zakaj bi morali ohraniti statistično presojo.

Kjer je umetna inteligenca najbolj dragocena pri kvantitativni analizi, ni v samem izračunu, temveč v razlagi, kako narediti izračun in kaj pomeni rezultat. Umetna inteligenca lahko namesto vas oriše kodo analize (npr. ukaze za zagon v R ali Pythonu), v preprostem jeziku razloži, kdaj uporabiti statistični test, in vam pomaga razložiti izhod. Nikoli pa ne zaupajte številkam, ki jih umetna inteligenca ustvari »na pamet« v besedilu: jezikovni model ni kalkulator in lahko proizvede napačno srednjo vrednost, odstotek ali p-vrednost. Dejanski izračun se opravi v pravem statističnem programu.

Korak za korakom: od ankete do pregleda

1. Povežite vsako vprašanje s pojmom. Vsako vprašanje, ki ga postavite v anketo, mora meriti koncept v vašem raziskovalnem vprašanju. Ne dodajajte vprašanj samo zato, ker "bi bilo zanimivo." AI vam pomaga preveriti preslikavo koncepta in vprašanja v tabeli.

2. Izločite slaba vprašanja. Vodilna ("Ali ste zadovoljni s to odlično storitvijo?"), dvojna vprašanja ("Je bila storitev hitra in poceni?"), nejasna ("Ali vam je bila pogosto všeč?") vprašanja izkrivljajo podatke. AI je dober pri označevanju teh pasti v vašem osnutku ankete.

3. Dosledno določite lestvico. Če uporabljate Likertovo lestvico (5- ali 7-stopenjsko lestvico strinjanja), naj bodo smer in ocene dosledne skozi celotno anketo. AI ujame nedoslednosti.

4. Počisti podatke. Vhodni podatki lahko vsebujejo manjkajoče odgovore, nedoslednosti ali dva zapisa iste osebe. AI lahko navede korake čiščenja in osnutek kode; Vi se odločite.

5. Izberite pravi test in ga INTERPRETIRAJTE. Ali primerjate dve skupini, iščete odnos? AI pojasni, kateri test je primeren; Vaša naloga je, da izvedete test v programu ter preberete in razumete izhod.

Pozor: Ne recite AI ​​"izračunaj povprečje teh podatkov" in zapišite dobljeno številko neposredno v poročilo. Jezikovni model povzroča napake pri aritmetiki. Dajte izračun narediti v preglednici ali statističnem programu; Uporabite AI samo za njegovo metodo in interpretacijo.

trije mini kovčki

1. primer – vodilno vprašanje popravljeno. Osnutek ankete je vprašal "Kako ste zadovoljni s prevoznimi storitvami naše uspešne občine?" Imel je vprašanje. AI je opazil, da je pridevnik "uspešen" potisnil odgovor na pozitiven. Vprašanje je "Kako ocenjujete prometno dejavnost občine?" je bila nevtralizirana in rezultati so bili bolj uravnoteženi.

Primer 2 – Umetna inteligenca je napačno izračunala. Raziskovalec je v AI prilepil 300 vrstic podatkov kot besedilo in rekel "poiščite povprečno starost"; YZ je rekel 34.2. Ko smo iste podatke dali v tabelo, je bilo dejansko povprečje 31,7. AI je napačno izračunal besedilo; To je bilo popravljeno, ko je bil račun premaknjen v program.

Primer 3 – Pojasnjena izbira testa. Ekipa je želela primerjati povprečni rezultat dveh skupin, vendar ni vedela, kateri test uporabiti. YZ je pojasnil, da je t-test (test, ki preverja, ali je razlika med sredinama dveh skupin naključna) primeren za "dve neodvisni skupini, zvezna spremenljivka", navedel svoje predpostavke in zagotovil osnutek kode. Ekipa je opravila test v programu in interpretirala rezultat.

Štiri predloge za kopiranje

1) Revizija anketnega vprašanja:

Preglejte spodnja anketna vprašanja. Za vsako vprašanje preverite: ali je vodilno, ali je dvojno vprašanje (dve stvari v enem vprašanju), ali je dvoumno, ali se možnosti odgovorov prekrivajo/manjkajo? Podajte težavo in boljšo različico eno ob drugi. Preverite, ali je smer lestvice skladna. Vprašanja: [tukaj]

2) Tabela preslikav konceptov in vprašanj:

Moje raziskovalno vprašanje: [vprašanje]. Moji ključni pojmi: [seznam]. Razporedite naslednja anketna vprašanja v tabelo: kateri koncept meri posamezno vprašanje? Označite vprašanja, ki se ne navezujejo na noben pojem (»ekstra«) in pojma, ki nimajo vprašanj (»idle«). Anketa: [tukaj]

3) Načrt čiščenja podatkov (osnutek kode):

Imam nabor anketnih podatkov z naslednjimi spremenljivkami: [spremenljivke]. Daj mi kontrolni seznam za čiščenje podatkov in osnutek kode S VRSTICAMI ZA PRIPOMBE za [R/Python]: manjkajoči podatki, odstopanja, podvojeni zapisi, nedosledno kodiranje. Zagnal bom kodo in preveril izhod; Ne računaj.

4) Statistični komentar (jaz sem izračunal):

Zagnal sem [ime testa] in dobil naslednji rezultat: [output]. Razložite ta rezultat v preprostem jeziku: kaj pomeni v praksi, ločite med statistično pomembnostjo in praktično pomembnostjo ter vas opomni, katere predpostavke je treba preveriti. Ne pretiravajte z rezultatom; Povej mi tudi svoje meje.

Šibek poziv/močan poziv

Šibek poziv:

Izračunajte srednje vrednosti skupin v teh podatkih in povejte, katera je višja. [500 vrstic podatkov]

AI poskuša izračunati znotraj besedila in lahko ustvari napačne številke. Poleg tega je nezanesljivo odgovoriti na vprašanje "Ali obstaja pomembna razlika" brez statističnega testiranja.

Močan poziv:

Želim primerjati rezultate dveh skupin: zvezna spremenljivka, dve neodvisni skupini. (1) Kateri statistični test je primeren in zakaj? (2) Kakšne so njegove predpostavke? (3) Osnutek kode komentarja za [R/Python]. Izračun bom naredil v programu; Podate le metodo in kodo, ne ustvarjate številk.

Razlika: AI se ne uporablja več kot nezanesljiv kalkulator, ampak kot zanesljiv svetovalec metod.

Delitev dela pri kvantitativnih nalogah

Iskanje

Je AI varen?

Kako uporabljati

Revizija oblikovanja vprašanj

ja

Označevanje pasti

Doslednost lestvice

ja

kontrolni seznam

Koda za brisanje podatkov

Da (osnutek)

Zaženete kodo

Račun v besedilu

št

Nikoli ne zaupaj

Izbira testa

ja

Razložite metodo

Zaključni komentar

Da (podpora)

Na vas je, da presodite

Pogoste napake

  • Neposredno z uporabo številke, ki jo ustvari AI. Jezikovni model je v aritmetiki napačen; Izračun vnesite v program.
  • Postavljanje vodilnega vprašanja. Pridevniki in predpostavke izkrivljajo odgovor.
  • Mešanje statistične pomembnosti s praktično pomembnostjo. "Pomembna" je lahko celo majhna razlika; Poglejte velikost.
  • Preskakovanje predpostavk. Vsak preizkus ima predpogoje; Ne komentirajte brez preverjanja.
  • Postavljanje dodatnih vprašanj. Vsako anketno vprašanje mora biti povezano s pojmom; ostalo napihuje podatke.

Če povzamem

AI v kvantitativnem raziskovanju; Je močan svetovalec pri lovljenju pasti anketnih vprašanj, preslikavi konceptov in vprašanj, pripravi kode za čiščenje in analizo podatkov ter razlagi rezultatov v preprostem jeziku. Vendar nikoli ne dovolite, da AI naredi dejanski izračun; Jezikovni model ni kalkulator. Izberete test, vendar ga zaženete v programu, preberete rezultat in ločite med statistično pomembnostjo in praktično pomembnostjo. AI pospeši metodo; Odgovornost za vprašanje in komentar je vaša.

Aplikacijska naloga

Napišite osnutek ankete z 10 vprašanji. Imejte zastavico AI in popravite vodilna, podvojena in dvoumna vprašanja s predlogo »Revizija anketnih vprašanj«. Nato ustvarite majhen vzorčni niz podatkov (20-30 vrstic) in izračunajte dejansko povprečje in odstotke v programu za preglednice; Iste podatke dajte AI kot besedilo, jih primerjajte z dobljenimi številkami in sporočite razliko. Nazadnje zagotovite interpretacijo izhodnega rezultata testa s predlogo "statistične interpretacije".

kontrolni seznam

  • [ ] Vsako anketno vprašanje sem povezal s pojmom.
  • [ ] Izločila sem vodilna, dvojna in dvoumna vprašanja.
  • [ ] Dejanski izračun sem naredil v statističnem programu, ne v AI.
  • [ ] Preveril sem predpostavke testa.
  • [ ] Ločil sem statistično pomembnost od praktične pomembnosti.