Eenheid 4 / 11

Enquêteontwerp en kwantitatieve gegevensanalyse

Winst:

  • Mogelijkheid om leidende, dubbele en dubbelzinnige valkuilen in enquêtevragen te detecteren en elke vraag aan een concept te koppelen
  • Mogelijkheid om echte statistische berekeningen uit te voeren in een programma en kunstmatige intelligentie alleen te gebruiken voor methodeselectie en interpretatie
  • Vermogen om statistische significantie te onderscheiden van praktische significantie en testaannames te controleren

Kwantitatief onderzoek is een aanpak die sociale verschijnselen meet met cijfers en analyseert met statistieken: het zoekt antwoorden op vragen als hoeveel mensen, in welk tempo, welk verschil er is tussen welke groepen. Het meest gebruikte instrument voor deze aanpak is de enquête: een methode om vergelijkbare gegevens van een groot aantal mensen te verzamelen met behulp van standaardvragen. Het opzetten van een goede enquête en het correct analyseren van binnenkomende data vereist vaardigheid; Een slechte vraag bederft het resultaat vanaf het begin. In dit onderdeel leer je hoe je AI kunt gebruiken om enquêtevragen te ontwerpen, schalen te construeren (antwoordopties die een houding beoordelen, bijvoorbeeld "helemaal mee eens … helemaal mee eens"), en binnenkomende gegevens te analyseren; maar je zult leren waarom je je statistische oordeel moet behouden.

Waar AI het meest waardevol is bij kwantitatieve analyse, zit niet in de berekening zelf, maar in het uitleggen hoe de berekening moet worden uitgevoerd en wat het resultaat betekent. De AI kan analysecode voor u schetsen (bijvoorbeeld opdrachten die u in R of Python kunt uitvoeren), in duidelijke taal uitleggen wanneer u een statistische test moet gebruiken en u helpen de uitvoer te interpreteren. Maar vertrouw nooit op de cijfers die de AI ‘uit je hoofd’ in tekst genereert: een taalmodel is geen rekenmachine en kan het verkeerde gemiddelde, percentage of p-waarde opleveren. De daadwerkelijke berekening gebeurt in een echt statistiekprogramma.

Stap voor stap: van enquête naar review

1. Koppel elke vraag aan een concept. Elke vraag die u in de enquête stelt, moet een concept in uw onderzoeksvraag meten. Voeg geen vragen toe alleen maar omdat 'het interessant zou zijn'. AI helpt u de concept-vraag-toewijzing in een tabel te controleren.

2. Verwijder slechte vragen. Leidende ("Ben je tevreden met deze geweldige service?"), Dubbele vragen ("Was de service snel en goedkoop?"), Vage ("Vond je het vaak leuk?") Vragen vertekenen de gegevens. AI is goed in het signaleren van deze valkuilen in uw conceptenquête.

3. Stel de schaal consequent vast. Als u een Likert-schaal gebruikt (een schaal van 5 of 7 punten), zorg er dan voor dat de richting en beoordelingen consistent blijven gedurende de hele enquête. AI vangt inconsistenties op.

4. Gegevens wissen. Binnenkomende gegevens kunnen ontbrekende antwoorden, inconsistenties of twee records van dezelfde persoon bevatten. AI kan opruimstappen en conceptcode vermelden; Jij beslist.

5. Kies de juiste test en INTERPRETEER deze. Vergelijk je twee groepen, op zoek naar een relatie? AI legt uit welke test passend is; Het is jouw taak om de test in het programma uit te voeren en de uitvoer te lezen en te begrijpen.

Let op: vertel de AI niet "bereken het gemiddelde van deze gegevens" en schrijf het resulterende getal rechtstreeks in het rapport. Het taalmodel maakt rekenfouten. Laat de berekening uitvoeren in een spreadsheet- of statistiekprogramma; Gebruik AI alleen voor de methode en interpretatie ervan.

drie minikoffers

Geval 1 — Hoofdvraag gecorrigeerd. In een onderzoeksontwerp werd gevraagd: "Hoe tevreden bent u met de vervoersdienst van onze succesvolle gemeente?" Hij had een vraag. AI merkte op dat het bijvoeglijk naamwoord 'succesvol' het antwoord positief beïnvloedde. De vraag is: "Hoe beoordeelt u de vervoersdienst van de gemeente?" werd geneutraliseerd en de resultaten waren evenwichtiger.

Geval 2 – AI-misrekening ontdekt. Een onderzoeker plakte 300 regels gegevens als tekst in de AI en zei ‘vind de gemiddelde leeftijd’; YZ zei 34.2. Toen dezelfde gegevens in een tabel werden gezet, was het werkelijke gemiddelde 31,7. De AI had zich binnen de tekst misrekend; Het probleem werd opgelost toen het account naar het programma werd verplaatst.

Geval 3 — Testselectie verduidelijkt. Een team wilde de gemiddelde score van twee groepen vergelijken, maar wist niet welke test ze moesten gebruiken. YZ legde uit dat de t-test (een test die test of het verschil tussen de gemiddelden van twee groepen willekeurig is) geschikt was voor "twee onafhankelijke groepen, een continue variabele", somde zijn aannames op en gaf een concept van de code. Het team voerde de test uit in het programma en interpreteerde het resultaat.

Vier kopieerbare sjablonen

1) Enquêtevragenaudit:

Bekijk de enquêtevragen hieronder. Controleer per vraag: is deze leidend, is het een dubbele vraag (twee dingen in één vraag), is deze dubbelzinnig, overlappen de antwoordmogelijkheden/ontbreken ze? Leg het probleem en een betere versie naast elkaar. Controleer of de schaalrichting consistent is.Vragen: [hier]

2) Tabel met concept-vragen:

Mijn onderzoeksvraag: [vraag]. Mijn sleutelbegrippen: [lijst]. Zet de volgende enquêtevragen in een tabel: welk concept meet elke vraag? Markeer vragen die geen verband houden met een concept ("extra") en concepten die geen vragen hebben ("idle"). Enquête: [hier]

3) Dataopschoningsplan (codeconcept):

Ik heb een enquêtedataset met de volgende variabelen: [variabelen]. Geef mij een checklist voor het opschonen van gegevens en een codeconcept MET COMMENTAARLIJNEN voor [R/Python]: ontbrekende gegevens, uitschieters, dubbele records, inconsistente codering. Ik zal de code uitvoeren en de uitvoer verifiëren; Doe de wiskunde niet.

4) Statistische opmerking (ik heb de berekening uitgevoerd):

Ik heb een [testnaam] uitgevoerd en kreeg de volgende uitvoer: [uitvoer]. Interpreteer dit resultaat in gewone taal: wat het in de praktijk betekent, maak onderscheid tussen statistische significantie en praktische betekenis, en herinner u eraan welke aannames moeten worden gecontroleerd. Overdrijf het resultaat niet; Vertel mij ook uw grenzen.

Zwakke prompt/sterke prompt

Zwakke prompt:

Bereken de gemiddelden van de groepen in deze gegevens en vertel welke hoger is. [500 gegevensregels]

AI probeert binnen de tekst te rekenen en kan verkeerde cijfers opleveren. Bovendien is het onbetrouwbaar om de vraag “Is er een significant verschil” te beantwoorden zonder statistische toetsing.

Krachtige prompt:

Ik wil de scores van twee groepen vergelijken: een continue variabele, twee onafhankelijke groepen. (1) Welke statistische toets is geschikt en waarom? (2) Wat zijn de aannames? (3) Commentaarcodeconcept voor [R/Python]. Ik zal de berekening in het programma doen; U geeft alleen de methode en code op, maar genereert geen cijfers.

Het verschil: AI wordt niet langer ingezet als onbetrouwbare rekenmachine, maar als betrouwbare methode-adviseur.

Arbeidsverdeling bij kwantitatieve taken

Zoektocht

Is AI veilig?

Hoe te gebruiken

Vraagontwerpaudit

Ja

Het markeren van vallen

Consistentie van schaal

Ja

controlelijst

Code voor het wissen van gegevens

Ja (concept)

Je voert de code uit

In-tekst-account

nee

Vertrouw nooit

Selectie testen

Ja

Leg de methode uit

Afsluitende opmerking

Ja (ondersteuning)

Het is aan jou om te oordelen

Veel voorkomende fouten

  • Rechtstreeks gebruik makend van het nummer gegenereerd door de AI. Het taalmodel klopt niet in de rekenkunde; Voer de berekening in het programma uit.
  • Een suggestieve vraag stellen. Bijvoeglijke naamwoorden en aannames vertekenen het antwoord.
  • Statistische significantie verwarren met praktische betekenis. ‘significant’ kan zelfs een klein verschil zijn; Kijk naar de maat.
  • Aannames overslaan. Elke test heeft vereisten; Geef geen commentaar zonder te controleren.
  • Extra vragen stellen. Elke enquêtevraag moet aan een concept worden gekoppeld; de rest blaast de gegevens op.

Samengevat

AI in kwantitatief onderzoek; Hij is een sterke adviseur in het onderkennen van de valkuilen van enquêtevragen, het in kaart brengen van concept-vragen, het opstellen van dataopschoning en analysecode, en het interpreteren van het resultaat in gewone taal. Maar laat de AI nooit de daadwerkelijke berekening doen; Het taalmodel is geen rekenmachine. U kiest de test, maar u voert deze uit in het programma, leest de uitvoer en maakt onderscheid tussen statistische significantie en praktische significantie. AI versnelt de methode; De verantwoordelijkheid voor het probleem en de opmerking ligt bij u.

Applicatie taak

Schrijf een conceptenquête met 10 vragen. Laat de AI-vlag hangen en corrigeer leidende, dubbele en dubbelzinnige vragen met de sjabloon “Poll questions audit”. Maak vervolgens een kleine voorbeeldgegevensset (20-30 rijen) en bereken het werkelijke gemiddelde en de percentages in een spreadsheetprogramma; Geef dezelfde gegevens aan AI als tekst, vergelijk deze met de resulterende cijfers en rapporteer het verschil. Laat ten slotte een testuitvoer interpreteren met de sjabloon "statistiekeninterpretatie".

controlelijst

  • [ ] Elke enquêtevraag heb ik aan een concept gekoppeld.
  • [ ] Ik heb leidende, dubbele en dubbelzinnige vragen geëlimineerd.
  • [ ] De daadwerkelijke berekening heb ik in het statistiekprogramma uitgevoerd, niet in de AI.
  • [ ] Ik heb de testaannames gecontroleerd.
  • [ ] Ik heb onderscheid gemaakt tussen statistische significantie en praktische significantie.