Einheit 4 / 11

Umfragedesign und quantitative Datenanalyse

Gewinne:

  • Fähigkeit, führende, doppelte und mehrdeutige Fallen in Umfragefragen zu erkennen und jede Frage mit einem Konzept zu verknüpfen
  • Fähigkeit, echte statistische Berechnungen in einem Programm durchzuführen und künstliche Intelligenz nur zur Methodenauswahl und Interpretation zu nutzen
  • Fähigkeit, statistische Signifikanz von praktischer Signifikanz zu unterscheiden und Testannahmen zu überprüfen

Quantitative Forschung ist ein Ansatz, der soziale Phänomene mit Zahlen misst und mit Statistiken analysiert: Sie sucht nach Antworten auf Fragen wie wie viele Menschen, in welchem ​​Tempo, welcher Unterschied zwischen welchen Gruppen besteht. Das gebräuchlichste Instrument für diesen Ansatz ist die Umfrage – eine Methode zur Erhebung vergleichbarer Daten von einer großen Anzahl von Personen mithilfe von Standardfragen. Das Einrichten einer guten Umfrage und die korrekte Analyse eingehender Daten erfordert Geschick. Eine schlechte Frage verdirbt das Ergebnis von Anfang an. In dieser Einheit erfahren Sie, wie Sie mithilfe von KI Umfragefragen entwerfen, Skalen erstellen (Antwortoptionen, die eine Einstellung bewerten, z. B. „stimme völlig zu … stimme überhaupt nicht zu“) und eingehende Daten analysieren. Aber Sie werden erfahren, warum Sie Ihr statistisches Urteilsvermögen behalten sollten.

Der größte Wert der KI bei der quantitativen Analyse liegt nicht in der Berechnung selbst, sondern darin, zu erklären, wie die Berechnung durchgeführt wird und was das Ergebnis bedeutet. Die KI kann für Sie Analysecode skizzieren (z. B. Befehle zur Ausführung in R oder Python), im Klartext erklären, wann ein statistischer Test zu verwenden ist, und Ihnen bei der Interpretation der Ausgabe helfen. Aber vertrauen Sie niemals den Zahlen, die die KI „einfach in Ihren Kopf“ in Texten generiert: Ein Sprachmodell ist kein Taschenrechner und kann den falschen Mittelwert, Prozentsatz oder p-Wert liefern. Die eigentliche Berechnung erfolgt in einem echten Statistikprogramm.

Schritt für Schritt: von der Umfrage bis zum Review

1. Verknüpfen Sie jede Frage mit einem Konzept. Jede Frage, die Sie in die Umfrage stellen, sollte ein Konzept in Ihrer Forschungsfrage messen. Fügen Sie keine Fragen hinzu, nur weil „es interessant wäre“. KI hilft Ihnen, die Konzept-Frage-Zuordnung in einer Tabelle zu überprüfen.

2. Sortieren Sie schlechte Fragen aus. Einleitende („Sind Sie mit diesem tollen Service zufrieden?“), Doppelfragen („War der Service schnell und günstig?“), vage („Hat es Ihnen oft gefallen?“) Fragen verzerren die Daten. KI ist gut darin, diese Fallstricke in Ihrem Umfrageentwurf aufzuzeigen.

3. Richten Sie die Skala konsistent ein. Wenn Sie eine Likert-Skala (eine 5- oder 7-Punkte-Zustimmungsskala) verwenden, achten Sie darauf, dass die Richtung und die Bewertungen während der gesamten Umfrage konsistent bleiben. KI erkennt Inkonsistenzen.

4. Daten löschen. Eingehende Daten können fehlende Antworten, Inkonsistenzen oder zwei Datensätze derselben Person enthalten. KI kann Bereinigungsschritte auflisten und Code entwerfen; Sie entscheiden.

5. Wählen Sie den richtigen Test und INTERPRETIEREN Sie ihn. Vergleichen Sie zwei Gruppen und suchen nach einer Beziehung? KI erklärt, welcher Test geeignet ist; Es ist Ihre Aufgabe, den Test im Programm auszuführen und die Ausgabe zu lesen und zu verstehen.

Achtung: Sagen Sie der KI nicht „berechne den Durchschnitt dieser Daten“ und schreiben Sie die resultierende Zahl direkt in den Bericht. Das Sprachmodell macht Fehler in der Arithmetik. Lassen Sie die Berechnung in einer Tabellenkalkulation oder einem Statistikprogramm durchführen; Verwenden Sie KI nur für ihre Methode und Interpretation.

drei Mini-Koffer

Fall 1 – Leitfrage korrigiert. In einem Umfrageentwurf wurde die Frage gestellt: „Wie zufrieden sind Sie mit dem Transportangebot unserer erfolgreichen Kommune?“ Er hatte eine Frage. Die KI stellte fest, dass das Adjektiv „erfolgreich“ die Antwort ins Positive verschob. Die Frage lautet: „Wie bewerten Sie das Verkehrsangebot der Gemeinde?“ wurde neutralisiert und die Ergebnisse waren ausgewogener.

Fall 2 – Fehleinschätzung der KI entdeckt. Ein Forscher fügte 300 Datenzeilen als Text in die KI ein und sagte: „Finde das Durchschnittsalter“; YZ sagte 34,2. Als die gleichen Daten in eine Tabelle eingegeben wurden, lag der tatsächliche Durchschnitt bei 31,7. Die KI hatte sich innerhalb des Textes verrechnet; Das Problem wurde behoben, als das Konto in das Programm verschoben wurde.

Fall 3 – Testauswahl geklärt. Ein Team wollte die durchschnittliche Punktzahl zweier Gruppen vergleichen, wusste aber nicht, welchen Test es verwenden sollte. YZ erklärte, dass der t-Test (ein Test, der testet, ob die Differenz zwischen den Mittelwerten zweier Gruppen zufällig ist) für „zwei unabhängige Gruppen, eine kontinuierliche Variable“ geeignet sei, listete seine Annahmen auf und lieferte einen Entwurf des Codes. Das Team führte den Test im Programm durch und interpretierte das Ergebnis.

Vier kopierbare Vorlagen

1) Prüfung der Umfragefragen:

Sehen Sie sich die folgenden Umfragefragen an. Prüfen Sie bei jeder Frage: Handelt es sich um eine Leitfrage, handelt es sich um eine Doppelfrage (zwei Dinge in einer Frage), ist sie mehrdeutig, überschneiden sich die Antwortoptionen/fehlen sie? Geben Sie das Problem und eine bessere Version nebeneinander an. Überprüfen Sie, ob die Skalenrichtung konsistent ist.Fragen: [hier]

2) Konzept-Fragen-Zuordnungstabelle:

Meine Forschungsfrage: [Frage]. Meine Schlüsselkonzepte: [Liste]. Ordnen Sie die folgenden Umfragefragen in einer Tabelle an: Welches Konzept misst jede Frage? Markieren Sie Fragen, die mit keinem Konzept in Zusammenhang stehen („extra“), und Konzepte, die keine Fragen haben („untätig“). Umfrage: [hier]

3) Datenbereinigungsplan (Codeentwurf):

Ich habe einen Umfragedatensatz mit den folgenden Variablen: [Variablen]. Geben Sie mir eine Checkliste zur Datenbereinigung und einen Codeentwurf MIT KOMMENTARZEILEN für [R/Python]: fehlende Daten, Ausreißer, doppelte Datensätze, inkonsistente Codierung. Ich werde den Code ausführen und die Ausgabe überprüfen; Rechnen Sie nicht.

4) Statistischer Kommentar (ich habe die Berechnung durchgeführt):

Ich habe einen [Testnamen] ausgeführt und die folgende Ausgabe erhalten: [Ausgabe]. Interpretieren Sie dieses Ergebnis im Klartext: was es in der Praxis bedeutet, unterscheiden Sie zwischen statistischer Signifikanz und praktischer Signifikanz und erinnern Sie sich daran, welche Annahmen überprüft werden müssen. Übertreiben Sie das Ergebnis nicht; Sagen Sie mir auch Ihre Grenzen.

Schwache Eingabeaufforderung / Starke Eingabeaufforderung

Schwache Eingabeaufforderung:

Berechnen Sie die Mittelwerte der Gruppen in diesen Daten und ermitteln Sie, welche Gruppe höher ist. [500 Datenzeilen]

KI versucht, innerhalb des Textes zu rechnen und kann dabei falsche Zahlen erzeugen. Darüber hinaus ist es unzuverlässig, die Frage „Gibt es einen signifikanten Unterschied?“ ohne statistische Tests zu beantworten.

Kraftvolle Aufforderung:

Ich möchte die Ergebnisse zweier Gruppen vergleichen: einer kontinuierlichen Variablen und zwei unabhängigen Gruppen. (1) Welcher statistische Test ist geeignet und warum? (2) Was sind seine Annahmen? (3) Kommentieren Sie den Codeentwurf für [R/Python]. Ich werde die Berechnung im Programm durchführen; Sie geben lediglich die Methode und den Code an, generieren keine Zahlen.

Der Unterschied: KI wird nicht mehr als unzuverlässiger Rechner, sondern als verlässlicher Methodenberater eingesetzt.

Arbeitsteilung in quantitative Aufgaben

Suche

Ist KI sicher?

Wie zu verwenden

Prüfung des Fragendesigns

Ja

Markierung von Fallen

Skalenkonsistenz

Ja

Checkliste

Datenlöschcode

Ja (Entwurf)

Sie führen den Code aus

In-Text-Konto

Nein

Vertraue niemals

Testauswahl

Ja

Erklären Sie die Methode

Abschließender Kommentar

Ja (Unterstützung)

Es liegt an Ihnen zu urteilen

Häufige Fehler

  • Direkt unter Verwendung der von der KI generierten Nummer. Das Sprachmodell ist in der Arithmetik falsch; Nehmen Sie die Berechnung in das Programm vor.
  • Eine Leitfrage stellen. Adjektive und Annahmen verzerren die Antwort.
  • Verwechslung statistischer Signifikanz mit praktischer Signifikanz. „Erheblich“ kann sogar ein kleiner Unterschied sein; Schauen Sie sich die Größe an.
  • Überspringe die Annahmen. Jeder Test hat Voraussetzungen; Kommentieren Sie nicht ohne Überprüfung.
  • Zusätzliche Fragen stellen. Jede Umfragefrage sollte mit einem Konzept verknüpft sein; der Rest bläht die Daten auf.

Zusammenfassend

KI in der quantitativen Forschung; Er ist ein kompetenter Berater, wenn es darum geht, die Fallstricke von Umfragefragen zu erkennen, Konzepte und Fragen zuzuordnen, Datenbereinigungs- und Analysecodes zu entwerfen und die Ergebnisse in einfacher Sprache zu interpretieren. Aber lassen Sie niemals die KI die eigentliche Berechnung durchführen; Das Sprachmodell ist kein Taschenrechner. Sie wählen den Test aus, führen ihn jedoch im Programm aus, lesen die Ausgabe und unterscheiden zwischen statistischer Signifikanz und praktischer Signifikanz. KI beschleunigt den Prozess; Die Verantwortung für das Problem und den Kommentar liegt bei Ihnen.

Anwendungsaufgabe

Schreiben Sie einen Umfrageentwurf mit 10 Fragen. Verfügen Sie über die KI-Kennzeichnung und korrigieren Sie führende, doppelte und mehrdeutige Fragen mit der Vorlage „Umfrageprüfung“. Erstellen Sie dann einen kleinen Beispieldatensatz (20–30 Zeilen) und berechnen Sie den tatsächlichen Mittelwert und die Prozentsätze in einem Tabellenkalkulationsprogramm. Geben Sie dieselben Daten als Text an die KI weiter, vergleichen Sie sie mit den resultierenden Zahlen und melden Sie die Differenz. Lassen Sie abschließend eine Testausgabe mit der Vorlage „Statistikinterpretation“ interpretieren.

Checkliste

  • [ ] Ich habe jede Umfragefrage mit einem Konzept verknüpft.
  • [ ] Ich habe Leitfragen, Doppelfragen und Mehrdeutigkeiten eliminiert.
  • [ ] Die eigentliche Berechnung habe ich im Statistikprogramm durchgeführt, nicht in der KI.
  • [ ] Ich habe die Testannahmen überprüft.
  • [ ] Ich habe statistische Signifikanz von praktischer Signifikanz unterschieden.