Unité 4 / 11

Conception de l’enquête et analyse des données quantitatives

Gains :

  • Capacité à détecter les pièges principaux, doubles et ambigus dans les questions d'enquête et à relier chaque question à un concept
  • Capacité à effectuer des calculs statistiques réels dans un programme et à utiliser l'intelligence artificielle uniquement pour la sélection et l'interprétation des méthodes.
  • Capacité à distinguer la signification statistique de la signification pratique et à vérifier les hypothèses des tests

La recherche quantitative est une approche qui mesure les phénomènes sociaux avec des chiffres et les analyse avec des statistiques : elle cherche des réponses à des questions telles que combien de personnes, à quel rythme, quelle différence y a-t-il entre quels groupes. L'outil le plus courant pour cette approche est l'enquête, une méthode de collecte de données comparables auprès d'un grand nombre de personnes à l'aide de questions standard. Mettre en place une bonne enquête et analyser correctement les données entrantes nécessite des compétences ; Une mauvaise question gâche le résultat dès le début. Dans cette unité, vous apprendrez à utiliser l'IA pour concevoir des questions d'enquête, construire des échelles (options de réponse qui évaluent une attitude, par exemple « tout à fait d'accord… fortement en désaccord ») et analyser les données entrantes ; mais vous apprendrez pourquoi vous devez conserver votre jugement statistique.

Là où l’IA est le plus utile dans l’analyse quantitative, ce n’est pas dans le calcul lui-même, mais dans l’explication de la manière d’effectuer le calcul et de la signification du résultat. L'IA peut décrire pour vous le code d'analyse (par exemple, les commandes à exécuter en R ou Python), expliquer en langage clair quand utiliser un test statistique et vous aider à interpréter le résultat. Mais ne vous fiez jamais aux chiffres que l'IA génère « de mémoire » dans le texte : un modèle de langage n'est pas une calculatrice et peut produire une moyenne, un pourcentage ou une valeur p erronés. Le calcul proprement dit est effectué dans un véritable programme de statistiques.

Pas à pas : de l’enquête à l’évaluation

1. Reliez chaque question à un concept. Chaque question que vous posez dans l'enquête doit mesurer un concept de votre question de recherche. N'ajoutez pas de questions simplement parce que « ce serait intéressant ». L'IA vous aide à vérifier la correspondance concept-question dans un tableau.

2. Éliminez les mauvaises questions. Les questions suggestives (« Êtes-vous satisfait de cet excellent service ? »), doubles (« Le service était-il rapide et bon marché ? »), vagues (« L'avez-vous souvent aimé ? ») déforment les données. L’IA est efficace pour signaler ces pièges dans votre projet d’enquête.

3. Établissez l’échelle de manière cohérente. Si vous utilisez une échelle de Likert (une échelle d'accord de 5 ou 7 points), gardez la direction et les notes cohérentes tout au long de l'enquête. L'IA détecte les incohérences.

4. Effacer les données. Les données entrantes peuvent contenir des réponses manquantes, des incohérences ou deux enregistrements de la même personne. L'IA peut répertorier les étapes de nettoyage et rédiger un code ; Vous décidez.

5. Choisissez le bon test et INTERPRETEZ-le. Comparez-vous deux groupes et recherchez-vous une relation ? AI explique quel test est approprié ; Il est de votre devoir d'exécuter le test dans le programme, de lire et de donner un sens au résultat.

Attention : Ne dites pas à l'IA « calculer la moyenne de ces données » et écrivez le nombre obtenu directement dans le rapport. Le modèle de langage fait des erreurs arithmétiques. Faire faire le calcul dans un tableur ou un programme de statistiques ; Utilisez l’IA uniquement pour sa méthode et son interprétation.

trois mini-cases

Cas 1 — Question suggestive corrigée. Une ébauche d'enquête demandait : « Dans quelle mesure êtes-vous satisfait du service de transport de notre municipalité prospère ? » Il avait une question. AI a noté que l'adjectif « réussi » poussait la réponse vers le positif. La question est « Comment évaluez-vous le service de transport de la municipalité ? » a été neutralisée et les résultats ont été plus équilibrés.

Cas 2 — Erreur de calcul de l'IA détectée. Un chercheur a collé 300 lignes de données sous forme de texte dans l'IA et a dit « trouver l'âge moyen » ; YZ a dit 34,2. Lorsque les mêmes données ont été mises dans un tableau, la moyenne réelle était de 31,7. L'IA avait mal calculé dans le texte ; Cela a été corrigé lorsque le compte a été déplacé vers le programme.

Cas 3 — Sélection des tests clarifiée. Une équipe souhaitait comparer le score moyen de deux groupes mais ne savait pas quel test utiliser. YZ a expliqué que le test t (un test qui teste si la différence entre les moyennes de deux groupes est aléatoire) était approprié pour « deux groupes indépendants, une variable continue », a énuméré ses hypothèses et a fourni une ébauche du code. L'équipe a effectué le test dans le programme et interprété le résultat.

Quatre modèles copiables

1) Vérification des questions d’enquête :

Passez en revue les questions du sondage ci-dessous. Vérifiez pour chaque question : est-elle suggestive, est-ce une question double (deux choses dans une question), est-elle ambiguë, les options de réponse se chevauchent/manquent ? Donnez le problème et une meilleure version côte à côte. Vérifiez si la direction de l'échelle est cohérente.Questions : [ici]

2) Tableau de correspondance concept-question :

Ma question de recherche : [question]. Mes concepts clés : [liste]. Organisez les questions d'enquête suivantes dans un tableau : quel concept chaque question mesure-t-elle ? Marquez les questions qui ne sont liées à aucun concept (« extra ») et les concepts qui n'ont pas de questions (« inactif »). Sondage : [ici]

3) Plan de nettoyage des données (projet de code) :

J'ai un ensemble de données d'enquête avec les variables suivantes : [variables]. Donnez-moi une liste de contrôle de nettoyage des données et un brouillon de code AVEC DES LIGNES DE COMMENTAIRES pour [R/Python] : données manquantes, valeurs aberrantes, enregistrements en double, codage incohérent. Je vais exécuter le code et vérifier le résultat ; Ne faites pas le calcul.

4) Commentaire statistique (j'ai fait le calcul) :

J'ai exécuté un [nom du test] et j'ai obtenu le résultat suivant : [output]. Interprétez ce résultat en langage simple : ce que cela signifie dans la pratique, faites la distinction entre la signification statistique et la signification pratique et rappelez-vous quelles hypothèses doivent être vérifiées. N'exagérez pas le résultat ; Dis-moi aussi tes limites.

Invite faible/Invite forte

Invite faible :

Calculez les moyennes des groupes dans ces données et indiquez lequel est le plus élevé. [500 lignes de données]

L'IA essaie de calculer dans le texte et peut produire des chiffres erronés. De plus, il n’est pas fiable de répondre à la question « Y a-t-il une différence significative » sans tests statistiques.

Invite puissante :

Je souhaite comparer les scores de deux groupes : une variable continue, deux groupes indépendants. (1) Quel test statistique est approprié et pourquoi ? (2) Quelles sont ses hypothèses ? (3) Projet de code de commentaire pour [R/Python]. Je ferai le calcul dans le programme ; Vous donnez simplement la méthode et le code, ne générez pas de chiffres.

La différence : l’IA n’est plus utilisée comme une calculatrice peu fiable, mais comme un conseiller méthodologique fiable.

Division du travail dans les tâches quantitatives

Quête

L’IA est-elle sûre ?

Comment utiliser

Audit de conception des questions

Oui

Pièges de marquage

Cohérence de l'échelle

Oui

liste de contrôle

Code d'effacement des données

Oui (projet)

Vous exécutez le code

Compte dans le texte

non

Ne jamais faire confiance

Sélection des tests

Oui

Expliquer la méthode

Commentaire final

Oui (assistance)

C'est à toi de juger

Erreurs courantes

  • Directement en utilisant le numéro généré par l'IA. Le modèle de langage est erroné en arithmétique ; Faites le calcul dans le programme.
  • Poser une question suggestive. Les adjectifs et les hypothèses faussent la réponse.
  • Confondre signification statistique et signification pratique. « Important » peut même représenter une petite différence ; Regardez la taille.
  • Sauter les hypothèses. Chaque test a des prérequis ; Ne commentez pas sans vérifier.
  • Poser des questions supplémentaires. Chaque question de l'enquête doit être liée à un concept ; le reste gonfle les données.

En résumé

L'IA dans la recherche quantitative ; Il est un excellent consultant pour détecter les pièges des questions d'enquête, cartographier les concepts et les questions, rédiger un code de nettoyage et d'analyse des données et interpréter les résultats dans un langage simple. Mais ne laissez jamais l’IA faire le calcul proprement dit ; Le modèle de langage n'est pas une calculatrice. Vous choisissez le test, mais vous l'exécutez dans le programme, lisez le résultat et faites la distinction entre la signification statistique et la signification pratique. L’IA accélère le processus ; La responsabilité du problème et du commentaire vous incombe.

Tâche de candidature

Rédigez une ébauche d’enquête avec 10 questions. Ayez le drapeau de l'IA et corrigez les questions principales, en double et ambiguës avec le modèle « Audit des questions de sondage ». Créez ensuite un petit ensemble de données d'échantillon (20 à 30 lignes) et calculez la moyenne et les pourcentages réels dans un tableur ; Donnez les mêmes données à l'IA sous forme de texte, comparez-les avec les chiffres obtenus et signalez la différence. Enfin, faites interpréter une sortie de test avec le modèle « interprétation des statistiques ».

liste de contrôle

  • [ ] J'ai lié chaque question de l'enquête à un concept.
  • [ ] J'ai éliminé les questions suggestives, doubles et ambiguës.
  • [ ] J'ai fait le calcul proprement dit dans le programme de statistiques, pas dans l'IA.
  • [ ] J'ai vérifié les hypothèses du test.
  • [ ] J'ai distingué la signification statistique de la signification pratique.