Jednostka 4 / 11

Projekt ankiety i ilościowa analiza danych

Zyski:

  • Umiejętność wykrywania wiodących, podwójnych i niejednoznacznych pułapek w pytaniach ankietowych i łączenia każdego pytania z koncepcją
  • Możliwość wykonywania rzeczywistych obliczeń statystycznych w programie i wykorzystania sztucznej inteligencji jedynie do doboru i interpretacji metod
  • Umiejętność odróżnienia istotności statystycznej od istotności praktycznej i sprawdzenia założeń testowych

Badania ilościowe to podejście, które mierzy zjawiska społeczne za pomocą liczb i analizuje je za pomocą statystyk: poszukuje odpowiedzi na pytania takie jak: ile osób, w jakim tempie, jaka jest różnica między poszczególnymi grupami. Najpopularniejszym narzędziem tego podejścia jest ankieta – metoda gromadzenia porównywalnych danych od dużej liczby osób za pomocą standardowych pytań. Utworzenie dobrej ankiety i poprawna analiza przychodzących danych wymaga umiejętności; Złe pytanie od samego początku psuje wynik. W tej części dowiesz się, jak używać sztucznej inteligencji do projektowania pytań do ankiet, konstruowania skal (opcji odpowiedzi oceniających postawę, np. „zdecydowanie się zgadzam… zdecydowanie się nie zgadzam”) i analizowania napływających danych; ale dowiesz się, dlaczego powinieneś zachować ocenę statystyczną.

Sztuczna inteligencja jest najcenniejsza w analizie ilościowej nie w samych obliczeniach, ale w wyjaśnieniu, jak wykonać obliczenia i co oznacza wynik. Sztuczna inteligencja może nakreślić dla Ciebie kod analityczny (np. polecenia do uruchomienia w R lub Pythonie), wyjaśnić prostym językiem, kiedy używać testu statystycznego i pomóc w interpretacji wyników. Nigdy jednak nie ufaj liczbom, które sztuczna inteligencja generuje „z głowy” w tekście: model językowy nie jest kalkulatorem i może dać niewłaściwą średnią, wartość procentową lub wartość p. Rzeczywiste obliczenia przeprowadzane są w programie do statystyki rzeczywistej.

Krok po kroku: od ankiety do recenzji

1. Połącz każde pytanie z koncepcją. Każde pytanie, które zamieścisz w ankiecie, powinno mierzyć koncepcję zawartą w pytaniu badawczym. Nie dodawaj pytań tylko dlatego, że „byłoby to interesujące”. Sztuczna inteligencja pomaga sprawdzić mapowanie koncepcji i pytań w tabeli.

2. Wyeliminuj złe pytania. Pytania wiodące („Czy jesteś zadowolony z tej świetnej usługi?”), Podwójne pytanie („Czy usługa była szybka i tania?”), Niejasne („Czy często Ci się podobało?”) Zniekształcają dane. Sztuczna inteligencja dobrze radzi sobie z oznaczaniem tych pułapek w wersji roboczej ankiety.

3. Ustal konsekwentnie skalę. Jeśli używasz skali Likerta (5- lub 7-punktowa skala zgodności), utrzymuj spójny kierunek i oceny w całej ankiecie. AI wyłapuje niespójności.

4. Wyczyść dane. Dane przychodzące mogą zawierać brakujące odpowiedzi, niespójności lub dwa rekordy tej samej osoby. Sztuczna inteligencja może wyświetlić listę etapów czyszczenia i wersję roboczą kodu; Ty decydujesz.

5. Wybierz właściwy test i Zinterpretuj go. Porównujesz dwie grupy, szukając związku? AI wyjaśnia, który test jest odpowiedni; Twoim zadaniem jest uruchomienie testu w programie oraz przeczytanie i zrozumienie wyników.

Uwaga: nie mów AI „oblicz średnią z tych danych” i nie zapisuj wynikowej liczby bezpośrednio w raporcie. Model językowy popełnia błędy arytmetyczne. Wykonaj obliczenia w arkuszu kalkulacyjnym lub programie statystycznym; Używaj sztucznej inteligencji tylko ze względu na jej metodę i interpretację.

trzy mini etui

Przypadek 1 — poprawiono pytanie wiodące. W projekcie ankiety zadano pytanie: „Jak bardzo jesteś zadowolony z usług transportowych naszej gminy, która odniosła sukces?” Miał pytanie. AI zauważyła, że ​​przymiotnik „udany” popchnął odpowiedź na pozytywną. Pytanie brzmi: „Jak ocenia Pan(i) jakość usług transportowych gminy?” został zneutralizowany, a wyniki były bardziej zrównoważone.

Przypadek 2 — wykryto błędne obliczenia AI. Badacz wkleił do sztucznej inteligencji 300 linii danych jako tekst i powiedział „znajdź średni wiek”; YZ powiedział 34,2. Gdy te same dane zestawiono w tabeli, rzeczywista średnia wyniosła 31,7. Sztuczna inteligencja przeliczyła się w tekście; Zostało to naprawione po przeniesieniu konta do programu.

Przypadek 3 – Wyjaśniono wybór testu. Zespół chciał porównać średni wynik dwóch grup, ale nie wiedział, którego testu użyć. YZ wyjaśnił, że test t (test sprawdzający, czy różnica między średnimi dwóch grup jest losowa) jest odpowiedni dla „dwóch niezależnych grup, zmiennej ciągłej”, wymienił swoje założenia i przedstawił projekt kodu. Zespół przeprowadził test w programie i zinterpretował wynik.

Cztery szablony do kopiowania

1) Kontrola pytań w ankiecie:

Przejrzyj poniższe pytania ankiety. Sprawdź przy każdym pytaniu: czy jest wiodące, czy jest pytaniem podwójnym (dwie rzeczy w jednym pytaniu), czy jest dwuznaczne, czy opcje odpowiedzi pokrywają się/brakuje ich? Podaj problem i lepszą wersję obok siebie. Sprawdź, czy kierunek skali jest spójny. Pytania: [tutaj]

2) Tabela mapowania koncepcji i pytań:

Moje pytanie badawcze: [pytanie]. Moje kluczowe pojęcia: [lista]. Uporządkuj w tabeli następujące pytania ankiety: Jakie pojęcie mierzy każde pytanie? Zaznacz pytania, które nie łączą się z żadnym pojęciem („dodatkowe”) i pojęcia, które nie mają pytań („bezczynne”). Sonda: [tutaj]

3) Plan czyszczenia danych (projekt kodeksu):

Mam zbiór danych ankiety zawierający następujące zmienne: [zmienne]. Podaj mi listę kontrolną czyszczenia danych i wersję roboczą kodu Z LINAMI KOMENTARZY dla [R/Python]: brakujące dane, wartości odstające, zduplikowane rekordy, niespójne kodowanie. Uruchomię kod i zweryfikuję dane wyjściowe; Nie rób matematyki.

4) Komentarz statystyczny (ja zrobiłem obliczenia):

Uruchomiłem [nazwa testu] i otrzymałem następujący wynik: [wyjście]. Zinterpretuj ten wynik prostym językiem: co to oznacza w praktyce, rozróżnij znaczenie statystyczne od znaczenia praktycznego i przypomnij, które założenia należy sprawdzić. Nie przesadzaj z wynikiem; Powiedz mi też o swoich ograniczeniach.

Słaba zachęta/silna zachęta

Słaba zachęta:

Oblicz średnie grup w tych danych i powiedz, która z nich jest wyższa. [500 linii danych]

Sztuczna inteligencja próbuje obliczyć w tekście i może wygenerować błędne liczby. Co więcej, udzielenie odpowiedzi na pytanie „Czy istnieje znacząca różnica” bez badań statystycznych jest zawodne.

Potężny monit:

Chcę porównać wyniki dwóch grup: zmiennej ciągłej, dwóch grup niezależnych. (1) Który test statystyczny jest odpowiedni i dlaczego? (2) Jakie są jego założenia? (3) Wersja robocza kodu komentarza dla [R/Python]. Zrobię obliczenia w programie; Po prostu podajesz metodę i kod, nie generujesz liczb.

Różnica: sztuczna inteligencja nie jest już używana jako zawodny kalkulator, ale jako niezawodny doradca w zakresie metod.

Podział pracy w zadaniach ilościowych

Zadanie

Czy sztuczna inteligencja jest bezpieczna?

Jak używać

Audyt projektu pytania

Tak

Zaznaczanie pułapek

Spójność skali

Tak

lista kontrolna

Kod czyszczenia danych

Tak (wersja robocza)

Uruchamiasz kod

Konto tekstowe

nie

Nigdy nie ufaj

Wybór testu

Tak

Wyjaśnij metodę

Komentarz końcowy

Tak (wsparcie)

To zależy od Ciebie

Typowe błędy

  • Bezpośrednio przy użyciu numeru wygenerowanego przez sztuczną inteligencję. Model językowy jest błędny w arytmetyce; Wykonaj obliczenia w programie.
  • Postawienie pytania wiodącego. Przymiotniki i założenia zniekształcają odpowiedź.
  • Mylenie znaczenia statystycznego ze znaczeniem praktycznym. „Znacząca” może oznaczać nawet niewielką różnicę; Spójrz na rozmiar.
  • Pomijam założenia. Każdy test ma wymagania wstępne; Nie komentuj bez sprawdzenia.
  • Zadawanie dodatkowych pytań. Każde pytanie ankiety powinno być powiązane z koncepcją; reszta zawyża dane.

Podsumowując

AI w badaniach ilościowych; Jest silnym konsultantem w zakresie wychwytywania pułapek pytań ankietowych, mapowania koncepcji na pytania, opracowywania kodu do czyszczenia i analizy danych oraz interpretowania wyników prostym językiem. Ale nigdy nie pozwól, aby sztuczna inteligencja wykonała faktyczne obliczenia; Model językowy nie jest kalkulatorem. Wybierasz test, ale uruchamiasz go w programie, czytasz wyniki i rozróżniasz istotność statystyczną od istotności praktycznej. AI przyspiesza tę metodę; Odpowiedzialność za problem i komentarz leży po Twojej stronie.

Zadanie aplikacji

Napisz wersję roboczą ankiety zawierającą 10 pytań. Miej flagę AI i popraw pytania wiodące, zduplikowane i niejednoznaczne za pomocą szablonu „Audyt pytań w ankiecie”. Następnie utwórz mały przykładowy zbiór danych (20-30 wierszy) i oblicz rzeczywistą średnią i wartości procentowe w arkuszu kalkulacyjnym; Przekaż AI te same dane co tekst, porównaj je z uzyskanymi liczbami i zgłoś różnicę. Na koniec zinterpretuj wyniki testu za pomocą szablonu „interpretacji statystyk”.

lista kontrolna

  • [ ] Każde pytanie ankiety powiązałem z koncepcją.
  • [ ] Wyeliminowałem pytania wiodące, podwójne i niejednoznaczne.
  • [ ] Faktyczne obliczenia wykonałem w programie statystycznym, a nie w AI.
  • [ ] Sprawdziłem założenia testu.
  • [ ] Odróżniłem znaczenie statystyczne od znaczenia praktycznego.