Добици:
- Способност да се вештачка интелигенција користи као мисаони партнер у изради истраживачких питања, хипотеза, одабира скале и планова анализе
- Способност ревизије подршке за квантитативну анализу (интерпретација кода/излаза) и квалитативну анализу (тематски нацрт кодирања) са статистичком и методолошком тачношћу
- Способност развијања заштитног рефлекса у коришћењу вештачке интелигенције против лова на п-вредност, измишљене статистике и неетичке обраде података
Психологија је наука која систематски проучава људско понашање, а основа ове науке је истраживање. Било да пишете тезу, мерите ефикасност програма у институцији или припремате чланак; Добро истраживање захтева солидан дизајн, тачну анализу и искрено тумачење. Вештачка интелигенција (АИ) може бити мисаони партнер у свакој фази истраживања: изоштравање истраживачког питања, евоцирање могућих скала, прављење кода анализе, објашњавање статистичких резултата на једноставном језику, цртање почетних предлога тема у вашим квалитативним подацима. Али АИ такође халуцинира у статистици, сугерише методолошку грешку, и што је најопасније, може несвесно да отвори врата неетичким праксама (као што је лов на п-вредности). У овој јединици ћете научити да користите АИ као моћног, али надгледаног помоћника у истраживању.
Где вештачка интелигенција помаже у истраживању?
Фаза дизајна: Појашњавање истраживачког питања, изоштравање хипотезе, разматрање могућих варијабли и збуњујућих фактора (трећи фактори који утичу на резултат, али се не испитују), подсећање на одговарајуће дизајне. АИ је овде партнер за размишљање; Ви одлучујете.
Квантитативна анализа: Објашњавање када је метода анализе (као што је т-тест, АНОВА, регресија) прикладна, прављење кода анализе (нпр. Р или Питхон), тумачење статистичког резултата. АИ пише код, али ви сте одговорни за тачност резултата произведеног кодом и прикладност методе.
Квалитативна анализа: Почетни предлози кода у транскриптима интервјуа, могући наслови тема, нацрт шифрарника. АИ даје полазну тачку; Истраживач додаје дубину тумачења.
Опрез: АИ није статистичар. Може предложити погрешан тест, изоставити претпоставке, произвести лажни коефицијент или п-вредност. Провери сваку методолошку одлуку и сваки број независно (својим знањем, статистичким извором или стручњаком).
Етичке црвене линије: п-хаковање и обрада података
Једна од најопаснијих замки истраживачке етике је п-хаковање: стално мењање анализе, додавање/уклањање променљивих или скраћивање података док се не појави значајан резултат. Питајте АИ „шта могу да урадим да би мој резултат био смислен?“ Питати " значи упасти у ову замку а да тога нисте свесни. На ову врсту питања, АИ може дати предлоге као што су "издвоји ову променљиву, погледајте ову подгрупу"; Ови предлози "функционишу" статистички, али су научно лажни.
Исто тако, АИ може предложити „довршавање“ података који не постоје или брисање одступања без оправдања. Подаци се анализирају онакви какви јесу; Промене се могу вршити само уз унапред дефинисана, транспарентна и оправдана правила.
Савет: Запишите свој план анализе (који тест ћете урадити, са којим варијаблама, за коју хипотезу) пре него што видите податке. Користите вештачку интелигенцију да разјасните тај план, а не да „улепшате“ исход. Унапред написани план је најјача заштита од п-хаковања.
Корак по корак: Безбедан ток истраживања који покреће АИ
- Разјасните питање и хипотезу. Пустите АИ да истражи проблем да га изоштри, али ви одлучите.
- Напишите свој план анализе унапред. Који тест, која претпоставка, која хипотеза. Нека АИ надгледа план.
- Нацрт кода, провери излаз. Нека АИ напише код; Покрените га, проверите резултат независно.
- Проверите претпоставке. Тестирајте себе претпоставке које АИ прескаче, као што су нормалност и хомогеност варијансе.
- Размотрите квалитативне кодове као нацрте. Размотрите теме АИ иницијала; Сами прочитајте и проверите податке.
- Искрено извести. Запишите и бесмислени резултат; Избегавајте п-хаковање и селективно извештавање.
три мини кофера
Случај 1 — п-хацкинг замка. Када се главна хипотеза истраживача не покаже као значајна (п=0,21), он пита АИ „начине да резултат буде смислен“. АИ предлаже различите анализе подгрупа и екстракцију варијабли; Када истраживач ово покуша, добија п = 0,04. Али овај резултат је лажан: ако покушате са 10 различитих анализа, једна од њих ће случајно бити значајна. Прави начин: извештавање унапред дефинисане анализе, искрено писање бесмисленог резултата.
Случај 2 — Код и излазни коментар. Дипломирани студент жели да тестира разлике између две групе у подацима од 120 учесника, али није упознат са статистичким софтвером. Штампа нацрт кода анализе у АИ, покреће га и даје АИ да тумачи излаз. Затим проверава претпоставке т-теста из статистичког извора и независно проверава резултат. АИ скраћује криву учења, али коначна одлука је на ученику.
Случај 3 — Квалитативно кодирање. Истраживач даје АИ 18 анонимних транскрипата интервјуа и тражи почетне предлоге кода. АИ долази са око 30 кодова и 5 предлога тема. Истраживач их сматра за почетак и сам чита све преписе; Додаје тему коју је АИ пропустио, одвајајући две које је погрешно комбиновао. Такође проверава поузданост са другим енкодером. АИ се појачао, али интерпретација је изашла из човека.
Упутства и шаблони који се могу копирати
Помозите ми да изоштрим истраживачко питање. Моје нацрт питања: [питање]. Питајте/предложите следеће: зависне независне варијабле, могуће збуњујуће, одговарајући дизајн истраживања. Одлука је моја; Само објасните опције и ризике, не форсирајте исход.
Погледајте мој план анализе: [план]. Процените: да ли тест који сам изабрао одговара хипотези, које претпоставке треба да проверим, да ли се чини да је величина узорка довољна, да ли постоје методолошки ризици које сам превидео? Дајте предлоге да учврстите план, а не да промените исход.
Протумачите следеће статистичке резултате једноставним језиком: који резултат шта значи, које претпоставке треба проверити, где је ризик од претеране интерпретације? Искрено наведите све небитне резултате. Излаз: [излаз]
Испод су анонимни транскрипти интервјуа. У првој фази се генеришу МОГУЋИ код и ПРЕДЛОЗИ тема за тематско кодирање. Запамтите да су ово почетни нацрти и ја ћу читати и верификовати податке; Не представљајте то као коначан резултат. Транскрипти: [анонимни транскрипти]
Слаби промпт / Јаки промпт
Слабо обавештење: „Резултат није био значајан у подацима, како да учиним п-вредност значајном?“
Овај упит позива АИ да предложи п-хаковање; Чак и ако излаз „ради“ статистички, то је научна превара.
Снажан упит: "План анализе који сам раније дефинисао је [план]. Резултат није био значајан (п=0,21). Како да ово искрено пријавим, које би могле бити импликације безначајног резултата и шта бих препоручио за будућу студију?"
Овај позив упућује АИ ка поштеној науци; Он не искривљује резултат, он учи из њега.
Уобичајене грешке
- Позив на п-хаковање. Питајте „Учините резултат смисленим“; Ово је научна превара.
- Примена методе без њене валидације. Коришћење теста који је предложила АИ без провере његових претпоставки.
- Прихватање измишљене статистике. Не потврђујући коефицијент/п-вредност коју је дала АИ својом анализом.
- Грешка квалитативних кодова за коначну анализу. Извештавање о темама АИ без читања података.
- Скривање бесмисленог резултата. Селективно извештавање извештавањем само о ономе што има смисла.
Укратко
АИ је моћан мисаони партнер у истраживању у вези са изоштравањем питања, ревизијом плана анализе, прављењем кода, интерпретацијом излаза и почетком квалитативног кодирања. Али он прави грешке у статистици и халуцинацијама; Најопасније је то што може несвесно отворити врата неетичким методама као што је п-хаковање. Напишите свој план анализе унапред, верификујте сваки метод и број независно, проверите претпоставке, третирајте квалитативне кодове као нацрте и сами прочитајте податке и искрено пријавите бесмислене резултате. АИ убрзава; Научни интегритет долази од вас.
Задатак апликације
Поставите мали истраживачки сценарио (нпр. поређење две групе на скали). Прво, напишите свој план анализе у једном пасусу. Затим нека АИ ревидира овај план и питајте да ли постоје претпоставке или ризици које сте пропустили. Такође, нека АИ протумачи мали замишљени излаз и сами проверите да ли је његово тумачење превише асертивно. Напишите искрену реченицу за извештавање без укључивања у П-хаковање.
контролна листа
- [ ] Написао сам свој план анализе пре него што сам видео податке.
- [ ] Независно сам проверио претпоставке методе коју је предложила АИ.
- [ ] Проверио сам сваку статистику коју је АИ дао сопственом анализом.
- [ ] Сматрао сам квалитативне кодове као почетне нацрте и сам прочитао податке.
- [ ] Искрено сам пријавио и безначајне резултате.
- [ ] Избегао сам п-хаковање и селективно извештавање.