Добивки:
- Способност да се користи вештачката интелигенција како партнер за размислување при изготвување истражувачки прашања, хипотези, избор на скали и планови за анализа
- Способност за ревизија на поддршка за квантитативна анализа (толкување на код/излез) и квалитативна анализа (тематско кодирање нацрт) со статистичка и методолошка точност
- Способност да се развие заштитен рефлекс во употребата на вештачка интелигенција против лов на p-вредности, фабрикувани статистики и неетичка обработка на податоци
Психологијата е наука која систематски го проучува човековото однесување, а основата на оваа наука е истражувањето. Без разлика дали пишувате теза, ја мерите ефективноста на програмата во институција или подготвувате статија; Доброто истражување бара солиден дизајн, точна анализа и искрено толкување. Вештачката интелигенција (ВИ) може да биде партнер за размислување во секоја фаза од истражувањето: заострување на прашањето за истражување, предизвикување можни размери, изготвување код за анализа, објаснување на статистички резултат на едноставен јазик, цртање првични предлози за теми во вашите квалитативни податоци. Но, вештачката интелигенција, исто така, халуцинира во статистиката, сугерира методолошка грешка и што е најопасно, може несвесно да ја отвори вратата за неетички практики (како лов на p-вредност). Во оваа единица ќе научите да користите вештачка интелигенција како моќен, но надгледуван асистент во истражувањето.
Каде вештачката интелигенција помага во истражувањето?
Фаза на дизајнирање: Појаснување на прашањето за истражување, заострување на изјавата за хипотезата, разгледување на можните променливи и збунувачки фактори (трети фактори кои влијаат на резултатот, но не се испитуваат), потсетување на соодветни дизајни. ВИ е партнер за бура на идеи овде; Вие одлучувате.
Квантитативна анализа: Објаснување кога методот на анализа (како t-test, ANOVA, регресија) е соодветен, изготвување код за анализа (на пр. R или Python), толкување на статистички излез. AI пишува код, но вие сте одговорни за точноста на резултатот произведен од кодот и соодветноста на методот.
Квалитативна анализа: Првични предлози за кодови во транскриптите од интервјуто, можни наслови на теми, нацрт на шифрарникот. ВИ дава почетна точка; Истражувачот додава толкувачка длабочина.
Внимание: ВИ не е статистичар. Може да сугерира погрешен тест, да ги испушти претпоставките, да произведе откачен коефициент или p-вредност. Потврдете ја секоја методолошка одлука и секој број независно (со ваше знаење, статистички извор или експерт).
Етички црвени линии: p-хакирање и обработка на податоци
Една од најопасните замки на истражувачката етика е p-хакирањето: постојано менување на анализата, додавање/отстранување на променливи или отсекување на податоците додека не се појави значаен резултат. Прашајте ја вештачката интелигенција „што можам да направам за да го направам мојот резултат значаен? Прашувањето „ значи да паднете во оваа замка без да го сфатите тоа. На овој тип на прашања, вештачката интелигенција може да даде предлози како „извлечете ја оваа променлива, погледнете ја оваа подгрупа“; Овие предлози „работат“ статистички, но се научно измамнички.
Слично на тоа, вештачката интелигенција може да предложи „комплетирање“ на податоци што не постојат или бришење на оддалечените вредности без оправдување. Податоците се анализираат такви какви што се; Промените можат да се направат само со однапред дефинирани, транспарентни и оправдани правила.
Совет: запишете го вашиот план за анализа (кој тест ќе го правите, со кои променливи, за која хипотеза) пред да ги видите податоците. Користете вештачка интелигенција за да го разјасните тој план, а не за да го „разубавите“ исходот. Однапред напишан план е најсилната заштита од p-хакирање.
Чекор по чекор: Безбеден тек на истражување напојуван со вештачка интелигенција
- Појасни го прашањето и хипотезата. Дозволете ВИ да го истражи проблемот за да го изостри, но вие одлучете.
- Напишете го вашиот план за анализа однапред. Кој тест, која претпоставка, која хипотеза. Дозволете ВИ да го надгледува планот.
- Нацрт код, потврдете го излезот. Дозволете AI да напише код; Ја стартувате, проверете го резултатот независно.
- Проверете ги претпоставките. Тестирајте ги претпоставките што вештачката интелигенција ги прескокнува, како што се нормалноста и хомогеноста на варијансата.
- Размислете за квалитативните кодови како нацрти. Размислете за темите на почетната вештачка интелигенција; Прочитајте ги и проверете ги податоците сами.
- Пријавете искрено. Запишете го и бесмислениот резултат; Избегнувајте p-хакирање и селективно известување.
три мини футроли
Случај 1 — стапица за хакирање p. Кога главната хипотеза на истражувачот не се покажува значајна (p=0,21), тој ја прашува вештачката интелигенција „начини да го направи резултатот значаен“. ВИ предлага различни анализи на подгрупи и екстракција на променливи; Кога истражувачот ги пробува овие, тој добива p = 0,04. Но, овој резултат е лажен: ако пробате 10 различни анализи, една од нив случајно ќе биде значајна. Вистински начин: известување за однапред дефинираната анализа, искрено пишување на бесмислениот резултат.
Случај 2 - Код и излезен коментар. Дипломиран студент сака да ги тестира разликите помеѓу две групи во податоците од 120 учесници, но не е запознаен со статистичкиот софтвер. Го печати нацртот на кодот за анализа на вештачката интелигенција, го извршува и има AI да го толкува излезот. Потоа ги проверува претпоставките на т-тестот од статистички извор и независно го потврдува резултатот. ВИ ја скратува кривата на учење, но конечната одлука е на ученикот.
Случај 3 - Квалитативно кодирање. Истражувач дава 18 анонимни транскрипти од интервјуто до вештачката интелигенција и бара првични предлози за кодови. ВИ доаѓа со околу 30 кодови и 5 предлози за теми. Истражувачот ги смета овие за почеток и самиот ги чита сите преписи; Додава тема што вештачката интелигенција ја пропушти, одвојувајќи две што неправилно ги комбинираше. Исто така, ја проверува веродостојноста со втор енкодер. АИ се засили, но толкувањето излезе од човечкото.
Потсетници и шаблони што може да се копираат
Помогни ми да го изостри истражувачкото прашање. Моето нацрт-прашање: [прашање]. Прашајте/предложете го следново: зависни-независни променливи, можни збунувачки фактори, соодветен дизајн на истражување. Одлуката е моја; Само објаснете ги опциите и ризиците, не форсирајте го исходот.
Проверете го мојот план за анализа: [план]. Оценете: дали тестот што го избрав одговара на хипотезата, кои претпоставки треба да ги проверам, дали големината на примерокот изгледа доволна, дали има некои методолошки ризици што ги превидив? Давајте предлози за зацврстување на планот, а не за промена на исходот.
Толкувајте го следниот статистички резултат на едноставен јазик: што значи резултатот, кои претпоставки треба да се проверат, каде е ризикот од прекумерно толкување? Искрено наведете ги сите незначајни резултати. Излез: [излез]
Подолу се анонимните транскрипти од интервјуто. Во првата фаза се генерираат МОЖНИ ПРЕДЛОЗИ на код и тема за тематско кодирање. Запомнете дека ова се првичен нацрт и ќе ги читам и проверувам податоците; Не го прикажувајте како конечен резултат. Транскрипти: [анонимни транскрипти]
Слаб промпт / Силен промпт
Слаба порака: "Резултатот не беше значаен во податоците, како да ја направам p-вредноста значајна?"
Овој потсетник ја повикува вештачката интелигенција да предложи p-хакирање; Дури и ако излезот „работи“ статистички, тоа е научна измама.
Силен поттик: "Планот за анализа што го дефинирав претходно е [планот]. Резултатот не беше значаен (p=0,21). Како да го пријавам ова искрено, кои би можеле да бидат можните импликации од незначајниот резултат и што би препорачал за идна студија?"
Овој поттик ја насочува вештачката интелигенција кон искрена наука; Тој не го искривува резултатот, тој учи од него.
Вообичаени грешки
- Покана за p-хакирање. Прашување „Направете го резултатот значаен“; Ова е научна измама.
- Примена на методот без да се потврди. Користење на предложениот тест за вештачка интелигенција без проверка на неговите претпоставки.
- Прифаќање измислена статистика. Не потврдувајќи го коефициентот/p-вредноста дадена од ВИ со сопствена анализа.
- Грешка на квалитативните кодови за конечна анализа. Пријавување на теми за вештачка интелигенција без читање на податоците.
- Сокривање на бесмислениот резултат. Селективно известување со известување само за она што е значајно.
Сумирано
Вештачката интелигенција е моќен партнер на мислата во истражувањето за острење, ревизија на план за анализа, изготвување код, толкување на излезот и почеток на квалитативно кодирање. Но, тој прави грешки во статистиката и халуцинации; Најопасната работа е што може несвесно да ја отвори вратата за неетички методи како што е p-хакирањето. Напишете го вашиот план за анализа однапред, проверете го секој метод и број независно, проверете ги претпоставките, третирајте ги квалитативните кодови како нацрти и сами прочитајте ги податоците и искрено пријавете ги бесмислените резултати. ВИ забрзува; Научниот интегритет доаѓа од вас.
Задача за апликација
Поставете мало истражувачко сценарио (на пр. споредување на две групи на скала). Прво, напишете го вашиот план за анализа во еден параграф. Потоа, вештачката интелигенција нека го ревидира овој план и прашајте дали има некои претпоставки или ризици што сте ги пропуштиле. Исто така, нека вештачката интелигенција толкува мал имагинарен излез и проверете сами дали неговото толкување е претерано наметливо. Напишете искрена реченица за известување без да се вклучите во хакирање P.
листа за проверка
- [ ] Го напишав мојот план за анализа пред да ги видам податоците.
- [ ] Независно ги проверив претпоставките за методот предложен од ВИ.
- [ ] Ја потврдив секоја статистика што ја даде вештачката интелигенција со моја анализа.
- [ ] Ги сметав квалитативните шифри како првични нацрти и сам ги прочитав податоците.
- [ ] Искрено пријавив и незначителни резултати.
- [ ] Избегнав p-хакирање и селективно известување.