Табыстар:
- Әдістемелік шешімдерді, ұсыныстарды және модельдік ақпаратты жазу арқылы зерттеуді бақылауға қабілетті ету
- Өңделген деректерден өңделмеген деректерді бөлу және барлық түрлендіру қадамдарын құжаттау мүмкіндігі
- Әдіс бөлімінде жасанды интеллект рөлін ашық түрде жариялау және «оны қайталауға бола ма?» тестін қолдана білу.
Ғылымның ең іргелі қасиеті – бұл тұжырым бір адамның сөзіне емес, басқалар тексере алатын процеске негізделеді. Репродуктивтілік – зерттеу деректері мен әдісін алатын басқа зерттеушінің бірдей қадамдарды орындау арқылы бірдей нәтижеге жету мүмкіндігі. Осыған ұқсас түсінік ашықтық болып табылады: зерттеуші не істегенін және қандай шешім қабылдағанын нақты құжаттайды. Жасанды интеллект дәуірінде бұл екі ұғым жеңіл әрі маңыздырақ болды. Жеңіл, өйткені AI құжат процестеріне көмектеседі; сыни, өйткені егер сіз AI шешімдерінің ізін қалдырмайтын болсаңыз, ешкім, тіпті сіз де - сіздің жұмысыңызды қайталай алмайды. Бұл бөлімде сіз өзіңіздің зерттеуіңіздің қайталанатын және ашық болуын үйренесіз.
Мәселенің түйіні мынада: AI-мен жұмыс істегенде, сіз көптеген шағын шешімдер қабылдайсыз - қай нұсқауды пайдаландыңыз, қай модельді, қандай параметрлерді, қандай нәтижені қабылдадыңыз және қайсысын бас тарттыңыз. Егер бұл шешімдер құжатталмаған болса, бір сұрауды басқа күнде іске қосқанда басқа нәтиже алуыңыз мүмкін (тіл үлгілері әр уақытта дәл бірдей жауап бермейді). Рецензент немесе әріптес «бұл тақырыпты талдауға қалай келдіңіз» деп сұрағанда, «AI осылай деді» деген ғылыми жауап емес. Транспаренттік дәл осы «қара жәшікті» ашу және процесті бақылауға мүмкіндік береді.
Қадамдық: қадағаланатын зерттеуді құру
1. Шешім күнделігін жүргізіңіз. Әрбір маңызды әдіснамалық шешімді - неге бұл үлгіні, неге бұл кодты, неліктен осы AI ұсынысын қабылдағаныңызды - күні белгіленген журналға жазыңыз. AI бұл журналды ұйымдастыруға көмектеседі.
2. Сұраулар мен үлгі ақпаратын сақтаңыз. Сіз пайдаланған әрбір сұрауды, оны қандай AI моделінде және қай күні іске қосқаныңызды жазып алыңыз. Бұл сіздің жұмысыңызға арналған «материалдар тізімі».
3. Өңделген деректерден бастапқы деректерді бөліңіз. Бастапқы деректерді өзгеріссіз қалдырыңыз; барлық түрлендірулерді (тазалау, кодтау) құжатталған қадамдармен бөлек орындаңыз. Сондықтан әркім басынан бастап көре алады.
4. АИ рөлін нақты жазыңыз. Әдіс бөлімінде қандай тапсырмаларда және AI қалай пайдаланғаныңызды нақты көрсетіңіз. Қазір журналдар мен мекемелердің көпшілігі мұны талап етеді.
5. Мүмкін болса, деректер мен кодты бөлісіңіз. Этика және құпиялылық рұқсат етсе, ашық репозитарийлерде анонимді деректер мен аналитикалық кодты бөлісу – мөлдірліктің шыңы.
Кеңес: Қарапайым сынақ: «Мен бұл зерттеуді 6 айдан кейін қайтадан жасай аламын ба?» Егер сіз өз ұсыныстарыңызды, шешімдеріңізді және қадамдарыңызды құжаттамаған болсаңыз, жауап «жоқ» болуы мүмкін. Оны өзіңіз үшін өнімді етіңіз; Содан кейін бұл басқа біреу үшін де болады.
үш шағын іс
1-жағдай — ізсіз талдау құлады. Бір зерттеуші AI көмегімен тақырыпты талдау жасады, бірақ ол қандай нұсқауды қолданғанын жазбады. Төреші «бұл тақырыптарға қалай жеттіңіз?» деп сұрағанда. процесті көрсете алмады; Ол талдауды қайтадан қайталауға тура келді, бұл жолы күнделік жүргізді. Ол екі апта жоғалтты.
2-жағдай — Шешім журналы талқылауды аяқтайды. Командада «бұл кодтарды неге біріктірдік?» Деген сұраққа келіспеушілік туындады. Бірақ шешімдер журналында әрбір қосылу туралы шешімнің күні мен негіздемесі бар. AI журналды қорытындылап, оны хронологиялық түрде көрсеткенде, аргумент бірнеше минут ішінде шешілді.
3-жағдай – мөлдір жариялау сенімге негізделген. Бір мақалада авторлар біз AI-ді «транскриптті өңдеу және бастапқы кодты ұсыну үшін пайдаланғанымызды, екі зерттеуші барлық кодтарды қолмен тексеретін» деп жазды. Рецензенттер бұл ашықтықты оң деп тапты; Бұл жасырын AI пайдаланудан әлдеқайда сенімдірек екені анықталды.
Көшірілетін төрт үлгі
1) Шешім журналының үлгісі:
Әдістемелік шешімдер журналының кестесін жасаңыз. Бағандар: күні, шешім, негіздеме, балама нұсқалар, АИ рөлі (бар болса), оны кім бекітті. Төмендегі кестеге менің шешімдерім туралы ескертпелерді енгізіңіз және кез келген жетіспейтін негіздемелерді «аяқталуы керек» деп белгілеңіз. Ескертулер: [мұнда]
2) AI пайдалану мәлімдемесінің жобасы:
Әдістер бөліміне енгізу үшін AI пайдалануымды ашық түрде түсіндіретін абзац жобасын жасаңыз. Мен оны мына тапсырмаларда қолдандым: [тізім]. Мен оны келесі тапсырмаларда пайдаланбадым: [тізім]. Мен барлық шығыстарды қолмен тексердім. Үлгі және күні: [x]. Адал, түсініксіз, академиялық тілді пайдаланыңыз.
3) Қайталану мүмкіндігін тексеру:
Мен өзімнің зерттеу үдерісімді сипаттаймын: [қорытынды]. Басқа зерттеуші мұны қайталай ала ма? Құжатсыз, түсініксіз немесе бақыланбайтын қадамдарды тізімдеңіз: қандай деректер, қандай түрлендіру, қандай нұсқау, қандай шешім жоқ? Әр бос орынға не жазу керектігін айтыңыз.
4) Мәліметтердің шығу картасы:
Шикі деректерден бастап соңғы нәтижеге дейінгі барлық түрлендіру қадамдарын ағын ретінде көрсетіңіз: бастапқы деректер → тазалау → кодтау → талдау → табу. Әр қадамда не, қандай құралмен және қандай шешіммен орындалғанын көрсетіңіз. Бақыланбайтын қадамды белгілеңіз. Процесс: [мұнда]
Әлсіз шақыру / Күшті шақыру
Әлсіз шақыру:
Осы талдау әдісін бір абзацқа жазыңыз.
AI процесті құжаттамастан жалпы әдіс параграфын шығарады; Шешім қалай қабылданғаны және AI қайда қолданылғаны белгісіз. Бұл өндірілмейді.
Күшті шақыру:
Әдіс бөлімі үшін шығарылатын сипаттаманы жазыңыз. Келесі ақпаратты пайдаланыңыз: деректер көзі [x], үлгі [y], талдау қадамдары [z], мен пайдаланған AI моделі және оның күні [t], AI нақты рөлі [r], адамды тексеру процесі [d]. Басқа біреу осы қадамдарды орындап, оларды қайта шығара алатындай нақты жазыңыз. Мен қалдырған кез келген ақпаратты сұраңыз.
Айырмашылық: екінші тәсіл процесті нақты, қадағаланатын және шынымен қайталанатын етеді.
Мөлдірлік қабаттары
қабат
Не құжатталған
Неліктен маңызды?
шешім күнделігі
Әдістемелік шешімдер + негіздеме
сот билігін қорғайды
Жедел тіркеу
Қолданылған нұсқа, үлгі, күні
Жасанды интеллект икемді етеді
Деректер шығу тегі
Шикі → өңделген түрлендірулер
қадамдарды ашады
AI мәлімдемесі
АИ рөлі мен шегі
адалдық
бөлісу
Анонимді деректер + код
Ең жоғары мөлдірлік
Жалпы қателер
- Сұрауларды сақтамау. Егер сіз пайдаланған нұсқауды сақтамасаңыз, процесті көрсете алмайсыз.
- Бұл «AI осылай деді» дегенді білдіреді. Ғылыми негіздеу - бұл модель сөзі емес, процесс және пайымдау.
- Шикі деректерді қайта жазу. Түпнұсқаны сақтаңыз; Түрлендірулерді бөлек және құжатталған жасаңыз.
- AI пайдалануды жасыру. Мөлдір мәлімдеме сенім тудырады; Жасыру беделді жоғалтады.
- Оны тіпті өзіңіз үшін де өнімсіз қалдыру. 6 айдан кейін қайта жасай алмайтын жұмыс ғылым емес.
Қысқаша айтқанда
Репродуктивтілік пен ашықтық зерттеуді бір адамның сөзінен кез келген адам тексере алатын ғылымға айналдырады. Бұл AI-мен жұмыс істеу кезінде одан да маңызды, өйткені модель шешімдері орындалмаса, процесс қара жәшікке айналады. Шешімдер журналын жүргізіңіз, сұраулар мен үлгі ақпаратын жазыңыз, өңделгеннен өңделмеген деректерді бөлектеңіз, AI рөлін адал жариялаңыз және этика рұқсат еткенде деректер мен кодты бөлісіңіз. «6 айдан кейін өзімді көбейте аламын ба» деген сынақтан өткен зерттеу басқалар үшін де сенімді.
Қолданбалы тапсырма
Сіз жасап жатқан немесе жоспарлап отырған шағын талдау үшін «шешім журналының үлгісімен» негіздемесі бар кемінде 5 әдістемелік шешімді жазып алыңыз. Пайдаланылатын кеңестерді, үлгіні және күнін бөлек файлда сақтаңыз. Содан кейін AI процессіңізде құжатталмаған олқылықтарды тауып, әрбір олқылықты жабу үшін «қайта өндіру аудиті» үлгісін пайдаланыңыз. Соңында, әдістер бөлімінде орналастырылатын «AI пайдалану мәлімдемесінің» құрылымын және мөлдір абзацты жазыңыз.
бақылау парағы
- [ ] Әрбір маңызды әдістемелік шешімнің себептерін журналға жаздым.
- [ ] Мен пайдаланған сұрауларды, үлгіні және күнді жаздым.
- [ ] Мен бастапқы деректерді өзгеріссіз қалдырдым және түрлендірулерді құжаттадым.
- [ ] Мен әдіс бөлімінде AI рөлін ашық айттым.
- [ ] Мен "6 айдан кейін көбейе аламын ба" сынағын қолдандым.