Јединица 7 / 11

Преглед литературе, верификација извора и борба против халуцинација

Добици:

  • Способност коришћења вештачке интелигенције за сумирање и упоређивање стварних извора, елиминишући основу за измишљену атрибуцију са ограничењем „само засновано на датом извору“
  • Способност примене дисциплине верификације сваког цитата у стварном каталогу, верификације сваког апстракта назад до извора и хватања ДОИ/отисак халуцинација
  • Бити у стању да разуме како актуелност, вишејезичност и сива литература одређују границе знања вештачке интелигенције и зашто је потребно оригинално писање.

Археологија и културно наслеђе су кумулативна наука: свака нова студија се заснива на претходним публикацијама које обухватају векове. Скенирање литературе (укупности чланака, књига, извештаја и теза објављених на ту тему) неког региона, врсте налаза или периода је први и најзаморнији корак сваке научне студије. У овој јединици ћемо детаљно видети како АИ убрзава преглед литературе, али зашто је верификација извора најважнија у овој области и како се борити против најопасније грешке АИ: халуцинације (измишљени извори, цитати и информације).

Основни принцип: АИ помаже да се сумира, упореди и организује литература; Али ниједан цитат се не може користити без потврде у правом каталогу, и ниједан сажетак се не може претворити у научну тврдњу без читања самог извора. У хуманистичким наукама један лажни извор уништава кредибилитет целокупног дела.

Зашто су халуцинације тако критичне на овом пољу?

Најчешћа грешка алата за јавно ћаскање је стварање академских ресурса који не постоје, али изгледају веома реалистични. АИ може да направи цитат „савршеног“ изгледа комбиновањем имена правог аутора, имена правог часописа и веродостојног наслова. Одакле?

  • АИ производи „следећу највероватније реч“; не гледа у стварну базу података (осим ако није повезан посебан алат).
  • Пошто су академски цитати шаблонски, АИ је веома „добра“ у стварању цитата који се уклапа у образац, али чији је садржај измишљен.
  • У хуманистичким наукама, читалац често не провери одмах извор; Ово омогућава да лажно приписивање остане непримећено.

Закључак: за археолога, сваку тројку аутор-година наслова у АИ излазу треба сматрати сумњивим док се не докаже супротно.

Савет: Користите вештачку интелигенцију не као „проналазач ресурса“, већ као помоћника који „обрађује стварне ресурсе које имате“. Сами пронађите праве чланке, дајте ПДФ-ове АИ, а затим реците „само се ослоните на ове текстове које сам вам дао“. Дакле, основа за халуцинације је у великој мери елиминисана.

Кораци прегледа литературе

  1. Обим и питање. шта тражиш? Појасните тему, период, регион и језичке границе.
  2. Прикупљање стварних ресурса. Пронађите аутентичне публикације из библиотечких каталога, институционалних база података и поузданих директоријума. Ризично је „пронаћи“ ресурсе за АИ у овом кораку.
  3. Сумирање и мапирање. Дајте стварне текстове које сте прикупили АИ да сумира и мапира теме и дискусије.
  4. Поређење и анализа празнина. Упоредите ставове различитих аутора, пронађите противречности и неистражене празнине.
  5. Правопис и атрибуција. Напишите сопствени аргумент са провереним цитатима. АИ даје нацрт; преписујете својом анализом и стварним цитатима.

Дисциплина верификације извора

За сваки цитат проверите:

  • Има ли? Да ли се аутор, година, наслов, часопис/издавач налазе у стварном каталогу (библиотека, ДОИ, индекс)?
  • Да ли каже оно што каже? Да ли извор заиста говори оно што АИ тврди? Отворите извор и прочитајте одговарајући одељак.
  • Да ли је контекст тачан? Да ли је цитат преузет из ауторове намере? Да ли се супротан став приписује аутору?
  • Да ли је ажуриран и поуздан? Да ли је публикација рецензирана, актуелна или одражава застарело виђење?
Опрез: Само зато што се ДОИ или број инвентара који даје АИ појављује у „исправном формату“ не значи да тај запис постоји. Потражите број у стварном систему. Непостојећи ДОИ је један од најчешћих знакова халуцинација.

три мини кофера

Случај 1 — Резиме уштеђеног времена. Студент докторских студија дао је 60 правих чланака (све које је пронашао и преузео) АИ и направио тематску мапу; Направио је табелу у којој је упоређивао ставове различитих аутора о врсти налаза за два дана уместо за недеље. Сваки резиме је извор и верификован.

Случај 2 — Лажна катастрофа заваривања је спречена. Један дипломирани студент је замолио АИ да „предложи изворе на ову тему“ и добио је сјајну листу од 15 цитата. Када га је проверио у библиотеци, открио је да 9 са листе никада није постојало — прави аутори, измишљени наслови. Ако би се ова листа уврстила у библиографију теза, кредибилитет одбране би се урушио и то би се чак могло сматрати научним недоличним понашањем.

Случај 3 — Исправљена нетачна атрибуција. Један тим би пријавио да је АИ рекао писцу „да је датирао ту локацију у римски период“; Када смо се обратили извору, видело се да је аутор тврдио супротно, да је локалитет био предримски. АИ је преокренуо поглед. Читање извора спречило је озбиљну грешку.

Четири шаблона за копирање

1) Ослањајући се искључиво на дати извор:

Ваша улога: асистент за сажетак литературе. Ослоните се САМО на текстове које ћу налепити испод. НЕМОЈТЕ ДОДАТИ никакве информације, изворе или референце изван ових текстова. Запишите сваку своју тврдњу, назначујући на ком делу текста који сам вам дао се заснива. Ако вас питају за нешто чега нема у тексту, реците „није у наведеним изворима“.

2) Мапа теме и поређење:

У наставку ћу дати резиме [Н] извора. Групишите их по темама и направите табелу поређења: за сваку тему, који аутори шта кажу, где се слажу, где су у супротности. Користите само ставове у текстовима које сам дао; додавање коментара.

3) Контролна листа за верификацију цитата:

Приликом ВЕРИФИКАЦИЈЕ листе цитата испод, извршите кораке које треба да проверим за сваки (претрага у каталогу, потврда ДОИ, прочитајте релевантну страницу, провера контекста). НЕ потврђујете тачност атрибуција; реци ми шта да проверим. Изворна измишљотина.

4) Анализа празнина:

На основу сажетака литературе које сам дао, наведите питања/празнине за које се чини да су недовољно истражене на ову тему. За сваку празнину покажите који извор је оставио отворену. Ослоните се само на текстове које сам вам дао; Немојте нагађати.

Слаби промпт / Јаки промпт

Слабо обавештење:

Наведите 15 најважнијих академских извора о овој теми и њихове сажетке.

АИ производи реалистичну, али вероватно делимично измишљену листу без гледања у праву базу података; Ово је сама замка лажног приписивања.

Снажан упит:

Испод лепим пуне цитате и резимее 12 правих чланака које сам пронашао. САМО на основу њих, појављује се тематска мапа и табела поређења. ДОДАЈТЕ нови ресурс. Наведите из ког чланка долази сваки ред. Означите теме које недостају као „није обухваћене у овом скупу ресурса“.

Разлика: прва је препуна ризика од измишљених извора; овај други поуздано рукује стварним ресурсима.

Актуелност, језик и сива књижевност

Три карактеристике археолошке литературе чине употребу АИ посебно ризичним. Прва је актуелност: знање о моделу је замрзнуто на одређени датум, а ископавања, нова датирања и исправке после тог датума изостају. АИ може представити замењени поглед као још увек важећи; Зато би требало да скенирате актуелне публикације. Друго, вишејезичност: археологија је написана на немачком, француском, италијанском, турском и многим локалним језицима осим енглеског. Важан извештај о ископавању можда је објављен само на једном језику; Ослањање искључиво на изворе на енглеском значи пропуштање великог дела литературе. АИ помаже у скенирању ових извора на страним језицима, али опет, стварни извор морате имати при руци.

Треће, сива литература: огромна већина археолошког знања лежи у документима који се не појављују у званичним часописима, као што су комерцијални извештаји о ископавањима, институционални архиви и необјављене тезе. Сива литература (извештаји произведени на комерцијалним или корпоративним каналима који нису лако доступни у традиционалним именицима публикација) или одсутна или оскудна у подацима о обуци АИ; Дакле, АИ или не зна ове информације или их измишља. Права археолошка прича једног краја често је у овој сивој литератури, а до ње се може доћи само правом руком из институционалних архива.

Савет: Рећи „АИ није могао ништа да пронађе“ или „има мало ресурса“ о некој теми не значи да је мало посла на ту тему; Често је извор у сивој литератури, на страном језику или иза информативног дела модела. Питајте праву архиву о недостатку ресурса, а не АИ.

Табела задатка из књижевности

Куест

Улога АИ

људска одлука

верификација

извор

Слаб/у ризику

Избор из стварног каталога

Потврда каталога

сумирајући

Јака (на дати текст)

тачност, избор

Прочитајте извор

Поређење

Мапа тема/противуречности

Коментар, тежина

изворни контекст

Писање цитата

формат оквира

садржај, тачност

Да ли постоји/да ли пише

Анализа празнина

Питања кандидата

Истраживачка вредност

Познавање домена

Уобичајене грешке

  • Учинити да АИ „пронађе“ ресурсе. Производи лажно приписивање; Пронађите ресурсе сами.
  • Ослањајући се на ДОИ/импринт формат. Иако се чини да је формат исправан, запис је можда измишљен; Претражите у систему.
  • Коришћење резимеа без читања извора. АИ може да преокрене став аутора.
  • Објављивање АИ текста какав јесте. Оригиналност и ризик од плагијата; Пишите својом анализом.
  • Не постављајући ограничење „само дати ресурс“. Без ограничења, АИ додаје екстерно фабриковане информације.

Укратко

У прегледу литературе, АИ штеди много времена у сумирању, упоређивању и анализи чињеничних извора. Али у хуманистичким наукама, о верификацији извора се не може преговарати: сами пронађите изворе, проверите сваки цитат у стварном каталогу, поново проверите сваки сажетак, наметните ограничење „само цитирани извор“ и напишите коначни текст са сопственом оригиналном анализом. Лажни извор ће уништити ваш рад.

Задатак апликације

Изаберите тему, пронађите 8-10 стварних публикација у библиотеци/индексу и прикупите њихове цитате. Направите упоредни графикон са шаблонима „Само на основу извора“ и „Мапа тема“. У посебном експерименту, реците АИ да „предложи извор“ (без икаквих ограничења) и провери цитате које предлаже један по један у каталогу и забележи колико их је стварних.

контролна листа

  • [ ] Изворе сам пронашао из правих каталога.
  • [ ] Ставио сам ограничење „само се ослањајте на дати извор“ на АИ.
  • [ ] Сваки цитат сам потврдио каталогом/ДОИ.
  • [ ] Проверио сам сваки сажетак враћајући се на извор.
  • [ ] Написао сам коначни текст са својом оригиналном анализом и потврђеним референцама.