Ünite 7 / 11

Literatür Taraması, Kaynak Doğrulama ve Halüsinasyonla Mücadele

Kazanimlar:

  • Yapay zekayı gerçek kaynakları özetleme ve karşılaştırmada kullanıp 'yalnızca verilen kaynağa dayan' kısıtıyla uydurma atıf zeminini ortadan kaldırabilme
  • Her atıfı gerçek katalogda teyit etme, her özeti kaynağa dönüp doğrulama ve DOI/künye halüsinasyonlarını yakalama disiplinini uygulayabilme
  • Güncellik, çok dillilik ve gri literatürün yapay zekanın bilgi sınırlarını nasıl belirlediğini ve özgün yazımın neden gerektiğini kavrayabilme

Arkeoloji ve kültürel miras, birikimli bir bilimdir: her yeni çalışma, yüzyıllara yayılmış önceki yayınların üzerine kurulur. Bir bölgenin, bir buluntu tipinin ya da bir dönemin literatürünü (o konuda yayımlanmış makale, kitap, rapor ve tezlerin bütünü) taramak, herhangi bir bilimsel çalışmanın ilk ve en yorucu adımıdır. Bu ünitede YZ'nin literatür taramasını nasıl hızlandırdığını, ama bu alanda neden kaynak doğrulamanın her şeyden önemli olduğunu ve YZ'nin en tehlikeli hatası olan halüsinasyonla (uydurma kaynak, atıf ve bilgi üretme) nasıl mücadele edileceğini derinlemesine göreceğiz.

Temel ilke: YZ literatürü özetlemeye, karşılaştırmaya ve düzenlemeye yardım eder; ama hiçbir atıf, gerçek bir katalogda teyit edilmeden kullanılamaz ve hiçbir özet, kaynağın kendisi okunmadan bilimsel iddiaya dönüşemez. Beşeri bilimlerde bir sahte kaynak, tüm çalışmanın güvenilirliğini yıkar.

Neden bu alanda halüsinasyon bu kadar kritik?

Genel sohbet araçlarının en yaygın hatası, var olmayan ama son derece gerçekçi görünen akademik kaynaklar üretmektir. YZ, gerçek bir yazarın adını, gerçek bir derginin adını ve makul bir başlığı birleştirerek "kusursuz" görünen bir atıf uydurabilir. Neden?

  • YZ, "bir sonraki en olası kelimeyi" üretir; gerçek bir veritabanına bakmaz (özel bir araç bağlı değilse).
  • Akademik atıflar kalıplı olduğu için, YZ kalıba uyan ama içeriği uydurma bir atıf yaratmakta çok "iyidir".
  • Beşeri bilimlerde okuyucu çoğu zaman kaynağı hemen kontrol etmez; bu, sahte atıfın fark edilmeden yayına girmesine yol açar.

Sonuç: bir arkeolog için YZ çıktısındaki her yazar-yıl-başlık üçlüsü, aksi kanıtlanana kadar şüpheli kabul edilmelidir.

İpucu: YZ'yi "kaynak bulucu" olarak değil, "elinizdeki gerçek kaynakları işleyen" bir asistan olarak kullanın. Gerçek makaleleri kendiniz bulun, PDF'leri YZ'ye verin, sonra "yalnızca verdiğim bu metinlere dayan" deyin. Böylece halüsinasyon zemini büyük ölçüde ortadan kalkar.

Literatür taramasının adımları

  1. Kapsam ve soru. Neyi arıyorsunuz? Konuyu, dönemi, bölgeyi ve dil sınırlarını netleştirin.
  2. Gerçek kaynakların toplanması. Kütüphane katalogları, kurumsal veritabanları ve güvenilir dizinlerden gerçek yayınları bulun. Bu adımda YZ'ye kaynak "buldurmak" risklidir.
  3. Özetleme ve haritalama. Topladığınız gerçek metinleri YZ'ye verip özetletin, temaları ve tartışmaları haritalayın.
  4. Karşılaştırma ve boşluk analizi. Farklı yazarların görüşlerini karşılaştırın, çelişkileri ve araştırılmamış boşlukları bulun.
  5. Yazım ve atıf. Kendi argümanınızı, kaynağı teyit edilmiş atıflarla yazın. YZ taslak verir; siz analizinizle ve gerçek atıflarla yeniden yazarsınız.

Kaynak doğrulama disiplini

Her atıf için şu kontrolü yapın:

  • Var mı? Yazar, yıl, başlık, dergi/yayınevi gerçek bir katalogda (kütüphane, DOI, dizin) bulunuyor mu?
  • Söylediğini söylüyor mu? Kaynak gerçekten YZ'nin iddia ettiği şeyi mi diyor? Kaynağı açıp ilgili yeri okuyun.
  • Bağlam doğru mu? Alıntı, yazarın kastından koparılmış mı? Karşıt görüş yazara mal edilmiş mi?
  • Güncel ve güvenilir mi? Yayın hakemli mi, güncel mi, aşılmış bir görüşü mü yansıtıyor?
Dikkat: YZ'nin verdiği bir DOI'nin veya envanter numarasının "doğru biçimde" görünmesi, o kaydın var olduğunu göstermez. Numarayı gerçek sistemde aratın. Var olmayan bir DOI, en sık rastlanan halüsinasyon işaretlerinden biridir.

Üç mini vaka

Vaka 1 — Özet zaman kazandırdı. Bir doktora öğrencisi, elindeki 60 gerçek makaleyi (hepsini kendisi bulup indirmişti) YZ'ye verip tema haritası çıkarttı; farklı yazarların bir buluntu tipi üzerine görüşlerini karşılaştıran bir tabloyu haftalar yerine iki günde taslakladı. Her özet, kaynak açılıp doğrulandı.

Vaka 2 — Sahte kaynak felaketi önlendi. Bir yüksek lisans öğrencisi, YZ'ye "bu konuda kaynak öner" dedi ve 15 atıflık şık bir liste aldı. Kütüphanede kontrol edince listenin 9'unun hiç var olmadığını gördü — gerçek yazarlar, uydurma başlıklar. Bu liste tez kaynakçasına girseydi, savunmada güvenilirlik çöker, hatta bilimsel suistimal sayılabilirdi.

Vaka 3 — Yanlış atıf düzeltildi. Bir ekip, YZ'nin bir yazara "şu siti Roma dönemine tarihledi" dediğini rapora koyacaktı; kaynağa dönünce yazarın tam tersini, sitin Roma öncesi olduğunu savunduğu görüldü. YZ, görüşü tersine çevirmişti. Kaynağı okumak, ciddi bir hatayı önledi.

Dört kopyalanabilir şablon

1) Yalnızca verilen kaynağa dayanma:

Rolün: literatür özet asistanı. YALNIZCA aşağıda yapıştıracağımmetinlere dayan. Bu metinlerin dışından hiçbir bilgi, kaynak veyaatıf EKLEME. Her iddianı, verdiğim metnin hangi bölümünedayandığını belirterek yaz. Metinde olmayan bir şey sorulursa"verilen kaynaklarda yok" de.

2) Tema haritası ve karşılaştırma:

Aşağıdaki [N] kaynağın özetlerini vereceğim. Bunları temalara göregrupla ve bir karşılaştırma tablosu çıkar: her tema için hangiyazarlar ne diyor, nerede anlaşıyor, nerede çelişiyor. Yalnızcaverdiğim metinlerdeki görüşleri kullan; yorum ekleme.

3) Atıf doğrulama kontrol listesi:

Aşağıdaki atıf listesini DOĞRULARKEN her biri için kontrol etmemgereken adımları çıkar (katalogda arama, DOI teyidi, ilgili sayfayıokuma, bağlam kontrolü). Sen atıfların doğruluğunu ONAYLAMA;benim neyi kontrol etmem gerektiğini söyle. Kaynak uydurma.

4) Boşluk analizi:

Verdiğim literatür özetlerine dayanarak, bu konuda henüz yeterincearaştırılmamış görünen soruları/boşlukları listele. Her boşluk içinhangi kaynağın bunu açık bıraktığını göster. Yalnızca verdiğimmetinlere dayan; spekülasyon yapma.

Zayıf prompt / Güçlü prompt

Zayıf prompt:

Bu konudaki en önemli 15 akademik kaynağı ve özetlerini ver.

YZ, gerçek bir veritabanına bakmadan gerçekçi ama büyük olasılıkla kısmen uydurma bir liste üretir; bu, sahte atıf tuzağının ta kendisidir.

Güçlü prompt:

Aşağıya kendi bulduğum 12 gerçek makalenin tam künyesini veözetlerini yapıştırıyorum. YALNIZCA bunlara dayanarak bir temaharitası ve karşılaştırma tablosu çıkar. Yeni kaynak EKLEME. Hersatırın hangi makaleden geldiğini belirt. Eksik kalan konuları"bu kaynak kümesinde ele alınmamış" olarak işaretle.

Fark: birincisi uydurma kaynak riskiyle doludur; ikincisi gerçek kaynakları güvenle işler.

Güncellik, dil ve gri literatür

Arkeoloji literatürünün üç özelliği, YZ kullanımını özellikle riskli kılar. Birincisi güncellik: bir modelin bilgisi belirli bir tarihte donmuştur ve o tarihten sonraki kazılar, yeni tarihlemeler ve düzeltmeler onda yoktur. YZ, aşılmış bir görüşü hâlâ geçerliymiş gibi sunabilir; bu yüzden güncel yayınları siz taramalısınız. İkincisi çok dillilik: arkeoloji, İngilizce dışında Almanca, Fransızca, İtalyanca, Türkçe ve pek çok yerel dilde yazılır. Önemli bir kazı raporu yalnızca bir dilde yayımlanmış olabilir; sadece İngilizce kaynaklara güvenmek, literatürün büyük bir kısmını gözden kaçırmak demektir. YZ bu yabancı dildeki kaynakları taramada yardımcı olur, ama yine gerçek kaynak elinizde olmalıdır.

Üçüncüsü gri literatür: arkeolojik bilginin çok büyük bir kısmı, ticari kazı raporları, kurum arşivleri ve yayımlanmamış tezler gibi resmî dergilerde çıkmayan belgelerde yatar. Gri literatür (ticari veya kurumsal kanallarda üretilen, geleneksel yayın dizinlerinde kolayca bulunamayan raporlar), YZ'nin eğitim verisinde ya hiç yoktur ya çok azdır; dolayısıyla YZ bu bilgiyi ya bilmez ya da uydurur. Bir bölgenin gerçek arkeolojik hikâyesi çoğu zaman bu gri literatürdedir ve ona ancak kurum arşivlerinden, gerçek elle ulaşırsınız.

İpucu: Bir konuda "YZ bir şey bulamadı" ya da "az kaynak var" demesi, o konuda az çalışma olduğu anlamına gelmez; çoğu zaman kaynak gri literatürde, yabancı dilde ya da modelin bilgi kesiminden sonradadır. Kaynak yokluğunu YZ'ye değil, gerçek arşive sorun.

Literatür görev tablosu

Görev

YZ'nin rolü

İnsan kararı

Doğrulama

Kaynak bulma

Zayıf/riskli

Gerçek katalogdan seçim

Katalog teyidi

Özetleme

Güçlü (verilen metne)

Doğruluk, seçim

Kaynağı okuma

Karşılaştırma

Tema/çelişki haritası

Yorum, ağırlık

Kaynak bağlamı

Atıf yazımı

Biçim taslağı

İçerik, doğruluk

Var mı/söylüyor mu

Boşluk analizi

Aday sorular

Araştırma değeri

Alan bilgisi

Sık yapılan hatalar

  • YZ'ye kaynak "buldurmak". Sahte atıf üretir; kaynakları siz bulun.
  • DOI/künye biçimine güvenmek. Biçim doğru görünse de kayıt uydurma olabilir; sistemde arayın.
  • Özeti kaynağı okumadan kullanmak. YZ yazarın görüşünü tersine çevirebilir.
  • YZ metnini olduğu gibi yayınlamak. Özgünlük ve intihal riski; kendi analizinizle yazın.
  • "Yalnızca verilen kaynak" kısıtını koymamak. Kısıt olmadan YZ dışarıdan uydurma bilgi ekler.

Özetle

Literatür taramasında YZ, gerçek kaynakları özetleme, karşılaştırma ve boşluk analizinde büyük zaman kazandırır. Ama beşeri bir bilimde kaynak doğrulama pazarlık konusu değildir: kaynakları siz bulun, her atıfı gerçek katalogda teyit edin, her özeti kaynağa dönüp kontrol edin, "yalnızca verilen kaynak" kısıtını koyun ve nihai metni kendi özgün analizinizle yazın. Sahte bir kaynak, çalışmanızı yok eder.

Uygulama görevi

Bir konu seçip kütüphane/dizin üzerinden 8-10 gerçek yayın bulun ve künyelerini toplayın. "Yalnızca verilen kaynağa dayanma" ve "Tema haritası" şablonlarıyla bir karşılaştırma tablosu çıkarın. Ayrı bir deneyde YZ'ye (kısıt koymadan) "kaynak öner" deyin ve önerdiği atıfları katalogda tek tek kontrol edip kaçının gerçek çıktığını not edin.

Kontrol listesi

  • [ ] Kaynakları kendim gerçek kataloglardan buldum.
  • [ ] YZ'ye "yalnızca verilen kaynağa dayan" kısıtını koydum.
  • [ ] Her atıfı katalogda/DOI ile teyit ettim.
  • [ ] Her özeti kaynağa dönüp doğruladım.
  • [ ] Nihai metni kendi özgün analizimle, teyitli atıflarla yazdım.