Kazanimlar:
- Yapay zekayı literatür haritalama, kavram tarama ve okuma önceliklendirmede kullanıp uydurma kaynak (halüsinasyon) riskini yönetebilme
- Her atıf, bulgu ve etki büyüklüğü iddiasını birincil kaynaktan teyit eden bir doğrulama akışı kurabilme
- Kanıt düzeyini (meta-analiz, RKÇ, vaka) ayırt edip yapay zeka özetini kanıt hiyerarşisiyle tartabilme
Psikoloji kanıta dayalı bir meslektir: bir müdahalenin işe yarayıp yaramadığını "bana öyle geliyor" değil, araştırma kanıtı söyler. Bir uzman güncel kalmak, bir tez yazmak veya bir vaka için doğru yaklaşımı seçmek istediğinde literatüre başvurur. Ama literatür devasadır; her yıl on binlerce makale yayımlanır. Yapay zeka (AI) burada muazzam bir hızlandırıcıdır: bir kavramı tanımlar, alanı haritalar, hangi makaleyi önce okumanız gerektiğini önerir, karmaşık bir metni sadeleştirir. Ancak AI'ın literatürdeki en tehlikeli özelliği de buradadır: var olmayan kaynak uydurur. Bu ünitede AI'ı literatür işinde nasıl bir hızlandırıcı yapacağınızı, uydurma kaynak (halüsinasyon) tuzağına düşmeden nasıl çalışacağınızı öğreneceksiniz.
AI literatürde ne yapar, neyi uydurur
AI'ın güçlü olduğu literatür görevleri: bir kavramı sade dille açıklamak; bir alandaki büyük tartışmaları özetlemek; bir metni okunabilir hale getirmek; anahtar kelime ve arama stratejisi önermek; bir makaleyi (siz metni verdiğinizde) özetlemek; farklı görüşleri karşılaştırmak. Bunlarda AI saatlerce sürecek okumayı dakikalara indirir.
AI'ın uydurduğu şeyler: atıflar (yazar, yıl, dergi, DOI numarası dahil kusursuz görünen ama var olmayan kaynaklar); istatistikler (etki büyüklüğü, örneklem sayısı, p-değeri gibi gerçekmiş gibi görünen sayılar); bulgular (bir çalışmanın "şunu bulduğu" iddiası, gerçekte bulmadığı halde). Bunun nedeni AI'ın bir arama motoru değil, bir "olası kelime tahmincisi" olmasıdır: en olası görünen atıf biçimini üretir, doğruluğunu kontrol etmez.
Dikkat: AI'ın verdiği hiçbir atıf, siz birincil kaynaktan (makalenin kendisinden) teyit etmeden geçerli değildir. Kusursuz görünen bir DOI bile uydurma olabilir. "Bulamadım" demek, "yanlış kaynak koydum" demekten her zaman daha iyidir.
Kanıt hiyerarşisi: her bulgu eşit değildir
AI bir bulguyu özetlerken onun kanıt gücünü size söylemez. Oysa kanıtın bir hiyerarşisi vardır. Bir iddiayı tartarken hangi tür kanıta dayandığını bilmek şarttır.
Kanıt düzeyi
Ne demek
Güç
Meta-analiz / sistematik derleme
Çok sayıda çalışmanın istatistiksel birleşimi
En yüksek
Randomize kontrollü çalışma (RKÇ)
Katılımcıların rastgele gruplara ayrıldığı deney
Yüksek
Boylamsal / kesitsel çalışma
Gözleme dayalı, deneysel olmayan
Orta
Vaka serisi / vaka raporu
Tek veya birkaç vakanın anlatımı
Düşük
Uzman görüşü / kuramsal yazı
Kanıttan çok yorum
En düşük
AI size "araştırmalar gösteriyor ki..." dediğinde ilk sorunuz şu olmalı: Hangi tür araştırma? Bir meta-analizin bulgusuyla tek bir vaka raporunun bulgusu aynı ağırlıkta değildir.
Adım adım: AI destekli güvenli literatür akışı
- Kavramı AI'a açıklattır. Konuya hızlı girmek için AI'dan sade bir özet ve anahtar kavramlar isteyin. (Bu bir başlangıç, kaynak değil.)
- Arama stratejisi kurdur. AI'dan anahtar kelimeler, eş anlamlılar ve arama dizisi önermesini isteyin; bunu gerçek veri tabanlarında (akademik arama motorları, dergi arşivleri) kullanın.
- Gerçek kaynakları kendiniz bulun. Makaleleri hakemli veri tabanlarından edinin. AI'ın önerdiği başlıkları arama ipucu olarak kullanın, atıf olarak değil.
- Metni AI'a özetletin. Bulduğunuz gerçek makalenin metnini AI'a verip özet/karşılaştırma isteyin. Artık AI uydurmaz, çünkü elinde gerçek metin vardır.
- Her sayıyı ve bulguyu teyit edin. AI özetteki bir etki büyüklüğünü metindeki asıl değerle karşılaştırın.
- Kanıt düzeyini etiketleyin. Her bulgunun yanına kanıt türünü yazın.
İpucu: AI'ı literatürde iki farklı modda kullanın: "kaynaksız düşündürücü" (kavram anlatımı, arama fikri) ve "kaynaklı özetleyici" (siz metni verdiğinizde). İkincisi güvenlidir çünkü AI kendi hafızasından değil, verdiğiniz metinden çalışır.
Üç mini vaka
Vaka 1 — Sahte atıf salgını. Bir yüksek lisans öğrencisi, kaygı bozuklukları üzerine 15 kaynaklı bir bölüm için AI'dan atıf ister. AI hepsini APA formatında verir. Öğrenci kontrol ettiğinde 15 kaynaktan 6'sının gerçekte var olmadığını (%40), 3'ünün yanlış dergiye atandığını görür. Yani listenin yarısı kullanılamaz. Ders: atıf AI'dan değil, gerçek veri tabanından gelir.
Vaka 2 — Doğru kullanım. Bir klinisyen, elindeki 4 gerçek meta-analizin PDF metnini tek tek AI'a verip "her birinin örneklem sayısını, ana etki büyüklüğünü ve sınırlılığını tablola" der. AI 30 sayfalık 4 makaleyi 10 dakikada karşılaştırmalı bir tabloya indirir. Klinisyen her sayıyı metinle teyit eder; hepsi doğru çıkar çünkü AI kendi hafızasından değil, verilen metinden çalışmıştır.
Vaka 3 — Kanıt düzeyi tuzağı. Bir uzman, AI'a "X terapisi işe yarıyor mu?" diye sorar. AI "evet, çalışmalar destekliyor" der ve dört "çalışma" sayar. Uzman inceleyince bunların üçünün tek vaka raporu, birinin blog yazısı olduğunu görür; ortada tek bir RKÇ bile yoktur. İddia biçimsel olarak "kanıtlı" görünse de kanıt gücü çok zayıftır.
Kopyalanabilir promptlar ve şablonlar
Şu konuya yeni başlıyorum. Bana KAYNAK UYDURMADAN, yalnızca kavramsal bir giriş yap:temel kavramlar, alanın büyük tartışmaları ve arama yaparken kullanabileceğim anahtarkelime + eş anlamlı listesi. Atıf verme; atıf gerekiyorsa "kaynağı kendin bul" de.Konu: [konu]
Aşağıya gerçek bir makalenin metnini yapıştırıyorum. Yalnızca bu metinden çalış,dışarıdan bilgi ekleme. Şunları çıkar: araştırma sorusu, yöntem, örneklem (n),ana bulgu ve etki büyüklüğü, sınırlılıklar, kanıt düzeyi. Metin: [makale metni]
Aşağıda 3 makalenin metni var. Bunları şu sütunlarla karşılaştırmalı tabloya dök:yazar-yıl, örneklem, yöntem, ana bulgu, kanıt düzeyi, sınırlılık. Sadece verilenmetinlerden çalış, kaynak ekleme. Metinler: [metinler]
Bu metindeki her sayısal iddiayı (n, p, etki büyüklüğü, yüzde) ayrı satırda listeleki ben orijinal makaleyle teyit edeyim. Kendin doğrulayamadığın hiçbir sayı ekleme.Metin: [özet]
Zayıf prompt / Güçlü prompt
Zayıf prompt: "Bilişsel davranışçı terapinin depresyonda etkinliğiyle ilgili 10 akademik kaynak ver."
Bu prompt AI'ı hafızasından atıf uydurmaya davet eder; çıktının önemli bir kısmı sahte olacaktır.
Güçlü prompt: "Bilişsel davranışçı terapi ve depresyon konusunda veri tabanında arama yapmak için anahtar kelime, eş anlamlı ve arama dizisi öner. Kaynak/atıf verme; ben makaleleri gerçek veri tabanından bulacağım, sonra sana metinlerini vereceğim."
Bu prompt AI'ı güvenli role (arama stratejisti) koyar; atıflar gerçek kaynaktan gelir.
Sık yapılan hatalar
- AI'ın verdiği atıfı doğrudan kullanmak. Kusursuz görünen kaynaklar sıklıkla uydurmadır; teyit edilmeden asla kullanılmaz.
- DOI/link'e körü körüne güvenmek. AI gerçekçi ama var olmayan DOI de üretebilir; açıp kontrol etmeden geçerli sayılmaz.
- Kanıt düzeyini görmezden gelmek. "Çalışmalar diyor" cümlesinin arkasında bir blog mu, bir meta-analiz mi olduğunu sormamak.
- AI özetini makalenin yerine koymak. Özet bir haritadır; kritik bir kararı sadece özete dayandırmak, metni okumadan hüküm vermektir.
- Tek modda kullanmak. AI'ı hep "hafızadan kaynak ver" modunda kullanmak; oysa güvenli olan "verilen metinden özetle" modudur.
Özetle
AI literatür işinde kavram açıklama, arama stratejisi ve (metni siz verdiğinizde) özetleme için güçlü bir hızlandırıcıdır. Ama kendi hafızasından atıf, istatistik ve bulgu uydurur (halüsinasyon). Her atıfı ve sayıyı birincil kaynaktan teyit edin; bulamadığınız kaynağı geçersiz sayın. Her bulgunun kanıt düzeyini (meta-analizden vaka raporuna) etiketleyin. AI'ı "kaynaksız düşündürücü" ve "kaynaklı özetleyici" olarak iki ayrı modda, ikincisini tercih ederek kullanın.
Uygulama görevi
Bir konu seçin. Önce AI'dan o konuda 5 atıf isteyin (kaynaklı mod). Sonra bu 5 atfı gerçek bir akademik arama motorunda tek tek aratın ve kaçının gerçekten var olduğunu not edin. Ardından aynı konuda 2 gerçek makale bulup metinlerini AI'a verin ve karşılaştırmalı bir tablo çıkarttırın. İki deneyimi karşılaştırın: hangisi güvenilir çıktı verdi?
Kontrol listesi
- [ ] AI'ın verdiği hiçbir atfı teyit etmeden kullanmadım.
- [ ] Makaleleri gerçek, hakemli veri tabanından edindim.
- [ ] Özet için AI'a gerçek makale metnini verdim (hafızasından değil).
- [ ] Her sayısal iddiayı orijinal metinle karşılaştırdım.
- [ ] Her bulguya kanıt düzeyini etiketledim.
- [ ] Bulamadığım kaynağı geçersiz saydım.