Kazanimlar:
- Metodolojik kararları, promptları ve model bilgisini kaydederek araştırmayı izlenebilir kılabilme
- Ham veri ile işlenmiş veriyi ayırıp tüm dönüşüm adımlarını belgeleyebilme
- Yapay zekanın rolünü yöntem bölümünde şeffaf beyan edip 'tekrar üretilebilir mi' testini uygulayabilme
Bilimin en temel özelliği, bir bulgunun tek bir kişinin sözüne değil, başkalarının da doğrulayabileceği bir sürece dayanmasıdır. Yeniden üretilebilirlik (reproducibility), bir araştırmanın verisini ve yöntemini alan başka bir araştırmacının aynı adımları izleyerek aynı sonuca ulaşabilmesidir. Buna yakın bir kavram şeffaflıktır (transparency): araştırmacının ne yaptığını, hangi kararı neden verdiğini açıkça belgelemesi. YZ çağında bu iki kavram hem daha kolay hem daha kritik hale geldi. Kolay, çünkü YZ süreçleri belgelemeye yardım eder; kritik, çünkü YZ'nin kararlarının izini bırakmazsanız, çalışmanızı kimse — siz bile — tekrar üretemez. Bu ünitede araştırmanızı nasıl yeniden üretilebilir ve şeffaf kılacağınızı öğreneceksiniz.
Sorunun kalbi şudur: YZ ile çalışırken çok sayıda küçük karar verirsiniz — hangi promptu kullandınız, hangi modeli, hangi ayarları, hangi çıktıyı kabul edip hangisini reddettiniz. Bu kararlar belgelenmezse, aynı promptu farklı bir günde çalıştırdığınızda farklı bir çıktı alabilirsiniz (dil modelleri her seferinde birebir aynı yanıtı vermez). Bir hakem ya da meslektaş "bu tema analizine nasıl vardınız" diye sorduğunda, "YZ öyle dedi" bilimsel bir cevap değildir. Şeffaflık, tam da bu "kara kutuyu" açıp süreci izlenebilir kılmaktır.
Adım adım: izlenebilir bir araştırma kurmak
1. Karar günlüğü tutun. Her önemli metodolojik kararı — neden bu örneklem, neden bu kod, neden bu YZ önerisini kabul ettiniz — tarihli bir günlüğe yazın. YZ, bu günlüğü düzenlemeye yardım eder.
2. Promptları ve model bilgisini kaydedin. Kullandığınız her promptu, hangi YZ modelini, hangi tarihte çalıştırdığınızı saklayın. Bu, çalışmanızın "malzeme listesi"dir.
3. Ham veri ile işlenmiş veriyi ayırın. Orijinal veriyi hiç değiştirmeden saklayın; tüm dönüşümleri (temizleme, kodlama) belgelenmiş adımlarla ayrı yapın. Böylece herkes baştan izleyebilir.
4. YZ'nin rolünü açıkça yazın. Yöntem bölümünde YZ'yi hangi görevlerde, nasıl kullandığınızı dürüstçe belirtin. Çoğu dergi ve kurum artık bunu zorunlu kılıyor.
5. Mümkünse veri ve kodu paylaşın. Etik ve gizlilik el verdiğinde, anonimleştirilmiş veriyi ve analiz kodunu açık depolarda paylaşmak şeffaflığın zirvesidir.
İpucu: Basit bir test: "Ben bu araştırmayı 6 ay sonra kendim tekrar yapabilir miyim?" Eğer promptlarınızı, kararlarınızı ve adımlarınızı belgelemediyseniz, cevap büyük olasılıkla "hayır"dır. Kendiniz için üretilebilir kılın; o zaman başkası için de olur.
Üç mini vaka
Vaka 1 — İzsiz analiz çöktü. Bir araştırmacı, YZ ile bir tema analizi yaptı ama hangi promptu kullandığını kaydetmedi. Hakem "bu temalara nasıl ulaştınız" diye sorunca süreci gösteremedi; analizi baştan, bu kez günlük tutarak tekrarlamak zorunda kaldı. İki hafta kaybetti.
Vaka 2 — Karar günlüğü tartışmayı bitirdi. Bir ekipte "neden bu kodları birleştirdik" diye anlaşmazlık çıktı. Ama karar günlüğünde her birleştirme kararının tarihi ve gerekçesi vardı. YZ günlüğü özetleyip kronolojik gösterince tartışma dakikalar içinde çözüldü.
Vaka 3 — Şeffaf açıklama güven kazandırdı. Bir makalede yazarlar, YZ'yi "transkript düzenleme ve ilk kod önerisi için kullandık, tüm kodları iki araştırmacı elle doğruladı" diye açıkça yazdı. Hakemler bu şeffaflığı olumlu buldu; gizlenmiş bir YZ kullanımından çok daha güvenilir bulundu.
Dört kopyalanabilir şablon
1) Karar günlüğü şablonu:
Bir metodolojik karar günlüğü tablosu oluştur. Sütunlar: tarih,karar, gerekçe, alternatifler, YZ'nin rolü (varsa), kim onayladı.Aşağıdaki karar notlarımı bu tabloya işle ve eksik gerekçeleri"tamamlanmalı" diye işaretle. Notlar: [buraya]
2) YZ kullanım beyanı taslağı:
Yöntem bölümüne koymak üzere, YZ kullanımımı şeffaf açıklayanbir paragraf taslakla. Şu görevlerde kullandım: [liste]. Şugörevlerde kullanMADIM: [liste]. Tüm çıktıları elle doğruladım.Model ve tarih: [x]. Dürüst, abartısız, akademik bir dil kullan.
3) Yeniden üretilebilirlik denetimi:
Araştırma sürecimi anlatıyorum: [özet]. Başka bir araştırmacıbunu tekrar üretebilir mi? Belgelenmemiş, belirsiz ya daizlenemez adımları listele: hangi veri, hangi dönüşüm, hangiprompt, hangi karar eksik? Her boşluk için ne kaydetmemgerektiğini söyle.
4) Veri kökeni (provenance) haritası:
Ham verimden nihai bulguma giden tüm dönüşüm adımlarını bir akışolarak listele: ham veri → temizleme → kodlama → analiz → bulgu.Her adımda ne yapıldığını, hangi araçla ve hangi kararlayapıldığını göster. İzlenemeyen adımı işaretle. Süreç: [buraya]
Zayıf prompt / Güçlü prompt
Zayıf prompt:
Bu analizin yöntemini bir paragrafta yaz.
YZ, süreci belgelemeden genel geçer bir yöntem paragrafı üretir; hangi karar nasıl verildi, YZ nerede kullanıldı belirsiz kalır. Bu, üretilebilir değildir.
Güçlü prompt:
Yöntem bölümü için üretilebilir bir açıklama yaz. Şu bilgilerikullan: veri kaynağı [x], örneklem [y], analiz adımları [z],kullandığım YZ modeli ve tarihi [t], YZ'nin tam rolü [r], insandoğrulama süreci [d]. Başka biri bu adımları izleyip tekrarüretebilecek kadar somut yaz. Eksik bıraktığım her bilgiyi sor.
Fark: ikinci yaklaşım süreci somut, izlenebilir ve gerçekten tekrar üretilebilir kılar.
Şeffaflık katmanları
Katman
Ne belgelenir
Neden önemli
Karar günlüğü
Metodolojik kararlar + gerekçe
Yargıyı savunur
Prompt kaydı
Kullanılan prompt, model, tarih
YZ'yi izlenebilir yapar
Veri kökeni
Ham → işlenmiş dönüşümler
Adımları açar
YZ beyanı
YZ'nin rolü, sınırı
Dürüstlük
Paylaşım
Anonim veri + kod
En üst şeffaflık
Sık yapılan hatalar
- Promptları kaydetmemek. Kullandığınız yönergeyi saklamazsanız süreci gösteremezsiniz.
- "YZ öyle dedi" demek. Bilimsel gerekçe süreç ve yargıdır, modelin sözü değil.
- Ham veriyi üzerine yazmak. Orijinali koruyun; dönüşümleri ayrı ve belgeli yapın.
- YZ kullanımını gizlemek. Şeffaf beyan güven kazandırır; gizlemek itibar kaybettirir.
- Kendiniz için bile üretilemez bırakmak. 6 ay sonra kendinizin tekrar yapamayacağı iş, bilim değildir.
Özetle
Yeniden üretilebilirlik ve şeffaflık, bir çalışmayı bir kişinin sözünden çıkarıp herkesin sınayabileceği bir bilime dönüştürür. YZ ile çalışırken bu daha da kritiktir, çünkü modelin kararları izlenmezse süreç bir kara kutuya döner. Karar günlüğü tutun, promptları ve model bilgisini kaydedin, ham veri ile işlenmişi ayırın, YZ'nin rolünü dürüstçe beyan edin ve etik izin verdiğinde veri ile kodu paylaşın. "6 ay sonra kendim tekrar üretebilir miyim" testini geçen bir araştırma, başkaları için de güvenilirdir.
Uygulama görevi
Yaptığınız ya da planladığınız küçük bir analiz için "karar günlüğü şablonu"yla en az 5 metodolojik kararı gerekçesiyle kaydedin. Kullandığınız promptları, modeli ve tarihi ayrı bir dosyada saklayın. Sonra "yeniden üretilebilirlik denetimi" şablonuyla YZ'ye sürecinizdeki belgelenmemiş boşlukları buldurun ve her boşluğu kapatın. Son olarak "YZ kullanım beyanı" taslağıyla yöntem bölümüne konacak şeffaf bir paragraf yazın.
Kontrol listesi
- [ ] Her önemli metodolojik kararı gerekçesiyle günlüğe yazdım.
- [ ] Kullandığım promptları, modeli ve tarihi kaydettim.
- [ ] Ham veriyi değiştirmeden sakladım, dönüşümleri belgeledim.
- [ ] YZ'nin rolünü yöntem bölümünde dürüstçe beyan ettim.
- [ ] "6 ay sonra tekrar üretebilir miyim" testini uyguladım.