Keuntungan:
- Kemampuan untuk menggunakan kecerdasan buatan dalam pemetaan literatur, pemindaian konsep, dan prioritas membaca untuk mengelola risiko sumber palsu (halusinasi)
- Kemampuan untuk membuat alur verifikasi yang mengonfirmasi setiap kutipan, temuan, dan klaim ukuran efek dari sumber utama
- Kemampuan untuk membedakan tingkat bukti (meta-analisis, RCT, kasus) dan mempertimbangkan ringkasan AI terhadap hierarki bukti
Psikologi adalah profesi yang berbasis bukti: bukti penelitian memberi tahu kita apakah suatu intervensi berhasil, bukan “sepertinya bagi saya”. Ketika seorang ahli ingin mengetahui perkembangan terkini, menulis tesis, atau memilih pendekatan yang tepat untuk suatu kasus, dia beralih ke literatur. Namun literaturnya sangat banyak; Puluhan ribu artikel diterbitkan setiap tahun. Kecerdasan buatan (AI) adalah akselerator yang luar biasa di sini: ia mendefinisikan sebuah konsep, memetakan bidangnya, menyarankan artikel mana yang harus Anda baca terlebih dahulu, menyederhanakan teks yang kompleks. Namun di sinilah letak fitur AI yang paling berbahaya dalam literatur: AI mengarang sumber yang tidak ada. Pada unit ini, Anda akan mempelajari bagaimana menjadikan AI sebagai akselerator dalam bisnis sastra, bagaimana bekerja tanpa terjebak dalam sumber yang dibuat-buat (halusinasi).
Apa yang dilakukan AI dalam literatur, apa yang dibuatnya?
Tugas sastra di mana AI kuat: menjelaskan konsep dalam bahasa sederhana; merangkum perdebatan besar di suatu bidang; untuk membuat teks dapat dibaca; menyarankan kata kunci dan strategi pencarian; meringkas sebuah artikel (saat Anda memberikan teks); membandingkan pandangan yang berbeda. Dalam hal ini, AI mengurangi jam membaca menjadi beberapa menit.
Hal-hal yang dibuat oleh AI: kutipan (sumber yang terlihat sempurna tetapi tidak ada, termasuk penulis, tahun, jurnal, nomor DOI); statistik (angka yang tampak nyata seperti ukuran efek, ukuran sampel, nilai p); temuan (sebuah penelitian mengklaim telah "menemukan hal itu" padahal kenyataannya tidak). Hal ini karena AI bukanlah mesin pencari, melainkan “penebak kata yang mungkin”: AI menghasilkan format kutipan yang paling mungkin muncul, tanpa memeriksa keakuratannya.
Perhatian: Setiap kutipan yang diberikan oleh AI tidak valid tanpa Anda memverifikasinya dari sumber utama (artikel itu sendiri). Bahkan DOI yang tampak sempurna pun bisa saja palsu. Selalu lebih baik mengatakan "Saya tidak dapat menemukannya" daripada "Saya memasukkan sumber yang salah".
Hierarki bukti: tidak semua temuan sama
Saat AI merangkum suatu temuan, AI tidak memberi tahu Anda kekuatan pembuktiannya. Namun, ada hierarki bukti. Saat mempertimbangkan suatu klaim, penting untuk mengetahui jenis bukti apa yang menjadi dasar klaim tersebut.
Tingkat bukti
Apa maksudmu?
kekuatan
Meta-analisis / tinjauan sistematis
Kombinasi statistik dari beberapa penelitian
tertinggi
Uji coba terkontrol secara acak (RCT)
Eksperimen di mana peserta dibagi menjadi beberapa kelompok acak
tinggi
Studi longitudinal/cross-sectional
Observasional, non-eksperimental
sedang
Seri kasus/laporan kasus
Deskripsi satu atau beberapa kasus
rendah
Pendapat ahli/penulisan teori
Lebih banyak interpretasi daripada bukti
terendah
Ketika AI memberi tahu Anda “penelitian menunjukkan…” pertanyaan pertama Anda seharusnya adalah: Jenis penelitian apa? Temuan meta-analisis tidak memiliki bobot yang sama dengan temuan laporan kasus tunggal.
Langkah demi langkah: Aliran literatur aman yang didukung AI
- Minta AI menjelaskan konsepnya. Untuk langsung ke pokok permasalahan dengan cepat, mintalah ringkasan sederhana dan konsep utama kepada AI. (Ini adalah permulaan, bukan sumber.)
- Siapkan strategi pencarian. Minta AI untuk menyarankan kata kunci, sinonim, dan string pencarian; menggunakannya pada database nyata (mesin pencari akademik, arsip jurnal).
- Temukan sendiri sumber sebenarnya. Dapatkan artikel dari database yang ditinjau oleh rekan sejawat. Gunakan judul yang disarankan AI sebagai petunjuk pencarian, bukan sebagai kutipan.
- Ringkas teks ke AI. Berikan teks artikel sebenarnya yang Anda temukan kepada AI dan minta ringkasan/perbandingannya. AI tidak lagi mengarang-ngarang, karena sudah memiliki teks asli.
- Konfirmasikan setiap nomor dan temuan. AI membandingkan ukuran efek dalam abstrak dengan nilai sebenarnya dalam teks.
- Beri label pada tingkat bukti. Tuliskan jenis bukti di samping setiap temuan.
Tip: Gunakan AI dalam literatur dalam dua mode berbeda: “sugestif tanpa sumber” (eksposisi konsep, ide pencarian) dan “peringkasan bersumber” (saat Anda memberikan teks). Yang terakhir ini aman karena AI bekerja dari teks yang Anda berikan, bukan dari memorinya sendiri.
tiga kasus mini
Kasus 1 — Epidemi atribusi palsu. Seorang mahasiswa pascasarjana meminta kutipan AI untuk bab 15 sumber tentang gangguan kecemasan. AI memberikan semuanya dalam format APA. Ketika siswa memeriksa, dia melihat bahwa 6 dari 15 sumber sebenarnya tidak ada (40%) dan 3 ditempatkan pada jurnal yang salah. Jadi separuh daftarnya tidak dapat digunakan. Pelajaran: atribusi berasal dari database sebenarnya, bukan AI.
Kasus 2 — Penggunaan yang benar. Seorang dokter memberikan teks PDF dari 4 meta-analisis nyata ke AI satu per satu dan mengatakan "tabelkan jumlah sampel, ukuran efek utama, dan batasan masing-masing." AI mengurangi 4 artikel setebal 30 halaman menjadi tabel perbandingan dalam 10 menit. Dokter mengkonfirmasi setiap nomor melalui teks; Semuanya ternyata benar karena AI bekerja dari teks yang diberikan, bukan dari ingatannya sendiri.
Kasus 3 — Tingkat jebakan bukti. Seorang ahli bertanya kepada AI, “Apakah terapi X berhasil?” dia bertanya. AI mengatakan “ya, penelitian mendukungnya” dan menghitung empat “studi”. Ketika ahli memeriksanya, dia melihat bahwa tiga di antaranya adalah laporan kasus tunggal dan satu lagi adalah postingan blog; Bahkan tidak ada satu pun RCT. Meskipun klaim tersebut mungkin tampak “terbukti” secara formal, kekuatan pembuktiannya sangat lemah.
Perintah dan templat yang dapat disalin
Saya baru saja memulai topik ini. TANPA MENCIPTAKAN SAYA SUMBER, cukup beri saya pengenalan konseptual: konsep dasar, diskusi utama di lapangan, dan daftar kata kunci + sinonim yang dapat saya gunakan saat mencari. Atribusi; Jika atribusi diperlukan, ucapkan "temukan sendiri sumbernya". Subjek: [subjek]
Saya menempelkan teks artikel sebenarnya di bawah. Bekerja hanya dari teks ini, jangan menambahkan informasi dari luar. Ekstrak yang berikut ini: pertanyaan penelitian, metode, sampel (n), temuan utama dan ukuran efek, batasan, tingkat bukti. Teks: [teks artikel]
Di bawah ini adalah teks dari 3 artikel. Masukkan ke dalam tabel perbandingan dengan kolom berikut: tahun penulis, sampel, metode, temuan utama, tingkat bukti, batasan. Bekerja hanya dari teks yang diberikan, jangan menambahkan sumber. Teks: [teks]
Cantumkan setiap klaim numerik (n, p, ukuran efek, persentase) dalam teks ini pada baris terpisah sehingga saya dapat mengonfirmasinya dengan artikel aslinya. Jangan menambahkan nomor apa pun yang tidak dapat Anda verifikasi sendiri.Teks: [ringkasan]
Perintah lemah / Perintah kuat
Perintah lemah: "Berikan 10 sumber akademis tentang efektivitas terapi perilaku kognitif pada depresi."
Perintah ini mengundang AI untuk membuat atribusi dari memori; Sebagian besar keluarannya palsu.
Perintah yang kuat: "Sarankan kata kunci, sinonim, dan string pencarian untuk mencari database tentang terapi perilaku kognitif dan depresi. Jangan berikan sumber/kutipan; Saya akan mencari artikel dari database sebenarnya, lalu memberikan teksnya kepada Anda."
Perintah ini menempatkan AI pada peran aman (ahli strategi pencarian); Referensi berasal dari sumber sebenarnya.
Kesalahan umum
- Langsung menggunakan atribusi yang diberikan oleh AI. Sumber yang tampaknya sempurna sering kali dibuat-buat; Itu tidak pernah digunakan tanpa konfirmasi.
- Mempercayai DOI/tautan secara membabi buta. AI juga dapat menghasilkan DOI yang realistis namun tidak ada; Ini tidak akan dianggap valid sampai Anda membuka dan memeriksanya.
- Mengabaikan tingkat bukti. Bukan menanyakan apakah ada blog atau meta-analisis di balik kalimat "studi mengatakan".
- Menggantikan ringkasan AI untuk artikel tersebut. Ini adalah peta ringkasan; Mendasarkan keputusan kritis hanya pada ringkasan berarti membuat penilaian tanpa membaca teks.
- Menggunakan dalam mode tunggal. Selalu menggunakan AI dalam mode "sumber daya dari memori"; sedangkan yang aman adalah mode "meringkas dari teks yang diberikan".
Singkatnya
Dalam bisnis literatur, AI adalah akselerator yang kuat untuk klarifikasi konsep, strategi pencarian, dan ringkasan (saat Anda memberikan teks). Tapi dia mengarang referensi, statistik dan temuan dari ingatannya sendiri (halusinasi). Verifikasi setiap kutipan dan nomor dari sumber utama; Anggaplah sumber yang menurut Anda tidak valid. Beri label pada tingkat bukti (mulai dari meta-analisis hingga laporan kasus) untuk setiap temuan. Gunakan AI dalam dua mode berbeda: “sugestif tanpa sumber daya” dan “peringkasan bersumber”, dengan preferensi untuk yang terakhir.
Tugas aplikasi
Pilih topik. Pertama minta AI untuk 5 kutipan tentang topik itu (mode bersumber). Kemudian cari 5 kutipan ini satu per satu di mesin pencari akademis yang sebenarnya dan catat berapa banyak yang benar-benar ada. Kemudian temukan 2 artikel nyata tentang topik yang sama, masukkan teksnya ke AI, dan minta AI menghasilkan tabel perbandingan. Bandingkan dua pengalaman: manakah yang memberikan hasil yang dapat diandalkan?
daftar periksa
- [ ] Saya tidak menggunakan referensi apa pun yang diberikan oleh AI tanpa mengonfirmasinya.
- [ ] Saya memperoleh artikel dari database nyata yang ditinjau oleh rekan sejawat.
- [ ] Untuk ringkasannya, saya memberikan AI teks artikel yang sebenarnya (bukan dari memori).
- [ ] Saya membandingkan setiap klaim numerik dengan teks aslinya.
- [ ] Saya memberi label pada tingkat bukti untuk setiap temuan.
- [ ] Saya membatalkan sumber yang tidak dapat saya temukan.