مراجعة الأدبيات والوصول إلى المعلومات القائمة على الأدلة

المكاسب:

• القدرة على استخدام الذكاء الاصطناعي في رسم خرائط الأدبيات ومسح المفاهيم وتحديد أولويات القراءة لإدارة مخاطر المصادر الملفقة (الهلوسة)
• القدرة على إنشاء تدفق تحقق يؤكد كل استشهاد وإيجاد ومطالبة بحجم التأثير من المصدر الأساسي
• القدرة على التمييز بين مستوى الأدلة (التحليل التلوي، RCT، الحالة) وموازنة ملخص الذكاء الاصطناعي مقابل التسلسل الهرمي للأدلة

إن علم النفس مهنة قائمة على الأدلة: فالأدلة البحثية تخبرنا ما إذا كان التدخل ناجحا، وليس "يبدو الأمر كذلك بالنسبة لي". عندما يريد أحد الخبراء البقاء على اطلاع دائم، أو كتابة أطروحة، أو اختيار النهج الصحيح لقضية ما، فإنه يلجأ إلى الأدب. لكن الأدب ضخم. يتم نشر عشرات الآلاف من المقالات كل عام. يعد الذكاء الاصطناعي (AI) مسرعًا هائلاً هنا: فهو يحدد المفهوم، ويرسم خريطة للمجال، ويقترح المقالة التي يجب أن تقرأها أولاً، ويبسط النص المعقد. ولكن هنا تكمن أخطر سمات الذكاء الاصطناعي في الأدبيات: فهو يختلق مصادر غير موجودة. ستتعلم في هذه الوحدة كيفية جعل الذكاء الاصطناعي مسرعًا في الأعمال الأدبية، وكيفية العمل دون الوقوع في فخ المصادر الملفقة (الهلوسة).

ماذا يفعل الذكاء الاصطناعي في الأدبيات، وماذا يشكل؟

المهام الأدبية التي يكون فيها الذكاء الاصطناعي قوياً: شرح المفهوم بلغة واضحة؛ تلخيص المناقشات الرئيسية في هذا المجال؛ لجعل النص قابلاً للقراءة؛ اقتراح الكلمات الرئيسية واستراتيجية البحث؛ تلخيص مقال (عند تقديم النص)؛ مقارنة وجهات النظر المختلفة. في هذه الحالة، يقوم الذكاء الاصطناعي بتقليل ساعات القراءة إلى دقائق.

الأشياء التي يصنعها الذكاء الاصطناعي: الاستشهادات (المصادر التي تبدو مثالية ولكنها غير موجودة، بما في ذلك المؤلف، والسنة، والمجلة، ورقم DOI)؛ الإحصائيات (أرقام تبدو حقيقية مثل حجم التأثير، وحجم العينة، والقيمة الاحتمالية)؛ النتائج (تدعي إحدى الدراسات أنها "وجدت ذلك" في حين أنها في الواقع لم تفعل ذلك). وذلك لأن الذكاء الاصطناعي ليس محرك بحث، ولكنه "أداة تخمين الكلمات المحتملة": فهو يولد تنسيق الاقتباس الأكثر ترجيحًا، دون التحقق من دقته.

انتبه: أي اقتباس يقدمه الذكاء الاصطناعي لا يكون صالحًا دون التحقق منه من المصدر الأساسي (المقالة نفسها). حتى DOI الذي يبدو مثاليًا يمكن أن يكون مزيفًا. من الأفضل دائمًا أن تقول "لم أتمكن من العثور عليه" بدلاً من أن تقول "لقد وضعت المصدر الخطأ".

التسلسل الهرمي للأدلة: ليست كل النتائج متساوية

عندما يلخص الذكاء الاصطناعي نتيجة ما، فإنه لا يخبرك بقوتها الأدلةية. ومع ذلك، هناك تسلسل هرمي للأدلة. عند وزن المطالبة، من الضروري معرفة نوع الأدلة التي تستند إليها.

مستوى الأدلة

ماذا تقصد؟

القوة

التحليل التلوي / المراجعة المنهجية

مزيج إحصائي من دراسات متعددة

أعلى

تجربة معشاة ذات شواهد (RCT)

تجربة يتم فيها تقسيم المشاركين إلى مجموعات عشوائية

عالية

دراسة طولية / مستعرضة

رصدية وغير تجريبية

متوسطة

سلسلة الحالة / تقرير الحالة

وصف حالة واحدة أو عدة حالات

منخفض

رأي الخبراء / الكتابة النظرية

تفسير أكثر من الأدلة

أدنى

عندما يخبرك الذكاء الاصطناعي بأن "الأبحاث تظهر..." يجب أن يكون سؤالك الأول: ما نوع البحث؟ إن نتيجة التحليل التلوي لا تحمل نفس وزن نتيجة تقرير حالة واحدة.

خطوة بخطوة: تدفق الأدبيات الآمنة المدعومة بالذكاء الاصطناعي

1. اطلب من الذكاء الاصطناعي أن يشرح هذا المفهوم. للوصول إلى هذه النقطة بسرعة، اطلب من الذكاء الاصطناعي ملخصًا بسيطًا ومفاهيم أساسية. (هذا ابتداء وليس مصدرا)
2. إعداد استراتيجية البحث. اطلب من الذكاء الاصطناعي اقتراح الكلمات الرئيسية والمرادفات وسلسلة البحث؛ استخدامه على قواعد البيانات الحقيقية (محركات البحث الأكاديمية، أرشيف المجلات).
3. ابحث عن مصادر حقيقية بنفسك. الحصول على المقالات من قواعد البيانات التي يراجعها النظراء. استخدم العناوين المقترحة بواسطة الذكاء الاصطناعي كأدلة بحث، وليس كاقتباسات.
4. تلخيص النص إلى منظمة العفو الدولية. قم بإعطاء نص المقالة الفعلية التي عثرت عليها إلى الذكاء الاصطناعي واطلب ملخصًا/مقارنة. لم يعد الذكاء الاصطناعي يختلق الأشياء، لأنه يحتوي على نص حقيقي.
5. قم بتأكيد كل رقم وإيجاده. يقوم الذكاء الاصطناعي بمقارنة حجم التأثير في الملخص مع القيمة الفعلية في النص.
6. تسمية مستوى الأدلة. اكتب نوع الدليل بجانب كل نتيجة.

نصيحة: استخدم الذكاء الاصطناعي في الأدب في وضعين مختلفين: "موحٍ بلا مصادر" (عرض المفهوم، فكرة البحث) و"ملخص المصادر" (عندما تقدم النص). هذا الأخير آمن لأن الذكاء الاصطناعي يعمل من النص الذي تقدمه، وليس من ذاكرته الخاصة.

ثلاث حالات صغيرة

الحالة 1 - وباء الإسناد المزيف. يطلب أحد طلاب الدراسات العليا اقتباسًا من الذكاء الاصطناعي لفصل مكون من 15 مصدرًا عن اضطرابات القلق. يقدم الذكاء الاصطناعي كل ذلك بتنسيق APA. عندما يراجع الطالب، يرى أن 6 مصادر من أصل 15 غير موجودة بالفعل (40%) وأن 3 مصادر تم تعيينها للمجلة الخاطئة. لذا فإن نصف القائمة غير صالحة للاستعمال. الدرس المستفاد: الإسناد يأتي من قاعدة البيانات الحقيقية، وليس الذكاء الاصطناعي.

الحالة 2 - الاستخدام الصحيح. يقدم الطبيب نصًا بتنسيق PDF مكونًا من 4 تحليلات وصفية حقيقية للذكاء الاصطناعي واحدًا تلو الآخر ويقول "جدول رقم العينة وحجم التأثير الرئيسي والقيود الخاصة بكل منها." يقوم الذكاء الاصطناعي بتقليل 4 مقالات مكونة من 30 صفحة إلى جدول مقارن في 10 دقائق. يؤكد الطبيب كل رقم عن طريق النص؛ وتبين أن جميعها صحيحة لأن الذكاء الاصطناعي يعمل من النص المحدد، وليس من ذاكرته الخاصة.

الحالة 3 - فخ مستوى الأدلة. أحد الخبراء يسأل الذكاء الاصطناعي: "هل العلاج X فعال؟" يسأل. يقول الذكاء الاصطناعي "نعم، الدراسات تدعم ذلك" ويعد أربع "دراسات". عندما يفحصها الخبير، يرى أن ثلاثة منها عبارة عن تقرير حالة واحد وواحد عبارة عن مشاركة مدونة؛ لا يوجد حتى تجربة معشاة ذات شواهد واحدة. على الرغم من أن هذا الادعاء قد يبدو "مثبتًا" رسميًا، إلا أن قوته الإثباتية ضعيفة جدًا.

المطالبات والقوالب القابلة للنسخ

لقد بدأت للتو في هذا الموضوع. بدون إنشاء مصادر لي، فقط أعطني مقدمة مفاهيمية: المفاهيم الأساسية، والمناقشات الرئيسية للمجال، وقائمة من الكلمات الرئيسية + المرادفات التي يمكنني استخدامها عند البحث. الإسناد؛ إذا كان الإسناد مطلوبًا، فقل "ابحث عن المصدر بنفسك". الموضوع: [الموضوع]

أقوم بلصق نص المقالة الفعلية أدناه. العمل فقط من هذا النص، لا تضيف معلومات خارجية. استخرج ما يلي: سؤال البحث، الطريقة، العينة (ن)، النتيجة الرئيسية وحجم التأثير، القيود، مستوى الأدلة. النص: [نص المقال]

وفيما يلي نص 3 مقالات. ضعها في جدول مقارن مع الأعمدة التالية: سنة المؤلف، العينة، الطريقة، النتيجة الرئيسية، مستوى الأدلة، القيود. العمل فقط من النصوص المحددة، لا تضيف مصادر. النصوص: [النصوص]

أدرج كل مطالبة رقمية (n، p، حجم التأثير، النسبة المئوية) في هذا النص في سطر منفصل حتى أتمكن من تأكيدها بالمقال الأصلي. لا تضف أي أرقام لا يمكنك التحقق منها بنفسك. النص: [ملخص]

موجه ضعيف / موجه قوي

موجه ضعيف: "أعط 10 مصادر أكاديمية حول فعالية العلاج السلوكي المعرفي في الاكتئاب."

تدعو هذه المطالبة الذكاء الاصطناعي إلى تعويض الإسناد من الذاكرة؛ سيكون جزء كبير من الناتج زائفًا.

مطالبة قوية: "اقترح كلمات رئيسية ومرادفات وسلاسل بحث للبحث في قاعدة البيانات حول العلاج السلوكي المعرفي والاكتئاب. لا تقدم مصادر/استشهادات؛ سأجد المقالات من قاعدة البيانات الفعلية، ثم أعطيك نصوصها."

تضع هذه المطالبة الذكاء الاصطناعي في الدور الآمن (استراتيجي البحث)؛ المراجع تأتي من المصدر الحقيقي.

الأخطاء الشائعة

• مباشرة باستخدام الإسناد الذي قدمه الذكاء الاصطناعي. المصادر التي تبدو مثالية غالبًا ما تكون ملفقة؛ ولا يتم استخدامه أبدًا دون تأكيد.
• الثقة العمياء في DOI/الرابط. يمكن للذكاء الاصطناعي أيضًا إنتاج DOI واقعي ولكنه غير موجود؛ ولن تعتبر صالحة حتى تقوم بفتحها والتحقق منها.
• تجاهل مستوى الأدلة. عدم التساؤل عما إذا كان هناك مدونة أو تحليل تلوي وراء جملة "تقول الدراسات".
• استبدال ملخص الذكاء الاصطناعي بالمقال. إنها خريطة موجزة. إن بناء القرار الحاسم على الملخص فقط يعني إصدار الحكم دون قراءة النص.
• استخدام في وضع واحد. استخدام الذكاء الاصطناعي دائمًا في وضع "المورد من الذاكرة"؛ في حين أن الوضع الآمن هو وضع "التلخيص من النص المحدد".

باختصار

في مجال الأعمال الأدبية، يعد الذكاء الاصطناعي مسرعًا قويًا لتوضيح المفهوم واستراتيجية البحث والتلخيص (عند تقديم النص). لكنه يختلق مراجع وإحصائيات ونتائج من ذاكرته الخاصة (الهلوسة). التحقق من كل استشهاد ورقم من المصدر الأساسي؛ فكر في المصدر الذي لا يمكنك العثور عليه غير صالح. قم بتسمية مستوى الأدلة (من التحليل التلوي إلى تقرير الحالة) لكل نتيجة. استخدم الذكاء الاصطناعي في وضعين مختلفين: "موحٍ من دون مصادر" و"ملخص من مصادر"، مع تفضيل الخيار الأخير.

مهمة التطبيق

اختر موضوعا. اطلب أولاً من الذكاء الاصطناعي 5 استشهادات حول هذا الموضوع (وضع المصدر). ثم ابحث في هذه الاستشهادات الخمسة واحدًا تلو الآخر في محرك بحث أكاديمي حقيقي ولاحظ عدد الاستشهادات الموجودة بالفعل. ثم ابحث عن مقالتين حقيقيتين حول نفس الموضوع، وقم بتغذية نصوصهما إلى الذكاء الاصطناعي، واطلب منه إنتاج جدول مقارنة. قارن بين تجربتين: أيهما أعطى مخرجات موثوقة؟

قائمة مرجعية

• [ ] لم أستخدم أيًا من المراجع التي قدمتها منظمة العفو الدولية دون التأكد منها.
• [ ] لقد حصلت على المقالات من قاعدة بيانات حقيقية تمت مراجعتها من قبل النظراء.
• [ ] للحصول على الملخص، أعطيت الذكاء الاصطناعي نص المقالة الفعلي (وليس من الذاكرة).
• [ ] لقد قارنت كل مطالبة رقمية بالنص الأصلي.
• [ ] قمت بتسمية مستوى الأدلة لكل نتيجة.
• [ ] لقد أبطلت المصدر الذي لم أتمكن من العثور عليه.