وحدة 9 / 11

الاستنساخ والأبحاث الشفافة

المكاسب:

  • القدرة على جعل البحث قابلاً للتتبع من خلال تسجيل القرارات المنهجية والمطالبات والمعلومات النموذجية
  • القدرة على فصل البيانات الأولية عن البيانات المعالجة وتوثيق جميع خطوات التحويل
  • القدرة على الإعلان بشفافية عن دور الذكاء الاصطناعي في قسم الطريقة وتطبيق اختبار "هل يمكن استنساخه"

الميزة الأساسية للعلم هي أن النتيجة لا تعتمد على كلمة شخص واحد، ولكن على عملية يمكن التحقق منها من قبل الآخرين. التكاثر هو قدرة باحث آخر، بأخذ بيانات وطريقة الدراسة، على الوصول إلى نفس النتيجة باتباع نفس الخطوات. وهناك مفهوم مماثل وهو الشفافية: حيث يوثق الباحث بوضوح ما فعله ولماذا اتخذ هذا القرار. وفي عصر الذكاء الاصطناعي، أصبح هذان المفهومان أسهل وأكثر أهمية. سهل، لأن الذكاء الاصطناعي يساعد في توثيق العمليات؛ أمر بالغ الأهمية، لأنه إذا لم تترك أي أثر لقرارات الذكاء الاصطناعي، فلن يتمكن أحد - ولا حتى أنت - من إعادة إنتاج عملك. ستتعلم في هذه الوحدة كيفية جعل بحثك قابلاً للتكرار وشفافًا.

جوهر المشكلة هو ما يلي: عندما تعمل مع الذكاء الاصطناعي، فإنك تتخذ الكثير من القرارات الصغيرة - التي تطالبك بالاستخدام، والنموذج، والإعدادات، والمخرجات التي قبلتها والتي رفضتها. إذا لم يتم توثيق هذه القرارات، فقد تحصل على مخرجات مختلفة عند تشغيل نفس الموجه في يوم مختلف (نماذج اللغة لا تعطي نفس الاستجابة بالضبط في كل مرة). عندما يسأل أحد المراجعين أو الزملاء "كيف وصلت إلى تحليل الموضوع هذا"، فإن عبارة "قال الذكاء الاصطناعي" ليست إجابة علمية. إن الشفافية تتعلق على وجه التحديد بفتح هذا "الصندوق الأسود" وجعل العملية قابلة للتتبع.

خطوة بخطوة: إنشاء بحث يمكن تتبعه

1. احتفظ بمذكرات القرار. قم بتدوين كل قرار منهجي مهم - لماذا هذه العينة، لماذا هذا الكود، لماذا قبلت اقتراح الذكاء الاصطناعي هذا - في مجلة مؤرخة. يساعد الذكاء الاصطناعي في تنظيم هذا السجل.

2. حفظ المطالبات ومعلومات النموذج. احتفظ بسجل لكل مطالبة استخدمتها، ونموذج الذكاء الاصطناعي الذي قمت بتشغيله عليه، وفي أي تاريخ. هذه هي "قائمة المواد" لعملك.

3. فصل البيانات الأولية عن البيانات المعالجة. احتفظ بالبيانات الأصلية دون تغيير؛ القيام بجميع التحويلات (التنظيف والتشفير) بشكل منفصل بخطوات موثقة. حتى يتمكن الجميع من المشاهدة من البداية.

4. اكتب بوضوح دور الذكاء الاصطناعي. في قسم الطريقة، اذكر بصراحة المهام التي استخدمتها وكيف استخدمت الذكاء الاصطناعي. تتطلب معظم المجلات والمؤسسات الآن هذا.

5. شارك البيانات والرمز إن أمكن. عندما تسمح الأخلاق والخصوصية بذلك، فإن مشاركة البيانات مجهولة المصدر وأكواد التحليلات في المستودعات المفتوحة هي قمة الشفافية.

نصيحة: اختبار بسيط: "هل يمكنني إجراء هذا البحث بنفسي مرة أخرى خلال 6 أشهر؟" إذا لم تقم بتوثيق مطالباتك وقراراتك وخطواتك، فالإجابة على الأرجح هي "لا". اجعلها منتجة لنفسك؛ ثم يحدث ذلك لشخص آخر أيضًا.

ثلاث حالات صغيرة

الحالة 1 - انهار التحليل الذي لا أثر له. أجرى أحد الباحثين تحليلًا للموضوع باستخدام الذكاء الاصطناعي لكنه لم يسجل الموجه الذي استخدمه. وعندما سأل الحكم "كيف وصلت إلى هذه المواضيع؟" ولم يتمكن من إظهار العملية؛ كان عليه أن يكرر التحليل مرة أخرى، وهذه المرة يحتفظ بمذكراته. لقد خسر أسبوعين.

الحالة 2 - سجل القرار ينهي المناقشة. نشأ خلاف بين الفريق الذي تساءل "لماذا قمنا بدمج هذه الرموز؟" لكن سجل القرارات احتوى على تاريخ ومبررات كل قرار اندماج. تم حل الحجة في غضون دقائق عندما قام الذكاء الاصطناعي بتلخيص السجل وعرضه بترتيب زمني.

الحالة 3 - الإفصاح الشفاف يبني الثقة. في إحدى المقالات، كتب المؤلفون صراحةً أننا استخدمنا الذكاء الاصطناعي "لتحرير النصوص واقتراح التعليمات البرمجية الأولية، مع قيام باحثين بالتحقق يدويًا من جميع الرموز". وجد المراجعون هذه الشفافية إيجابية. لقد وجد أنه أكثر موثوقية من استخدام الذكاء الاصطناعي المخفي.

أربعة قوالب قابلة للنسخ

1) قالب سجل القرار:

إنشاء جدول سجل القرارات المنهجية. الأعمدة: التاريخ، القرار، الأساس المنطقي، البدائل، دور الذكاء الاصطناعي (إن وجد)، من وافق عليه. قم بإدراج ملاحظات قراري أدناه في هذا الجدول ووضع علامة على أي مبررات مفقودة بأنها "يجب إكمالها". ملاحظات: [هنا]

2) مسودة بيان استخدام الذكاء الاصطناعي:

قم بصياغة فقرة تشرح بشفافية استخدامي للذكاء الاصطناعي لوضعها في قسم الأساليب. لقد استخدمته في هذه المهام: [قائمة]. لم أستخدمه في المهام التالية: [قائمة]. لقد قمت بالتحقق من جميع المخرجات يدويًا. الموديل والتاريخ: [x]. استخدم لغة أكاديمية صادقة وبسيطة.

3) فحص الاستنساخ:

أصف عملية البحث الخاصة بي: [ملخص]. هل يمكن لباحث آخر أن يعيد إنتاج هذا؟ قم بإدراج الخطوات غير الموثقة، أو غير الواضحة، أو التي لا يمكن تعقبها: ما هي البيانات، وما التحول، وما الذي يدفع، وما هو القرار المفقود؟ أخبرني ما الذي يجب تسجيله لكل مساحة.

4) خريطة مصدر البيانات:

قم بإدراج جميع خطوات التحويل من البيانات الأولية إلى اكتشافي النهائي كتدفق: البيانات الأولية ← التنظيف ← الترميز ← التحليل ← الاكتشاف. أظهر ما تم إنجازه في كل خطوة، وبأي أداة وبأي قرار. ضع علامة على الخطوة التي لا يمكن تتبعها. العملية: [هنا]

موجه ضعيف / موجه قوي

حث ضعيف:

اكتب طريقة هذا التحليل في فقرة واحدة.

يقوم الذكاء الاصطناعي بإنتاج فقرة طريقة عامة دون توثيق العملية؛ ولا يزال من غير الواضح كيف تم اتخاذ القرار وأين تم استخدام الذكاء الاصطناعي. هذا غير قابل للتصنيع.

مطالبة قوية:

اكتب وصفًا قابلاً للمنتج لقسم الطريقة. استخدم المعلومات التالية: مصدر البيانات [x]، العينة [y]، خطوات التحليل [z]، نموذج الذكاء الاصطناعي الذي استخدمته وتاريخه [t]، الدور الدقيق للذكاء الاصطناعي [r]، عملية التحقق البشري [d]. اكتب بشكل ملموس بما فيه الكفاية حتى يتمكن شخص آخر من اتباع هذه الخطوات وإعادة إنتاجها. اسألني عن أي معلومات تركتها.

الفرق: النهج الثاني يجعل العملية ملموسة، ويمكن تتبعها وقابلة للتكرار حقا.

طبقات الشفافية

طبقة

ما تم توثيقه

لماذا هو مهم؟

يوميات القرار

القرارات المنهجية + الأساس المنطقي

يدافع عن القضاء

التسجيل الفوري

موجه المستخدمة، نموذج، التاريخ

يجعل الذكاء الاصطناعي قابلاً للتتبع

أصل البيانات

التحويلات الخام → المعالجة

يفتح الخطوات

بيان منظمة العفو الدولية

دور وحدود الذكاء الاصطناعي

الصدق

مشاركة

بيانات مجهولة + كود

الشفافية في نهاية المطاف

الأخطاء الشائعة

  • عدم حفظ المطالبات. إذا لم تلتزم بالتعليمات التي استخدمتها، فلن تتمكن من توضيح العملية.
  • يعني "قال الذكاء الاصطناعي ذلك". التبرير العلمي هو عملية وحكم، وليس كلمة النموذج.
  • الكتابة فوق البيانات الأولية. احتفظ بالأصل؛ جعل التحويلات منفصلة وموثقة.
  • إخفاء استخدام الذكاء الاصطناعي. البيان الشفاف يبني الثقة؛ الاختباء يسبب فقدان السمعة.
  • تركها غير قابلة للإنتاج حتى لنفسك. الوظيفة التي لا يمكنك القيام بها مرة أخرى بعد 6 أشهر ليست علمًا.

باختصار

فالقابلية للتكرار والشفافية تحولان الدراسة من كلمة شخص واحد إلى علم يمكن لأي شخص اختباره. وهذا أكثر أهمية عند العمل مع الذكاء الاصطناعي، لأنه إذا لم يتم اتباع قرارات النموذج، تصبح العملية بمثابة صندوق أسود. احتفظ بسجل للقرارات، وسجل المطالبات والمعلومات النموذجية، وافصل البيانات الأولية عن المعالجة، وأعلن بصراحة عن دور الذكاء الاصطناعي، وشارك البيانات والتعليمات البرمجية عندما تسمح الأخلاقيات بذلك. الدراسة التي تجتاز اختبار "هل يمكنني إعادة إنتاج نفسي بعد 6 أشهر" تعتبر أيضًا موثوقة بالنسبة للآخرين.

مهمة التطبيق

بالنسبة للتحليل الصغير الذي تقوم به أو تخطط له، قم بتسجيل ما لا يقل عن 5 قرارات منهجية مع المبررات باستخدام "قالب مجلة القرار". احتفظ بالمطالبات التي تستخدمها والطراز والتاريخ في ملف منفصل. ثم استخدم قالب "تدقيق التكرار" ليقوم الذكاء الاصطناعي بالعثور على الثغرات غير الموثقة في عمليتك وإغلاق كل فجوة. أخيرًا، اكتب مخططًا تفصيليًا لـ "بيان استخدام الذكاء الاصطناعي" وفقرة شفافة لوضعها في قسم الأساليب.

قائمة مرجعية

  • [ ] كتبت أسباب كل قرار منهجي مهم في المجلة.
  • [ ] قمت بتسجيل المطالبات التي استخدمتها، والطراز والتاريخ.
  • [ ] أبقيت البيانات الأولية دون تغيير وقمت بتوثيق التحولات.
  • [ ] لقد أعلنت بصراحة دور الذكاء الاصطناعي في قسم الطريقة.
  • [ ] قمت بتطبيق اختبار "هل يمكنني الإنجاب بعد 6 أشهر".