การทบทวนวรรณกรรม การตรวจสอบแหล่งที่มา และการต่อสู้กับภาพหลอน

กำไร:

• ความสามารถในการใช้ปัญญาประดิษฐ์เพื่อสรุปและเปรียบเทียบแหล่งที่มาจริง ขจัดพื้นฐานสำหรับการระบุแหล่งที่มาที่ประดิษฐ์ขึ้นด้วยข้อจำกัด 'ตามแหล่งที่มาที่กำหนดเท่านั้น'
• ความสามารถในการใช้ระเบียบวินัยในการตรวจสอบการอ้างอิงทุกรายการในแค็ตตาล็อกจริง การตรวจสอบบทคัดย่อทั้งหมดกลับไปยังแหล่งที่มา และการตรวจจับภาพหลอน DOI/สำนักพิมพ์
• ความสามารถในการเข้าใจว่าความทันสมัย ความหลากหลายทางภาษา และวรรณกรรมสีเทาเป็นตัวกำหนดขีดจำกัดของความรู้ของปัญญาประดิษฐ์อย่างไร และเหตุใดจึงจำเป็นต้องมีการเขียนต้นฉบับ

โบราณคดีและมรดกทางวัฒนธรรมเป็นวิทยาศาสตร์ที่สะสมมา: การศึกษาใหม่แต่ละชิ้นสร้างขึ้นจากสิ่งพิมพ์ก่อนหน้านี้ที่ครอบคลุมหลายศตวรรษ การสแกนวรรณกรรม (จำนวนบทความ หนังสือ รายงาน และวิทยานิพนธ์ที่ตีพิมพ์ในหัวข้อนั้น) ของภูมิภาค ประเภทของการค้นหาหรือช่วงเวลาเป็นขั้นตอนแรกและน่าเบื่อที่สุดของการศึกษาทางวิทยาศาสตร์ ในหน่วยนี้ เราจะดูอย่างเจาะลึกว่า AI เร่งการทบทวนวรรณกรรมได้อย่างไร แต่เหตุใดการตรวจสอบแหล่งที่มาจึงมีความสำคัญอย่างยิ่งในสาขานี้ และวิธีต่อสู้กับข้อผิดพลาดที่อันตรายที่สุดของ AI: ภาพหลอน (แหล่งที่มาที่ประดิษฐ์ขึ้น การอ้างอิง และข้อมูล)

หลักการพื้นฐาน: AI ช่วยสรุป เปรียบเทียบ และจัดระเบียบวรรณกรรม แต่ไม่สามารถใช้การอ้างอิงได้หากไม่มีการยืนยันในแค็ตตาล็อกจริง และไม่มีบทสรุปใดที่จะกลายเป็นข้อกล่าวอ้างทางวิทยาศาสตร์โดยไม่ต้องอ่านแหล่งที่มา ในสาขามนุษยศาสตร์ แหล่งข่าวปลอมเพียงแหล่งเดียวได้ทำลายความน่าเชื่อถือของงานทั้งหมด

เหตุใดภาพหลอนจึงมีความสำคัญในสาขานี้?

ข้อผิดพลาดที่พบบ่อยที่สุดของเครื่องมือแชทสาธารณะคือการผลิตทรัพยากรทางวิชาการที่ไม่มีอยู่จริงแต่ดูสมจริงมาก AI ​​สามารถสร้างการอ้างอิงที่ดู "สมบูรณ์แบบ" โดยการรวมชื่อของผู้แต่งจริง ชื่อของวารสารจริง และชื่อที่น่าเชื่อถือ จากไหน?

• AI สร้าง "คำที่มีแนวโน้มมากที่สุดถัดไป"; มันไม่ได้ดูฐานข้อมูลจริง (เว้นแต่จะเชื่อมต่อเครื่องมือพิเศษ)
• เนื่องจากการอ้างอิงทางวิชาการมีรูปแบบ AI จึง "ดี" มากในการสร้างการอ้างอิงที่เหมาะกับรูปแบบแต่มีเนื้อหาที่ถูกสร้างขึ้น
• ในสาขามนุษยศาสตร์ ผู้อ่านมักไม่ตรวจสอบแหล่งที่มาในทันที วิธีนี้ช่วยให้การระบุแหล่งที่มาปลอมแสดงได้โดยไม่มีใครสังเกตเห็น

สรุป: สำหรับนักโบราณคดี แฝดสามชื่อผู้แต่งในเอาท์พุต AI ควรได้รับการพิจารณาให้น่าสงสัยจนกว่าจะพิสูจน์เป็นอย่างอื่น

เคล็ดลับ: ใช้ AI ไม่ใช่เป็น “ตัวค้นหาทรัพยากร” แต่เป็นผู้ช่วยที่ “ประมวลผลทรัพยากรจริงที่คุณมี” ค้นหาบทความจริงด้วยตัวคุณเอง มอบ PDF ให้กับ AI จากนั้นพูดว่า "เพียงอาศัยข้อความเหล่านี้ที่ฉันให้คุณ" ดังนั้นพื้นฐานของอาการประสาทหลอนจึงถูกกำจัดไปเป็นส่วนใหญ่

ขั้นตอนการทบทวนวรรณกรรม

1. ขอบเขตและคำถาม คุณกำลังมองหาอะไร? ชี้แจงขอบเขตหัวข้อ ช่วงเวลา ภูมิภาค และภาษา
2. การรวบรวมทรัพยากรที่แท้จริง ค้นหาสิ่งพิมพ์ของแท้จากแค็ตตาล็อกห้องสมุด ฐานข้อมูลสถาบัน และไดเรกทอรีที่เชื่อถือได้ ในขั้นตอนนี้การ "ค้นหา" ทรัพยากรสำหรับ AI มีความเสี่ยง
3. การสรุปและการทำแผนที่ มอบข้อความจริงที่คุณรวบรวมไว้ให้กับ AI เพื่อสรุปและจัดทำแผนผังธีมและการอภิปราย
4. การเปรียบเทียบและการวิเคราะห์ช่องว่าง เปรียบเทียบมุมมองของผู้เขียนหลายๆ คน ค้นหาข้อขัดแย้งและช่องว่างที่ยังไม่ได้สำรวจ
5. การสะกดและการระบุแหล่งที่มา เขียนข้อโต้แย้งของคุณเองพร้อมการอ้างอิงที่ตรวจสอบแล้ว AI ให้ร่าง; คุณเขียนใหม่ด้วยการวิเคราะห์และการอ้างอิงจริงของคุณ

ระเบียบวินัยในการตรวจสอบแหล่งที่มา

สำหรับการอ้างอิงแต่ละรายการ ให้ตรวจสอบ:

• มีไหม? ผู้แต่ง, ปี, ชื่อเรื่อง, วารสาร/ผู้จัดพิมพ์อยู่ในแค็ตตาล็อกจริง (ห้องสมุด, DOI, ดัชนี) หรือไม่?
• เขาพูดในสิ่งที่เขาพูดหรือไม่? แหล่งข่าวบอกว่า AI อ้างว่าจริงหรือไม่? เปิดแหล่งที่มาและอ่านส่วนที่เกี่ยวข้อง
• บริบทถูกต้องหรือไม่? คำพูดนี้นำมาจากเจตนาของผู้เขียนหรือไม่? มุมมองที่ตรงกันข้ามมาจากผู้เขียนหรือไม่?
• มีความทันสมัยและเชื่อถือได้หรือไม่? สิ่งพิมพ์ได้รับการตรวจสอบโดยผู้ทรงคุณวุฒิ เป็นปัจจุบัน หรือสะท้อนถึงมุมมองที่ล้าสมัยหรือไม่

ข้อควรระวัง: เพียงเพราะ DOI หรือหมายเลขสินค้าคงคลังที่ AI ให้มาปรากฏใน "รูปแบบที่ถูกต้อง" ไม่ได้หมายความว่ามีบันทึกนั้นอยู่ ค้นหาหมายเลขในระบบจริง DOI ที่ไม่มีอยู่จริงเป็นสัญญาณหนึ่งของอาการประสาทหลอนที่พบบ่อยที่สุด

มินิเคสสามอัน

กรณีที่ 1 — สรุปเวลาที่บันทึกไว้ นักศึกษาปริญญาเอกมอบบทความจริง 60 บทความ (ซึ่งเขาพบและดาวน์โหลดทั้งหมด) ให้กับ AI และสร้างแผนที่ธีม เขาร่างตารางเปรียบเทียบมุมมองของผู้เขียนที่แตกต่างกันเกี่ยวกับประเภทการค้นหาภายในสองวันแทนที่จะเป็นสัปดาห์ แต่ละบทสรุปได้รับแหล่งที่มาและตรวจสอบแล้ว

กรณีที่ 2 — หลีกเลี่ยงภัยพิบัติจากการเชื่อมปลอม นักศึกษาระดับบัณฑิตศึกษาขอให้ AI "แนะนำแหล่งข้อมูลในหัวข้อนี้" และได้รับรายการอ้างอิงที่น่าสนใจ 15 รายการ เมื่อเขาตรวจสอบที่ห้องสมุด เขาพบว่าไม่มี 9 รายการในรายชื่อนี้เลย ทั้งผู้แต่งจริง และชื่อที่แต่งขึ้น หากรายการนี้รวมอยู่ในบรรณานุกรมวิทยานิพนธ์ ความน่าเชื่อถือของการป้องกันตัวจะพังทลายและอาจถือเป็นการประพฤติมิชอบทางวิทยาศาสตร์ด้วยซ้ำ

กรณีที่ 3 — แก้ไขการระบุแหล่งที่มาที่ไม่ถูกต้อง ทีมหนึ่งรายงานว่า AI บอกนักเขียนว่า "เขาลงวันที่ไซต์นั้นในสมัยโรมัน"; เมื่อเราหันไปหาแหล่งที่มา พบว่าผู้เขียนอ้างตรงกันข้ามว่าสถานที่นั้นเคยเป็นก่อนสมัยโรมัน AI กลับมุมมอง การอ่านแหล่งที่มาช่วยป้องกันข้อผิดพลาดร้ายแรง

เทมเพลตที่สามารถคัดลอกได้สี่แบบ

1) อาศัยแหล่งที่มาที่กำหนด:

บทบาทของคุณ: ผู้ช่วยสรุปวรรณกรรม อาศัยข้อความที่ฉันจะวางด้านล่างเท่านั้น อย่าเพิ่มข้อมูล แหล่งที่มา หรือการอ้างอิงใดๆ จากภายนอกข้อความเหล่านี้ เขียนคำกล่าวอ้างของคุณแต่ละข้อ โดยระบุว่าส่วนใดของข้อความที่ฉันให้คุณนั้นอ้างอิงจาก หากคุณถูกถามเกี่ยวกับบางสิ่งที่ไม่ได้อยู่ในข้อความ ให้พูดว่า "มันไม่ได้อยู่ในแหล่งที่มาที่ให้ไว้"

2) แผนที่ธีมและการเปรียบเทียบ:

ฉันจะให้ข้อมูลสรุปของแหล่งที่มา [N] ด้านล่าง จัดกลุ่มตามธีมและสร้างตารางเปรียบเทียบ: สำหรับแต่ละธีม ผู้เขียนพูดอะไร เห็นด้วยตรงไหน ขัดแย้งตรงไหน ใช้เฉพาะความเห็นในตำราที่ข้าพเจ้าให้ไว้เท่านั้น เพิ่มความคิดเห็น

3) รายการตรวจสอบการยืนยันการอ้างอิง:

เมื่อยืนยันรายการอ้างอิงด้านล่าง ให้ทำตามขั้นตอนที่ฉันจำเป็นต้องตรวจสอบแต่ละรายการ (ค้นหาในแค็ตตาล็อก การยืนยัน DOI อ่านหน้าที่เกี่ยวข้อง การตรวจสอบบริบท) คุณไม่ยืนยันความถูกต้องของการระบุแหล่งที่มา บอกฉันว่าฉันควรตรวจสอบอะไร การประดิษฐ์แหล่งที่มา

4) การวิเคราะห์ช่องว่าง:

จากบทสรุปวรรณกรรมที่ฉันให้ไว้ ให้แสดงรายการคำถาม/ช่องว่างที่ดูเหมือนว่าจะไม่ได้รับการวิจัยในหัวข้อนี้ สำหรับแต่ละช่องว่าง ให้แสดงว่าแหล่งข้อมูลใดที่เปิดทิ้งไว้ จงอาศัยแต่ข้อความที่เราให้ไว้แก่เจ้าเท่านั้น อย่าคาดเดา

พรอมต์อ่อน / พรอมต์แรง

พรอมต์ที่อ่อนแอ:

มอบแหล่งข้อมูลทางวิชาการที่สำคัญที่สุด 15 แหล่งในหัวข้อนี้และบทสรุป

AI สร้างรายการที่สมจริงแต่น่าจะประดิษฐ์ขึ้นบางส่วนโดยไม่ต้องดูฐานข้อมูลจริง นี่เป็นกับดักการระบุแหล่งที่มาที่ผิดพลาดนั่นเอง

พรอมต์อันทรงพลัง:

ด้านล่างนี้ฉันกำลังวางการอ้างอิงและบทสรุปของบทความจริง 12 บทความที่ฉันพบ ตามสิ่งเหล่านี้เท่านั้น แผนผังธีมและตารางเปรียบเทียบจะปรากฏขึ้น เพิ่มทรัพยากรใหม่ ระบุว่าแต่ละบรรทัดมาจากบทความใด ทำเครื่องหมายหัวข้อที่ขาดหายไปว่า "ไม่ครอบคลุมในชุดทรัพยากรนี้"

ความแตกต่าง: ประการแรกเต็มไปด้วยความเสี่ยงจากแหล่งที่มาที่ประดิษฐ์ขึ้น ส่วนหลังจัดการทรัพยากรจริงได้อย่างน่าเชื่อถือ

ความปัจจุบัน ภาษา และวรรณกรรมสีเทา

คุณลักษณะสามประการของวรรณกรรมทางโบราณคดีทำให้การใช้ AI มีความเสี่ยงเป็นพิเศษ ประการแรกคือความเฉพาะเจาะจง: ความรู้เกี่ยวกับแบบจำลองจะถูกแช่แข็งในวันที่กำหนด และการขุดค้น การออกเดทใหม่และการแก้ไขหลังจากวันที่นั้นจะหายไป AI สามารถนำเสนอมุมมองที่ถูกแทนที่ว่ายังคงใช้ได้ นั่นเป็นเหตุผลที่คุณควรสแกนสิ่งพิมพ์ปัจจุบัน ประการที่สอง ลัทธิพหุภาษา: โบราณคดีเขียนเป็นภาษาเยอรมัน ฝรั่งเศส อิตาลี ตุรกี และภาษาท้องถิ่นอีกหลายภาษานอกเหนือจากภาษาอังกฤษ รายงานการขุดค้นที่สำคัญอาจมีการตีพิมพ์เป็นภาษาเดียวเท่านั้น การใช้แหล่งข้อมูลภาษาอังกฤษเพียงอย่างเดียวหมายถึงการพลาดวรรณกรรมส่วนใหญ่ AI ช่วยในการสแกนแหล่งที่มาของภาษาต่างประเทศเหล่านี้ แต่คุณต้องมีแหล่งที่มาที่แท้จริงอยู่ในมืออีกครั้ง

วรรณกรรมสีเทา: ความรู้ทางโบราณคดีส่วนใหญ่อยู่ในเอกสารที่ไม่ปรากฏในวารสารทางการ เช่น รายงานการขุดค้นเชิงพาณิชย์ หอจดหมายเหตุของสถาบัน และวิทยานิพนธ์ที่ยังไม่ได้ตีพิมพ์ เอกสารสีเทา (รายงานที่ผลิตในช่องทางเชิงพาณิชย์หรือองค์กรที่ไม่พร้อมใช้งานในไดเร็กทอรีสิ่งพิมพ์แบบดั้งเดิม) ไม่มีหรือขาดแคลนในข้อมูลการฝึกอบรม AI ดังนั้น AI จึงไม่ทราบข้อมูลนี้หรือแต่งขึ้น เรื่องราวทางโบราณคดีที่แท้จริงของภูมิภาคนั้นมักจะอยู่ในวรรณกรรมสีเทานี้ และคุณสามารถเข้าถึงได้ด้วยมือจริงจากหอจดหมายเหตุของสถาบันเท่านั้น

เคล็ดลับ: การพูดว่า "AI ไม่พบสิ่งใดเลย" หรือ "มีทรัพยากรน้อย" ในเรื่องนั้นไม่ได้หมายความว่ามีงานเพียงเล็กน้อยในหัวข้อนั้น บ่อยครั้งแหล่งที่มาอยู่ในวรรณกรรมสีเทา เป็นภาษาต่างประเทศ หรืออยู่หลังส่วนข้อมูลของแบบจำลอง ถามผู้จัดเก็บจริงเกี่ยวกับการขาดแคลนทรัพยากร ไม่ใช่ AI

ตารางงานวรรณกรรม

ภารกิจ

บทบาทของเอไอ

การตัดสินใจของมนุษย์

การตรวจสอบ

การจัดหา

อ่อนแอ/มีความเสี่ยง

คัดสรรจากแคตตาล็อกจริง

การยืนยันแคตตาล็อก

การสรุป

แข็งแกร่ง (ตามข้อความที่กำหนด)

ความแม่นยำทางเลือก

อ่านแหล่งที่มา

การเปรียบเทียบ

ธีม/แผนที่ความขัดแย้ง

ความคิดเห็นน้ำหนัก

บริบทแหล่งที่มา

การเขียนการอ้างอิง

โครงร่างรูปแบบ

เนื้อหาความถูกต้อง

มี/ไม่พูด

การวิเคราะห์ช่องว่าง

คำถามของผู้สมัคร

คุณค่าการวิจัย

ความรู้เกี่ยวกับโดเมน

ข้อผิดพลาดทั่วไป

• ทำให้ AI "ค้นหา" ทรัพยากร สร้างการระบุแหล่งที่มาที่เป็นเท็จ ค้นหาแหล่งข้อมูลด้วยตัวเอง
• อาศัยรูปแบบ DOI/สำนักพิมพ์ แม้ว่ารูปแบบจะปรากฏถูกต้อง แต่บันทึกอาจถูกประดิษฐ์ขึ้น ค้นหาในระบบ
• การใช้บทสรุปโดยไม่อ่านแหล่งที่มา AI สามารถกลับมุมมองของผู้เขียนได้
• เผยแพร่ข้อความ AI เหมือนเดิม ความคิดริเริ่มและความเสี่ยงของการลอกเลียนแบบ เขียนด้วยการวิเคราะห์ของคุณเอง
• ไม่วางข้อจำกัด "ทรัพยากรที่กำหนดเท่านั้น" AI จะเพิ่มข้อมูลที่ประดิษฐ์จากภายนอกโดยไม่มีข้อจำกัด

โดยสรุป

ในการทบทวนวรรณกรรม AI ประหยัดเวลาได้มากในการสรุป เปรียบเทียบ และวิเคราะห์แหล่งที่มาของข้อเท็จจริง แต่ในสาขามนุษยศาสตร์ การตรวจสอบแหล่งที่มาไม่สามารถต่อรองได้: ค้นหาแหล่งที่มาด้วยตนเอง ตรวจสอบการอ้างอิงทุกครั้งในแค็ตตาล็อกจริง ตรวจสอบย้อนกลับทุกบทคัดย่อ กำหนดข้อจำกัด "แหล่งที่มาที่อ้างอิงเท่านั้น" และเขียนข้อความสุดท้ายด้วยการวิเคราะห์ต้นฉบับของคุณเอง แหล่งที่มาปลอมจะทำลายงานของคุณ

งานสมัคร

เลือกหัวข้อ ค้นหาสิ่งพิมพ์จริง 8-10 ฉบับในห้องสมุด/ดัชนี และรวบรวมการอ้างอิง สร้างแผนภูมิเปรียบเทียบกับเทมเพลต "อิงตามแหล่งที่มาเท่านั้น" และ "แผนผังธีม" ในการทดลองแยกต่างหาก ให้บอกให้ AI "แนะนำแหล่งที่มา" (โดยไม่มีข้อจำกัดใดๆ) และตรวจสอบการอ้างอิงที่แนะนำทีละรายการในแค็ตตาล็อก และจดบันทึกว่ามีกี่รายการที่เป็นของจริง

รายการตรวจสอบ

• [ ] ฉันพบแหล่งที่มาจากแคตตาล็อกจริง
• [ ] ฉันวางข้อจำกัด "พึ่งพาแหล่งที่มาที่กำหนดเท่านั้น" ไว้กับ AI
• [ ] ฉันได้ยืนยันการอ้างอิงแต่ละรายการด้วยแคตตาล็อก/DOI แล้ว
• [ ] ฉันได้ยืนยันแต่ละบทสรุปโดยกลับไปที่แหล่งที่มา
• [ ] ฉันเขียนข้อความสุดท้ายด้วยการวิเคราะห์ต้นฉบับของตัวเองและได้รับการยืนยันการอ้างอิง