Lợi nhuận:
- Khả năng tăng tốc khám phá bằng cách quét hàng đống tài liệu lớn bằng trí tuệ nhân tạo, loại bỏ và tóm tắt những gì có liên quan
- Hiểu rằng phần tóm tắt là một bản đồ khám phá, không phải là bằng chứng và có thể liên kết từng điểm quan trọng và trích dẫn lại tài liệu gốc.
- Khả năng quét các trường hợp và kiểm tra loại bỏ bằng mẫu mà không cần trí tuệ nhân tạo đưa ra kết quả/nhận xét
Một trong những trở ngại lớn nhất trong nghiên cứu lịch sử là tìm ra “cái gì có tác dụng” trong một đống tài liệu khổng lồ. Một nhà nghiên cứu có thể phải quét hàng trăm tài liệu, tập báo, sổ đăng ký hoặc tệp thư từ để tìm một luận án hoặc bài báo. Nhiệm vụ xem xét tài nguyên này theo truyền thống yêu cầu phải đọc từng trang và có thể mất hàng tuần. AI giải quyết nút thắt cổ chai này bằng cách nhanh chóng quét và tóm tắt các khối văn bản lớn và đánh dấu những vị trí có liên quan. Nhưng ở đây mối nguy hiểm cũng rất rõ ràng: bản tóm tắt AI không thay thế nguồn; nó chỉ đơn thuần là một bản đồ hướng bạn đến nguồn thực sự.
Trong phần này, bạn sẽ học cách quét tài liệu lịch sử lớn bằng AI, tạo ra các bản tóm tắt đáng tin cậy, tìm các đoạn có liên quan và tránh cạm bẫy nguy hiểm nhất của bản tóm tắt: "tin vào bản tóm tắt mà không cần xem nguồn". Mục tiêu là sử dụng AI để tăng tốc độ trong khi không bao giờ hy sinh độ chính xác; Khi sử dụng tốt, hai mục tiêu này không xung đột mà còn bổ trợ cho nhau.
Tóm tắt không thay thế nguồn
Hãy trình bày nguyên tắc cơ bản ngay từ đầu: Bản tóm tắt AI là một công cụ khám phá, không phải là bằng chứng. Nếu một nhà sử học định đưa một sự kiện, một câu trích dẫn hoặc một phần dữ liệu vào nghiên cứu của mình, anh ta phải lấy nó từ tài liệu gốc chứ không phải từ bản tóm tắt của AI. Tóm tắt có nội dung "trong tài liệu này có nội dung như thế này, bạn xem đi"; Anh ta không nói "đây chính xác là những gì nó nói trong tài liệu". Bởi vì quá trình tóm tắt nén, chọn lọc, đôi khi bóp méo và đôi khi thêm vào một thứ gì đó hoàn toàn không tồn tại.
Bạn có thể sử dụng AI trong ba công việc mạnh mẽ khi quét:
- Quét và sàng lọc: Đánh dấu nhanh chóng trong số hàng trăm tài liệu có liên quan đến chủ đề của bạn.
- Tóm tắt: Phác thảo những nét chính, con người và chủ đề của một tài liệu dài.
- Tìm đoạn văn: Đánh dấu câu hỏi “Đâu là những địa điểm nói về chủ đề này” trong tài liệu.
Trong cả ba, đầu ra là "chuyển hướng"; Bằng chứng được lấy từ tài liệu gốc.
Một mối nguy hiểm bị bỏ qua ở đây là giới hạn của cửa sổ ngữ cảnh của AI - lượng văn bản mà mô hình có thể xử lý cùng một lúc. Khi bạn đưa ra một chồng tài liệu rất lớn cùng một lúc, AI có thể “quên” hoặc lướt qua các phần ở giữa; có xu hướng nhấn mạnh vào những gì xảy ra ở đầu và cuối. Do đó, thay vì xếp hàng trăm tài liệu vào một yêu cầu duy nhất, việc chia chúng thành các nhóm hợp lý và quét riêng từng nhóm sẽ mang lại kết quả đáng tin cậy hơn. Ngoài ra, việc kiểm tra mẫu là điều cần thiết để phân biệt xem một tài liệu mà AI "không bao giờ đề cập đến" có thực sự không liên quan hay bị bỏ sót hay không.
Quy trình làm việc: từng bước
1. Làm rõ câu hỏi nghiên cứu. Một câu hỏi rõ ràng thay vì mơ hồ “tóm tắt điều này cho tôi”: “40 tài liệu này đề cập đến tranh chấp quyền về nước ở đâu?”
2. Chuẩn bị nguyên liệu. Chỉnh sửa văn bản sẽ được quét (phiên âm hoặc đầu ra OCR). Đính kèm tên/tham chiếu của nguồn vào từng phần để bản tóm tắt có thể được liên kết với nguồn.
3. Đưa ra hướng dẫn quét/tóm tắt. Yêu cầu AI chỉ dựa vào văn bản bạn đưa ra, liên kết từng xác nhận quyền sở hữu với nguồn (tài liệu/trang) và không thêm bất kỳ nội dung nào không tồn tại.
4. Liên kết bản tóm tắt với nguồn. Tìm và xác minh trong tài liệu gốc mọi điểm quan trọng được đánh dấu bằng bản tóm tắt. Trích dẫn nguyên văn từ tài liệu.
5. Khoảng trống câu hỏi và thành kiến. AI có thể đã bỏ lỡ điều gì? Có phải anh ấy vừa nêu bật điều hiển nhiên? Có phải anh ấy đã chọn câu phù hợp với câu hỏi của bạn và giấu điều ngược lại?
Thận trọng: Khi tạo bản tóm tắt, AI có thể thêm liên kết hoặc kết quả không có trong tài liệu vì nó "có vẻ logic". Đặc biệt là "có thể rút ra kết luận gì từ những tài liệu này?" Những câu hỏi như thế này mời gọi AI đưa ra những diễn giải và suy luận. Giữ yêu cầu tóm tắt thực tế; giữ bình luận cho riêng mình.
Quét tác vụ bằng bảng
Nhiệm vụ
Đóng góp của AI
Rủi ro
xác minh
Loại bỏ tài liệu liên quan
tốc độ
Bỏ qua phần liên quan
kiểm soát mẫu
Tóm tắt tài liệu
phác thảo
Làm cong/thêm
So sánh với nguồn
Tìm một đoạn văn/trích dẫn
đánh dấu trang
sai vị trí
tìm trong tài liệu
Tóm tắt so sánh
đánh dấu mẫu
liên kết phù hợp
Xác nhận mọi khiếu nại
Trích dẫn
dự thảo
thay thế từ
từng chữ một
Tóm tắt: AI cho biết nó ở đâu; Các tài liệu thực tế cho biết những gì đã xảy ra.
ba trường hợp nhỏ
Trường hợp 1 - 300 tài liệu giảm xuống còn 2 ngày. Một nhà nghiên cứu đang nghiên cứu tranh chấp về quyền sử dụng nước của một thị trấn những năm 1900-1920. Quét một loạt 300 tài liệu bằng tay sẽ mất hàng tuần. AI đánh dấu từng tài liệu là “nó có liên quan đến quyền về nước không”; 42 trong số 300 tài liệu hóa ra có liên quan. Nhà nghiên cứu chỉ đọc sâu 42 điều này. Nhưng ông cũng đã kiểm tra 20 trong số 258 tài liệu được đánh dấu là không liên quan làm mẫu; Tìm thấy rằng 2 thực sự có liên quan và sửa nó. Bài học: tốc độ loại bỏ tăng lên nhưng phải được kiểm soát bằng mẫu.
Trường hợp 2 - Kết quả giả. Một sinh viên yêu cầu YZ tóm tắt 15 tài liệu và yêu cầu “kết luận từ những tài liệu này”. AI đã viết mối quan hệ nhân quả không tồn tại trong tài liệu dưới dạng “kết quả” bằng một ngôn ngữ lưu loát. Khi người sinh viên xem qua các tài liệu, anh ta thấy rằng kết luận như vậy không được hỗ trợ trong bất kỳ tài liệu nào. Bài học: đừng để AI đưa ra cách giải thích và kết luận; Quét trường hợp, bạn quyết định kết quả.
Trường hợp 3 - Báo giá được sửa đổi. Một tác giả sẽ đưa một “trích dẫn” từ bản tóm tắt AI vào bài viết của mình. Khi so sánh với tài liệu, anh nhận thấy AI đã đơn giản hóa câu và thay đổi một vài từ. Câu trích dẫn không còn giống hệt như những gì được viết trong tài liệu. Bài học: mỗi câu trích dẫn đều được lấy nguyên văn từ tài liệu chứ không phải bản tóm tắt.
Bốn mẫu có thể sao chép
1) Quét phụ thuộc vào nguồn:
Dưới đây là các phần của tài liệu, mỗi phần được dán nhãn với tài liệu tham khảo. Câu hỏi nghiên cứu của tôi: [câu hỏi]. Đối với mỗi tài liệu, chỉ cần đánh dấu "có liên quan/không liên quan/không chắc chắn" và, nếu có liên quan, cho biết câu/đoạn văn nào có liên quan và tài liệu tham khảo. Thêm nhận xét, rút ra kết luận. Tài liệu: [tại đây]
2) Tóm tắt trung thực:
Tóm tắt tài liệu dưới đây. Quy tắc: (1) Chỉ viết những gì có trong văn bản, KHÔNG THÊM các suy luận/nhận xét/kết luận. (2) Liên kết từng điểm quan trọng với vị trí của nó (đoạn/trang) trong tài liệu. (3) Nếu cần trích dẫn thì phải trích dẫn từng chữ một, không được thay đổi. (4) Viết thông tin “không xác định” không có trong văn bản. Tài liệu: [tại đây]
3) Công cụ tìm đoạn văn:
Tìm TẤT CẢ đề cập đến chủ đề này trong văn bản bên dưới: [topic]. Đối với mỗi câu, hãy đưa ra một trích dẫn ngắn gọn (nguyên văn) và vị trí của nó. Thêm địa điểm không bao gồm chủ đề. Đánh dấu trận đấu mà bạn không chắc chắn là [không rõ ràng]. Văn bản: [tại đây]
4) So sánh trường hợp so sánh:
Dưới đây là hai/ba tài liệu. Liệt kê NHỮNG GÌ mỗi tài liệu nói về chủ đề này [chủ đề], một cách riêng biệt, kèm theo nguồn của nó. ĐƯA RA “kết luận” hoặc “đánh giá tổng thể” giữa các văn bản; Chỉ cần cung cấp cho mỗi tài liệu tuyên bố riêng của mình như là thực tế. Tài liệu: [tại đây]
Dấu nhắc yếu / Dấu nhắc mạnh
yếu:
Đọc những tài liệu này và tóm tắt những gì họ nói với tôi về chủ đề, kết quả và tầm quan trọng của chúng.
Việc muốn có “hậu quả” và “ý nghĩa” đẩy AI đi chệch khỏi thực tế và phát minh ra những cách giải thích và kết nối; Nó cũng không kết nối với nguồn.
Mạnh mẽ:
Liệt kê các thông tin thực tế về [chủ đề] trong các tài liệu sau, liên kết từng tài liệu với tài liệu tham khảo. THÊM nhận xét, kết luận hoặc đánh giá tầm quan trọng. Đưa ra trích dẫn từng chữ. Nếu chủ đề không được đề cập trong tài liệu, hãy viết "không được đề cập". Tài liệu: [tại đây]
Sự khác biệt: tính trung thực với thực tế, liên kết với nguồn, cấm diễn giải và trích dẫn nguyên văn biến bản tóm tắt thành một bản đồ khám phá đáng tin cậy.
Những lỗi thường gặp
- Nhầm bản tóm tắt với bằng chứng. Dẫn tóm tắt; Bằng chứng được lấy từ tài liệu gốc.
- Yêu cầu AI "rút ra kết luận". Giải thích và nhân quả là công việc của sử gia; AI quét các trường hợp.
- Lấy trích dẫn từ bản tóm tắt. AI đơn giản hóa/thay thế các trích dẫn; Mỗi trích dẫn được lấy nguyên văn từ tài liệu.
- Không giám sát việc loại bỏ chút nào. Nếu những thông tin được đánh dấu là "không liên quan" không được kiểm tra đối chiếu với mẫu thì các tài liệu quan trọng sẽ bị bỏ sót.
- Không yêu cầu khoảng trống. Cần phải đặt câu hỏi AI bỏ qua điều gì và nó thiên vị điều gì.
Tóm lại
Quét và tóm tắt nguồn là một trong những lĩnh vực mà AI tiết kiệm thời gian nhất trong nghiên cứu lịch sử: nó sàng lọc hàng trăm tài liệu, tóm tắt và đánh dấu các đoạn có liên quan. Nhưng bản tóm tắt là bản đồ khám phá chứ không phải bằng chứng. Liên kết từng điểm chính trở lại tài liệu gốc, trích dẫn nguyên văn từ tài liệu, không để AI đưa ra kết luận và giải thích, kiểm soát việc loại bỏ bằng cách lấy mẫu và đặt câu hỏi về những gì AI đã bỏ sót. AI đưa bạn đến đúng trang; Công việc của bạn là đọc trang đó và hiểu ý nghĩa của nó.
Nhiệm vụ ứng dụng
Thu thập ít nhất 10 tài liệu liên quan đến chủ đề của bạn và đính kèm tài liệu tham khảo cho từng tài liệu. Loại bỏ những thứ liên quan đến kiểu "quét dựa trên nguồn"; sau đó hãy tự mình kiểm tra một số nội dung được đánh dấu là "không liên quan" làm mẫu. Có một “bản tóm tắt trung thực” tóm tắt một trong những kết quả đầu ra có liên quan, đồng thời tìm và xác minh từng điểm chính trong bản tóm tắt trong tài liệu. Lưu ý số điểm AI thêm hoặc bóp méo.
danh sách kiểm tra
- [ ] Tôi bắt đầu với một câu hỏi nghiên cứu rõ ràng.
- [ ] Tôi đã đính kèm nguồn tham khảo cho từng tài liệu.
- [ ] Tôi đã liên kết từng điểm của bản tóm tắt với tài liệu gốc.
- [ ] Tôi đã trích dẫn nguyên văn từ tài liệu.
- [ ] Tôi đã kiểm tra việc loại bỏ bằng cách lấy mẫu và đặt câu hỏi về những khoảng trống.