Lợi nhuận:
- Khả năng định vị trí tuệ nhân tạo như một công cụ nguy hiểm trong việc tạo ra các trích dẫn cụ thể, mạnh mẽ về các khái niệm, tóm tắt và chiến lược tìm kiếm
- Khả năng loại bỏ nguy cơ nguồn giả bằng cách xác minh từng trích dẫn và DOI trong cơ sở dữ liệu
- Khả năng thiết lập quy trình làm việc an toàn trong đó con người tìm thấy bài viết thực sự và tóm tắt văn bản bằng trí tuệ nhân tạo
Lập kế hoạch tổng hợp và đánh giá tài liệu: Nguồn, quy trình và lộ trình với AI
Mọi dự án hóa học đều bắt đầu bằng việc xem xét tài liệu: "Hợp chất này đã được tạo ra trước đây chưa? Bằng phương pháp nào? Với hiệu suất như thế nào?" AI là một máy gia tốc tuyệt vời ở giai đoạn này; tóm tắt chủ đề, giải thích các khái niệm chính, tạo thuật ngữ tìm kiếm, phác thảo các quy trình. Nhưng nó cũng là nguồn gốc của sai sót nguy hiểm nhất trong hóa học: quy kết sai lầm. AI có thể tạo ra các bài báo, tác giả và DOI trông thực tế nhưng hoàn toàn không tồn tại. Trong bài này, chúng ta sẽ học cách sử dụng AI trong lập kế hoạch tài liệu và tổng hợp, nhưng không bỏ qua nguyên tắc trích dẫn.
Tại sao kỷ luật trích dẫn lại quan trọng?
Mô hình ngôn ngữ tạo ra văn bản; không truy vấn cơ sở dữ liệu (trừ khi có quy định khác). “Tạp chí Hóa học Hữu cơ, 2018, 83, 4521, Zhang và cộng sự.” Tài nguyên có dạng chỉ là "một tập hợp các từ và số có vẻ khả thi" cho mô hình. Nguồn này có thể có thật hoặc không; mô hình không phân biệt giữa hai. Do đó, không có trích dẫn nào do YZ đưa ra được sử dụng mà không được xác nhận trong cơ sở dữ liệu (máy phân tích DOI, PubMed, Crossref, trang web của nhà xuất bản).
Lưu ý: Chỉ vì AI đưa ra DOI không có nghĩa là DOI đó hợp lệ. Giải quyết DOI qua https://doi.org/; Nếu nó không dẫn đến một bài viết thì nguồn đó không tồn tại, ngay cả khi tiêu đề và tác giả có vẻ xác thực.
AI mạnh và yếu ở đâu trong văn học
- Mạnh mẽ: Giải thích một khái niệm, phác thảo một loại phản ứng, tạo từ khóa tìm kiếm, phác thảo các bước chung của quy trình, tóm tắt văn bản của một bài viết (khi bạn dán nó).
- Yếu: Đưa ra "từ bộ nhớ" sự tồn tại của một bài viết cụ thể, thông tin trang/tập/DOI chính xác, giá trị lợi nhuận chính xác. Đây là những lĩnh vực có nhiều cơ hội chế tạo nhất.
Sự khác biệt này dẫn đến chiến lược sau: sử dụng AI làm công cụ xử lý văn bản (tóm tắt, phân loại), chứ không phải làm nguồn sự thật. Bạn tìm bài viết thật, nhờ AI đọc và tóm tắt.
Từng bước: tài liệu an toàn + quy trình lập kế hoạch
- Tìm hiểu khái niệm: Yêu cầu AI giải thích chủ đề, lớp phản ứng, thuật ngữ. Rủi ro chế tạo ở đây là thấp.
- Tạo cụm từ tìm kiếm: Yêu cầu AI cung cấp 8-10 từ khóa/từ đồng nghĩa và các tạp chí có thể có; Tìm kiếm cơ sở dữ liệu thực sự với những điều này.
- Nhận bài viết thực: Tự tìm bài viết từ PubChem/Reaxys/Google Scholar.
- Tóm tắt: Dán văn bản bài viết vào AI và tạo bản tóm tắt có cấu trúc (phương pháp, điều kiện, năng suất, giới hạn).
- Lập kế hoạch: Lập lộ trình tổng hợp cho một mục tiêu; kết nối từng nấc với nguồn thực tế.
- Xác minh: Giải quyết từng trích dẫn bằng DOI; So sánh từng số quan trọng với văn bản nguồn.
Bốn mẫu có thể sao chép
1) Khái niệm + tạo thuật ngữ tìm kiếm (vùng an toàn):
Chủ đề: Thiết lập liên kết aryl-aryl thông qua phản ứng ghép Suzuki-Miyaura. Nhiệm vụ:1) Giải thích phản ứng trong 5 câu (xác định thuật ngữ).2) Tạo 10 từ khóa/từ đồng nghĩa để tìm kiếm tài liệu.3) Đề xuất 5 tạp chí thường xuyên xuất bản chủ đề này. Quy tắc: KHÔNG ĐƯA RA bài viết/DOI cụ thể; Tôi sẽ tìm kiếm chúng trong cơ sở dữ liệu.
2) Tóm tắt bài viết (bạn cung cấp nội dung):
Dưới đây tôi đang dán phần thử nghiệm của một bài viết. [TEXT]Nhiệm vụ: Tóm tắt với các tiêu đề sau: - Hợp chất mục tiêu và ý nghĩa của nó - Phương pháp/thuốc thử được sử dụng - Điều kiện (nhiệt độ, thời gian, dung môi) - Hiệu suất- Các giới hạn đã nêu Không thêm bất kỳ số nào KHÔNG có trong văn bản; nếu không thì viết "không xác định".
3) Lộ trình tổng hợp (tùy theo nguồn):
Mục tiêu: 2-phenylbenzimidazole (SMILES: c1ccc(cc1)c1nc2cccccc2[nH]1).Nhiệm vụ: Đưa ra bản phác thảo kế hoạch tổng hợp 2 bước.Đối với mỗi bước: thuốc thử, điều kiện, phương pháp tinh chế.Quy tắc: Đối với mỗi bước, thêm thông tin "tài liệu tham khảo điển hình của loại phản ứng này với từ khóa cần tìm"; ĐỐI GIẢ.
4) Danh sách kiểm tra xác nhận trích dẫn:
Có 4 tài liệu tham khảo dưới đây. Tạo một danh sách kiểm tra xác minh tính xác thực cho từng trường: tôi nên xác minh những lĩnh vực nào (DOI, tạp chí, tập, năm, tác giả) và ở đâu?[CITATIONS]Lưu ý: Bạn KHÔNG khẳng định rằng các trích dẫn là chính xác; Chỉ cần cho tôi biết từng bước làm thế nào để xác nhận.
Dấu nhắc yếu / Dấu nhắc mạnh
yếu:
Cho tôi 5 nguồn về tổng hợp hợp chất này.
AI có thể tạo ra các thuộc tính thực tế nhưng chưa được xác minh, một số trong đó là bịa đặt.
Mạnh mẽ:
Đề tài: Tổng hợp hợp chất Tôi sẽ tìm nguồn thực tế từ cơ sở dữ liệu; Bạn tăng cường chiến lược tìm kiếm của tôi.
Sự khác biệt: Chúng tôi hướng AI vào công việc mà nó mạnh (chiến lược tìm kiếm, khái niệm) và tránh xa những công việc có xu hướng bịa đặt (phân bổ cụ thể).
Các loại nguồn và độ tin cậy
Nguồn/công cụ
Những gì cung cấp
độ tin cậy
Vai trò
AI (mô hình ngôn ngữ) từ bộ nhớ
Khái niệm, phác thảo, ý tưởng tìm kiếm
Có tính khái niệm cao, tính tham khảo thấp
ý tưởng/tóm tắt
AI + dán văn bản
Tóm tắt văn bản đã cho
Cao (phụ thuộc vào văn bản)
tóm tắt
Trình phân tích cú pháp DOI (doi.org)
Tính xác thực của sự ghi nhận
cao
Xác nhận
PubChem / Reaxys / SciFinder
hợp chất, phản ứng, nguồn
cao
tìm kiếm chính
Học giả Google / Crossref
Tìm kiếm bài viết, trích dẫn
cao
xác minh
trường hợp nhỏ
Trường hợp 1 - Ba nguồn bịa đặt. Một nhà nghiên cứu đã hỏi AI về 6 nguồn về một chủ đề. Khi anh ấy giải quyết từng DOI một, 3 trong số đó không hợp lệ; Các tiêu đề có sức thuyết phục, nhưng các bài báo thì không. Quá trình xác minh mất 25 phút nhưng đã ngăn được 3 trích dẫn giả mạo lọt vào bài viết. Bài học: mỗi tài liệu tham khảo được giải quyết từng cái một.
Trường hợp 2 - Năng suất sai. “Hiệu suất là 92%,” AI cho biết khi phác thảo một quy trình. Khi người dùng tìm và xem bài viết gốc, kết quả đạt được là 64%; AI đã tạo nên con số từ bộ nhớ. Bài học: so sánh những con số quan trọng với văn bản nguồn, đừng tin vào bản tóm tắt của AI.
Trường hợp 3 - Giá trị về mặt khái niệm, rủi ro về mặt tham chiếu. Một học sinh được AI giải thích một lớp phản ứng; Lời giải thích là chính xác và mang tính hướng dẫn. Sau đó là “3 bài viết hàng đầu?” anh ấy nói; Hai trong số đó là bịa đặt. AI vừa rất hữu ích vừa rất nguy hiểm trong cùng một phiên. Bài học: cùng một phương tiện cho thấy độ tin cậy khác nhau trong các nhiệm vụ khác nhau; Hãy tin cậy theo bổn phận của bạn.
Những lỗi thường gặp
- Sử dụng tài liệu tham khảo mà không cần xác nhận. Sai lầm phổ biến nhất và nghiêm trọng nhất; có thể dẫn đến việc rút lại bài viết.
- Lấy số năng suất/điều kiện từ bản tóm tắt. Bản tóm tắt AI đôi khi phản ánh “giá trị có thể có” hơn là nguồn; so sánh với bản gốc.
- Nhầm AI với công cụ tìm kiếm Trừ khi có quy định khác, mô hình ngôn ngữ không truy vấn cơ sở dữ liệu trực tiếp; tạo ra từ bộ nhớ.
- Tìm kiếm bằng một ngôn ngữ. Chỉ cần loại bỏ các thuật ngữ chính bằng tiếng Thổ Nhĩ Kỳ/tiếng Anh là thiếu tài nguyên; AI hỗ trợ trong việc tạo từ đồng nghĩa.
- Khái niệm khó hiểu với nguồn. Việc AI giải thích khái niệm chính xác không có nghĩa là tham chiếu mà nó đưa ra là chính xác.
Mẹo: Quy trình làm việc mạnh mẽ nhất là “con người tìm thấy trước, sau đó AI tóm tắt”. Bạn mang bài viết thật và nhờ AI đọc văn bản. Vì vậy, bạn sử dụng điểm mạnh của AI (tóm tắt) và vô hiệu hóa điểm yếu của nó (khớp nguồn).
Tóm lại
- AI rất nguy hiểm trong việc tạo ra những trích dẫn cụ thể, mạnh mẽ về khái niệm, tóm tắt và chiến lược tìm kiếm trong tài liệu.
- Trích dẫn sai (bài viết bịa đặt/DOI) là rủi ro AI nghiêm trọng nhất trong hóa học; Mọi tài liệu tham khảo đều được xác nhận.
- Luồng an toàn nhất: con người tìm thấy bài viết thực sự, AI tóm tắt văn bản.
- Lấy các số quan trọng, chẳng hạn như sản lượng và điều kiện, từ văn bản nguồn chứ không phải từ bản tóm tắt.
- Kết nối từng bước trong kế hoạch tổng hợp với một nguồn thực sự.
Nhiệm vụ ứng dụng
Chọn một hợp chất mục tiêu. Đầu tiên, chỉ yêu cầu AI cung cấp các cụm từ tìm kiếm và tóm tắt khái niệm (không yêu cầu ghi công cụ thể). Tìm ít nhất hai bài viết trong cơ sở dữ liệu thực có các thuật ngữ này. Tóm tắt văn bản bài viết cho AI và so sánh số hiệu suất/điều kiện với bản gốc. Riêng biệt, hãy cố tình hỏi AI về “5 nguồn” và giải mã từng DOI mà nó đưa ra: bao nhiêu là có thật? Viết một trang "báo cáo xác minh trích dẫn".
danh sách kiểm tra
- [ ] Tôi định vị AI là một công cụ khái niệm/tóm tắt chứ không phải một công cụ tìm kiếm.
- [ ] Khi tôi muốn trích dẫn cụ thể, tôi giải mã từng DOI từ doi.org.
- [ ] Tôi đang so sánh số hiệu suất/điều kiện với nguồn ban đầu.
- [ ] Tôi tìm bài viết thật và nhờ AI tóm tắt văn bản.
- [ ] Tôi quy mỗi bước trong kế hoạch tổng hợp vào một nguồn.
- [ ] Tôi đã chuẩn bị ít nhất một báo cáo xác minh trích dẫn.