Lợi nhuận:
- Khả năng sử dụng trí tuệ nhân tạo như một công cụ để quét nhanh tài liệu chuyên sâu và tóm tắt các thuật ngữ và khái niệm
- Mọi trích dẫn, nghiên cứu và số liệu phải được xác nhận từ bài viết thực và hướng dẫn hiện hành, quản lý rủi ro từ các nguồn bịa đặt
- Khả năng đọc tóm tắt một cách phản biện, đánh giá mức độ bằng chứng (phân tích tổng hợp, RCT, loạt trường hợp) và xung đột lợi ích.
Y học hiện đại dựa trên bằng chứng: các quyết định phải dựa trên bằng chứng khoa học mới nhất và mạnh mẽ nhất. Nhưng hàng triệu bài báo được xuất bản mỗi năm; Bác sĩ không thể đọc hết được. Trí tuệ nhân tạo (AI) là một công cụ quét và tóm tắt mạnh mẽ ở đây: tóm tắt nhanh một chủ đề, giải thích các thuật ngữ, so sánh các quan điểm đối lập, chắt lọc phát hiện chính của bài báo thành một vài câu. Nhưng đây chính là lúc điểm yếu nguy hiểm nhất của AI trong tài liệu y khoa xuất hiện: AI có thể bịa ra (ảo giác) các bài báo, tác giả và số DOI không tồn tại. Trong phần này, bạn sẽ học cách sử dụng AI làm công cụ tăng tốc trong quá trình xem xét tài liệu và cách xác minh từng nguồn. Nguyên tắc chung: AI đề xuất tài nguyên; Bạn xác nhận nguồn từ cơ sở dữ liệu thực.
Biết thứ bậc của bằng chứng
Không phải tất cả các nghiên cứu đều có trọng lượng như nhau. Sức mạnh của bằng chứng được coi như kim tự tháp. Đứng đầu là các đánh giá có hệ thống và phân tích tổng hợp (các nghiên cứu tập hợp và kết hợp thống kê nhiều nghiên cứu). Trong đó có thử nghiệm ngẫu nhiên có đối chứng (RCT; loại thử nghiệm đáng tin cậy nhất trong đó bệnh nhân được chia thành các nhóm ngẫu nhiên). Sau đó là các nghiên cứu đoàn hệ và bệnh chứng, sau đó là loạt ca bệnh và báo cáo ca bệnh, và ở dưới cùng là ý kiến chuyên gia và nghiên cứu trên động vật/phòng thí nghiệm.
AI thường không chỉ định mức này khi tóm tắt một yêu cầu. Câu “Phương pháp điều trị này có hiệu quả” có thể dựa trên một phân tích tổng hợp hoặc một loạt trường hợp nhỏ. Sự khác biệt giữa hai điều này làm thay đổi hoàn toàn phán đoán lâm sàng của bạn. Vì vậy, việc hỏi mức độ bằng chứng mà mỗi tuyên bố dựa trên là bước đầu tiên để đọc bản tóm tắt AI.
Gợi ý: Hãy hỏi AI “tuyên bố này dựa trên mức độ bằng chứng nào?” hỏi. Nhưng cũng xác minh câu trả lời; AI cũng có thể phân bổ sai mức độ bằng chứng. Đánh giá cuối cùng được thực hiện bằng cách đọc nguồn chính và hướng dẫn hiện tại.
Từng bước: An toàn với tóm tắt tài liệu AI
- Làm rõ câu hỏi. Khung PICO hoạt động: Bệnh nhân/Dân số, Can thiệp, So sánh, Kết quả.
- Yêu cầu tóm tắt các khái niệm và thuật ngữ từ AI. Để hiểu chủ đề và tìm các thuật ngữ tìm kiếm phù hợp.
- Tìm kiếm mọi tài nguyên do AI cung cấp trong cơ sở dữ liệu thực. PubMed, Cochrane, các trang hướng dẫn hiện tại.
- Đọc bài viết hiện có từ nguồn chính. Tóm tắt của AI và kết luận thực tế của bài viết có giống nhau không?
- Xem xét mức độ bằng chứng và xung đột lợi ích. Ai tài trợ cho nó, có bao nhiêu người trong mẫu, kết quả có ý nghĩa không?
- So sánh với hướng dẫn hiện tại. Hãy cẩn thận nếu nghiên cứu cá nhân đi ngược lại hướng dẫn.
ba trường hợp nhỏ
Trường hợp 1 - Nguồn bịa đặt. Một cư dân yêu cầu 5 nguồn lực từ AI để điều trị bệnh viêm mạch máu hiếm gặp. AI được định dạng rất tốt, đưa ra 5 trích dẫn có DOI. Trợ lý tìm kiếm tất cả chúng trên PubMed: 3 cái hoàn toàn không tồn tại, 1 cái thuộc chủ đề khác, chỉ 1 cái là có thật. Nếu không xác nhận được thì 4 nguồn sai sẽ được đưa vào thuyết trình hội thảo.
Trường hợp 2 - Mức độ nhầm lẫn bằng chứng. Một bác sĩ đọc từ bản tóm tắt AI rằng một chất bổ sung mới là “hiệu quả”. Khi đi đến nguồn chính, anh ấy thấy rằng tuyên bố này dựa trên một nghiên cứu không được kiểm soát, được nhà sản xuất hỗ trợ trên 24 người. Hướng dẫn hiện tại cho biết không có bằng chứng rõ ràng. Bác sĩ đánh giá khuyến nghị theo hướng dẫn chứ không phải theo một nghiên cứu riêng lẻ.
Trường hợp 3 - Sử dụng đúng và nhanh. Một bác sĩ nhận được bản tóm tắt khái niệm từ AI để hiểu sự thay đổi hiện tại về tiêu chuẩn chẩn đoán của một căn bệnh; Nói tóm lại, nó tìm thấy các cụm từ tìm kiếm chính xác và đến phần có liên quan của hướng dẫn hiện tại. Cuộc gọi 40 phút giảm xuống còn 10 phút. AI dẫn đầu; Văn bản hướng dẫn đã đưa ra quyết định.
Bảng xác thực nguồn
do AI đưa ra
đường dẫn xác minh
Rủi ro
Tiêu đề bài viết/tác giả
Cơ sở dữ liệu tìm kiếm (PubMed)
Có thể là giả
số DOI
Giải quyết qua doi.org
Có thể không hợp lệ/bịa đặt
Kết quả bằng số (%, HR)
Đọc phần kết của bài viết
Có thể chuyển nhầm
"Người hướng dẫn gợi ý"
Mở văn bản chính thức của hướng dẫn hiện tại
Nó có thể đã lỗi thời
Mức độ bằng chứng
Xem loại nghiên cứu từ nguồn chính
Có thể bị phân bổ sai
Bốn mẫu có thể sao chép
Nhiệm vụ: Cấu trúc câu hỏi lâm sàng sau đây trong khuôn khổ PICO và cung cấp TÓM TẮT mang tính khái niệm để tôi hiểu về chủ đề này. KHÔNG tạo nên nguồn; đề xuất những thuật ngữ và cơ sở dữ liệu nào tôi nên tìm kiếm thay thế.Câu hỏi: […]
Nhiệm vụ: Liệt kê MỌI tuyên bố y tế trong bản tóm tắt AI bên dưới và cho từng tuyên bố: - nó sẽ dựa trên mức độ bằng chứng nào (phân tích tổng hợp/RCT/loạt trường hợp)?- lưu ý “phải được xác minh từ nguồn chính” Bịa đặt nguồn; chỉ đánh dấu những điểm cần xác minh. Tóm tắt: […]
Nhiệm vụ: Tóm tắt những phát hiện chính của bài viết này (văn bản bên dưới), đơn giản hóa cỡ mẫu, điểm cuối chính và những hạn chế. Đừng thêm kiến thức của riêng bạn; chỉ dựa vào văn bản được cung cấp.Văn bản: […]
Nhiệm vụ: Lập danh sách kiểm tra để SO SÁNH tuyên bố sau với hướng dẫn hiện tại: hướng dẫn nào, phần nào, loại khuyến nghị nào, có xung đột lợi ích không? Đừng tạo nên văn bản hướng dẫn; đưa ra điểm kiểm tra.Yêu cầu: […]
Dấu nhắc yếu / Dấu nhắc mạnh
Yếu: “Bệnh này chữa thế nào là tốt nhất, cho một nguồn đi.”
Mạnh: “Hãy xây dựng vấn đề về tính ưu việt của phương pháp điều trị Y so với Z trong trường hợp
Trong lời nhắc mạnh mẽ, AI bị ngăn không cho khớp tài nguyên và nhiệm vụ của nó bị giới hạn ở việc quét và chỉ đạo.
Những lỗi thường gặp
- Nhầm một nguồn bịa đặt là có thật. Mỗi trích dẫn nên được tìm kiếm trong cơ sở dữ liệu.
- Bỏ qua mức độ bằng chứng. Phân tích tổng hợp và trình bày trường hợp không có cùng trọng lượng.
- Thay thế phần tóm tắt AI cho bài viết. Bản tóm tắt có thể trích dẫn sai; nguồn chính được đọc.
- Giữ công việc duy nhất trên hướng dẫn. Hướng dẫn xem xét tổng thể các bằng chứng.
- Bỏ qua xung đột lợi ích. Ai tài trợ cho nó có thể ảnh hưởng đến kết quả.
Xe có thể tiếp cận (RAG) và giới hạn của chúng
Trong những năm gần đây, các công cụ y tế sử dụng "tạo truy cập" (RAG trong tiếng Anh; phương pháp trong đó mô hình trích dẫn cơ sở tài liệu thực khi tạo câu trả lời) đã trở nên phổ biến. Những công cụ này đáng tin cậy hơn mô hình ngôn ngữ đơn giản vì chúng liên kết câu trả lời với một nguồn thực tế và hiển thị trích dẫn. Tuy nhiên, nó không đáng tin cậy một cách mù quáng. Vẫn còn hai rủi ro: thứ nhất, nhóm tài nguyên mà công cụ quét có thể không cập nhật hoặc toàn diện; Thứ hai, mô hình có thể hiểu sai nguồn mà nó trích dẫn (bài viết thật nhưng kết luận của nó bị bóp méo). Nói cách khác, chỉ vì nó "trích dẫn nguồn" không giúp bạn tránh khỏi việc đọc nguồn đó.
Cách sử dụng đúng là xem trích dẫn mà các công cụ này trỏ tới không phải là một lối tắt mà là phần mở đầu của quá trình xác minh: mở bài viết được trích dẫn, xem liệu nó có thực sự đưa ra kết luận đó hay không, so sánh nó với hướng dẫn hiện tại. Các công cụ có thể truy cập làm giảm nhưng không loại bỏ gánh nặng xác minh.
Mẹo: Ngay cả một công cụ AI “trích dẫn” cũng có thể tạo ra những bản tóm tắt không chính xác. Luôn xác minh trích dẫn được trích dẫn bằng nguồn chính; Sự tồn tại của trích dẫn không đảm bảo rằng nó được trích dẫn chính xác.
Tóm lại
AI mang lại tốc độ khủng khiếp cho tài liệu y khoa: tóm tắt các khái niệm, giải thích thuật ngữ, đưa ra hướng tìm kiếm. Nhưng anh ta có thể bịa đặt các nguồn tin và phân bổ sai mức độ bằng chứng. Tìm kiếm từng bài viết trong cơ sở dữ liệu thực tế, đọc nó từ nguồn chính, đánh giá mức độ bằng chứng và xung đột lợi ích, so sánh nó với hướng dẫn hiện tại. Bản tóm tắt AI là bước khởi đầu; Cơ sở cho quyết định bằng chứng của bạn luôn là nguồn và hướng dẫn chính đã được xác minh.
Nhiệm vụ ứng dụng
Chọn một câu hỏi lâm sàng hiện tại mà bạn quan tâm. Yêu cầu tóm tắt PICO và 5 tài nguyên từ AI. Có bao nhiêu trong số 5 nguồn này thực sự có trên PubMed? Có bao nhiêu trong số đó có kết quả giống như những gì AI nói? Lưu ý mức độ bằng chứng cho từng loại và so sánh nó với khuyến nghị hướng dẫn hiện tại về cùng một chủ đề. Nếu nó hóa ra là một nguồn bịa đặt, hãy viết ra bạn nhận thấy nó như thế nào.
danh sách kiểm tra
- [ ] Tôi đã cấu trúc câu hỏi bằng PICO.
- [ ] Tôi đã nhận được bản tóm tắt khái niệm và hướng tìm kiếm từ AI.
- [ ] Tôi đã tìm kiếm cơ sở dữ liệu thực tế cho từng nguồn.
- [ ] Tôi đọc các bài viết hiện có từ các nguồn chính.
- [ ] Tôi đã đánh giá mức độ bằng chứng và xung đột lợi ích.
- [ ] Tôi đã so sánh các tuyên bố với hướng dẫn hiện tại.
- [ ] Tôi đã loại bỏ những nguồn bịa đặt và ghi lại.