Đơn vị 3 / 11

Phân tích chủ đề, phân loại và lập chỉ mục tự động

Lợi nhuận:

  • Khả năng trích xuất chủ đề trích xuất từ nội dung thực tế và ánh xạ các chủ đề chính và phụ từ danh sách chủ đề đã được phê duyệt
  • Có thể chấp nhận các đề xuất phân loại lớp chính như Dewey và xác minh các cấp độ phụ bằng bảng chính thức.
  • Khả năng hiểu bản chất phán đoán và trình bày của việc phân loại và kiểm tra các đề xuất đối với các thuật ngữ lỗi thời và loại trừ.

Xác định nội dung của một nguồn tài liệu là gì là một trong những nhiệm vụ mang tính phán xét nhất của nghề thủ thư. Điều này được gọi là phân tích chủ đề: đọc nội dung của tài liệu và ghép nó với tiêu đề chủ đề chính xác và số phân loại chính xác. Nếu người dùng có thể tìm thấy những cuốn sách liên quan cạnh nhau trên giá hoặc nhận được kết quả chính xác khi tìm kiếm một chủ đề trong danh mục thì đó là một bản phân tích chủ đề tốt đằng sau nó. Trong phần này, bạn sẽ học cách sử dụng trí tuệ nhân tạo trong việc đề xuất, phân loại và lập chỉ mục tự động chủ đề; nhưng bạn sẽ biết tại sao con người nên đưa ra quyết định cuối cùng về chủ đề đó.

Hãy xác định một vài khái niệm. Hệ thống phân loại là hệ thống đánh số nguồn theo chủ đề; phổ biến nhất là Phân loại thập phân Dewey (DDC) và Phân loại Thư viện Quốc hội (LCC). Ví dụ, ở Dewey, 500 chỉ khoa học tự nhiên, 900 chỉ lịch sử và địa lý. Lập chỉ mục là nhiệm vụ gán các thuật ngữ chính cho một tài liệu để có thể tìm thấy nó. Tự động lập chỉ mục là khi phần mềm gợi ý công việc này. AI đưa ra đề xuất trong cả ba nhiệm vụ, nhưng chuyên gia là người đưa ra quyết định cuối cùng trong mỗi nhiệm vụ.

Từng bước: phân tích chủ đề bằng trí tuệ nhân tạo

1. Đưa ra ý chính của tài liệu cho AI. Toàn văn, tóm tắt, mục lục hoặc phần giới thiệu. Phân tích chủ đề dựa trên bối cảnh; Nếu bạn chỉ đặt tiêu đề cho AI, bạn sẽ nhận được một đề xuất hời hợt và sai lệch.

2. Yêu cầu tóm tắt nội dung từ AI. Đầu tiên, “tài liệu này chủ yếu nói về điều gì?” hỏi. Điều này vừa giúp bạn hiểu nhanh, vừa cho thấy AI đã nắm bắt đúng chủ đề hay chưa.

3. Phù hợp với các chủ đề được kiểm soát. Cung cấp cho AI danh sách các chủ đề đã được phê duyệt của bạn và nói “chỉ đề xuất những chủ đề phù hợp nhất từ ​​danh sách này”. Không cho phép nó tạo ra thuật ngữ miễn phí.

4. Đề xuất số phân loại. Bạn có thể hỏi AI "tài liệu này thuộc loại chính nào trong Dewey?" nhưng hãy chắc chắn xác minh các chữ số chính xác của số bằng biểu đồ phân loại chính thức. AI có thể tạo ra những con số hợp lý nhưng không chính xác.

5. Đưa ra quyết định và biện minh cho quyết định đó. Xem xét các đề xuất của AI, chọn chúng dựa trên chính sách và cơ sở người dùng của tổ chức và từ chối chúng khi cần thiết. Quyết định và phân loại chủ đề cuối cùng có chữ ký của bạn.

Mẹo: Một tài liệu có thể có nhiều chủ đề. Từ AI “chủ đề chính của tài liệu này là gì, chủ đề phụ của nó là gì?” Hỏi riêng. Việc chọn đúng chủ đề chính sẽ đảm bảo rằng tài liệu sẽ được đặt đúng vị trí trên giá; các chủ đề phụ cung cấp thêm các điểm truy cập trong danh mục.

Bản chất tư pháp của việc phân loại

Sự phân loại có vẻ trung lập nhưng thực tế không phải vậy. Việc đặt một tài liệu vào mục "nghiên cứu về phụ nữ" hay "xã hội học", hoặc thậm chí theo địa lý nào bạn sẽ phân loại một sự kiện lịch sử, đều là những quyết định liên quan đến quan điểm. Hệ thống phân loại mang những giả định về các thời kỳ và nền văn hóa cụ thể; Một số điều khoản trở nên lỗi thời hoặc bị loại trừ theo thời gian. AI kế thừa nguyên văn những thành kiến ​​này từ dữ liệu mà nó được đào tạo và thậm chí có thể củng cố chúng.

Vì vậy, phân tích chủ đề là vấn đề phán đoán không thể giao cho AI. AI chỉ ra những tựa phim nào “có khả năng xảy ra”; Nhưng quyết định xem tiêu đề nào thể hiện nguồn chính xác và công bằng nhất thuộc về chuyên gia biết rõ các giá trị của tổ chức và cơ sở người dùng của tổ chức đó.

Thận trọng: Đảm bảo rằng chủ đề do AI gợi ý không xuyên tạc hoặc loại trừ nguồn. So sánh các thuật ngữ do AI tạo ra với vốn từ vựng hiện tại và toàn diện của tổ chức, đặc biệt là về các chủ đề nhạy cảm như bản sắc, sắc tộc, tôn giáo và giới tính.

ba trường hợp nhỏ

Trường hợp 1 - Đề xuất chủ đề đại chúng. Một thư viện sẽ chỉ định chủ đề cho một bộ sưu tập kỹ thuật số gồm 800 bài báo. Chuyên gia đưa ra bản tóm tắt của từng bài viết cho AI và yêu cầu đối sánh từ danh sách tiêu đề đã được phê duyệt. Các đề xuất của AI đã nắm bắt chính xác trung bình 2/3 tiêu đề đủ điều kiện cho mỗi bài viết; chuyên gia đã thêm một phần ba và loại bỏ những gợi ý sai. Công việc được hoàn thành nhanh hơn khoảng 40% so với khi thực hiện hoàn toàn bằng tay.

Trường hợp 2 - Số phân loại không chính xác. Một chuyên gia đã yêu cầu số Dewey từ AI cho cuốn sách lịch sử y tế. YZ đề xuất "610 (Y học)"; Tuy nhiên, cuốn sách chủ yếu viết về lịch sử y học và chỗ ghi đúng là “610.9 (Lịch sử y học)”. Chuyên gia nhìn vào bảng Dewey chính thức và sửa lại; AI đã tìm thấy lớp chính nhưng lại bỏ lỡ lớp phụ.

Trường hợp 3 - Thời hạn lỗi thời bị bắt. AI đã đề xuất một thuật ngữ chủ đề đã lỗi thời và hiện được coi là chủ đề loại trừ cho một cuốn sách xã hội học; vì thuật ngữ cũ này rất phổ biến trong dữ liệu huấn luyện. Chuyên gia đã chọn thuật ngữ chính xác từ vốn từ vựng tổng hợp hiện tại của tổ chức. Đây là một ví dụ cụ thể cho thấy AI mang thành kiến ​​trong quá khứ.

Chiều sâu và tính nhất quán: nó nên cụ thể đến mức nào?

Một quyết định chung trong phân tích chủ đề là mức độ cụ thể của thuật ngữ cần ấn định. Nếu bạn đặt tiêu đề quá chung chung cho một tài nguyên ("Ngày"), người dùng đang tìm kiếm chủ đề đó sẽ chìm đắm trong hàng trăm kết quả không liên quan. Nếu bạn đặt tiêu đề quá hẹp, người dùng tìm kiếm nguồn rộng hơn sẽ không thể tìm thấy nó. Quy tắc là chọn thuật ngữ cụ thể nhất nhưng bao hàm đầy đủ nguồn: nếu nguồn chỉ đề cập đến kiến ​​trúc thời kỳ Seljuk thì "Kiến trúc Seljuk" chứ không phải "Kiến trúc" là cấp độ chính xác. AI thường bỏ lỡ sự cân bằng này; Nó tạo ra những gợi ý quá chung chung hoặc quá phân tán. Vì vậy, cần đưa ra hướng dẫn rõ ràng cho AI như “gợi ý chủ đề cụ thể nhất mà nguồn đưa ra, không thêm các chủ đề phụ mà nguồn không thực sự đề cập đến”. Ngoài ra, việc ghi nhãn nhất quán các tài nguyên về cùng một chủ đề theo thời gian cũng quan trọng đối với tính toàn vẹn của danh mục cũng như tính đặc hiệu; Việc nói "kiến trúc Seljuk" một ngày và "các tòa nhà thời Seljuk" vào ngày hôm sau sẽ chia rẽ người dùng.

Mẹo: Khi đưa ra nhiều tiêu đề cho một nguồn, không cần thiết phải xếp chồng các thuật ngữ là tập hợp con của nhau. Đưa ra cả "lịch sử Ottoman" và "Lịch sử" khiến cái sau trở nên không cần thiết; hãy chọn những tiêu đề cụ thể nhất và chỉ bao gồm những tiêu đề thực sự mang lại phạm vi tiếp cận khác.

Bốn mẫu có thể sao chép

1) Trích xuất chủ đề:

Viết chủ đề chính của tài liệu dưới đây bằng một câu và chủ đề phụ trong 3 câu. Thêm chủ đề không có trong văn bản, chỉ dựa trên văn bản. Tài liệu/tóm tắt: [tại đây]

2) So khớp với tiêu đề đã được phê duyệt:

Dưới đây là bản tóm tắt tài liệu và danh sách các tiêu đề chủ đề đã được phê duyệt. Chỉ ghép 3-5 tiêu đề trong danh sách phù hợp nhất với tài liệu, bắt đầu bằng tiêu đề phù hợp nhất. Viết một câu biện minh cho mỗi lựa chọn. Nếu không có tiêu đề phù hợp trong danh sách, hãy chỉ định nó. Tóm tắt: [tại đây] / Danh sách: [tại đây]

3) Đề xuất phân loại lớp chính:

Đối với tài liệu sau, hãy đề xuất một loại chính có thể có (3 chữ số) trong Phân loại thập phân Dewey và giải thích lý do bạn chọn nó. Đánh dấu các chữ số phía dưới là “phải được xác minh từ bảng chính thức”, không đưa ra con số chính xác. Tài liệu: [tại đây]

4) Kiểm tra thiên vị và tiền tệ:

Có bất kỳ thuật ngữ nào có thể đã lỗi thời, loại trừ hoặc phiến diện trong số các đề xuất chủ đề dưới đây không? Nếu vậy, hãy đánh dấu nó và giải thích tại sao nó có thể có vấn đề. Gợi ý: [tại đây]

Dấu nhắc yếu / Dấu nhắc mạnh

Dấu nhắc yếu:

Đưa ra chủ đề của cuốn sách này: "Thương mại ở Đế chế Ottoman".

Chỉ làm việc dựa trên tiêu đề, AI tạo ra các thuật ngữ chung chung mà không biết ngữ cảnh và bỏ qua từ vựng được kiểm soát. Kết quả: tiêu đề không nhất quán, có thể không chính xác.

Lời nhắc mạnh mẽ:

Vai trò của bạn: trợ lý phân tích vấn đề. Dưới đây là phần giới thiệu và nội dung của cuốn sách; Tôi cũng cung cấp một danh sách các chủ đề được phê duyệt. (1) Tóm tắt chủ đề chính của cuốn sách bằng một câu. (2) Chỉ ghép 3-5 tiêu đề phù hợp nhất trong danh sách với lý do căn bản. (3) Đừng đi ra khỏi danh sách, đừng đặt ra các điều khoản. Văn bản: [tại đây] /Danh sách được phê duyệt: [tại đây]

Lời nhắc mạnh mẽ giới hạn AI ở nội dung thực và từ vựng được kiểm soát; duy trì cả tính chính xác và nhất quán.

Biểu đồ nhiệm vụ phân tích chủ đề

Nhiệm vụ

Vai trò của AI

quyết định của đàn ông

Tóm tắt nội dung

dự thảo nhanh

kiểm tra độ chính xác

Đề xuất tiêu đề

Trận đấu từ danh sách

Sự lựa chọn cuối cùng, sự biện minh

Số phân loại

Gợi ý lớp học chính

Xác minh phân khu

Kiểm tra sai lệch

đánh dấu

Quyết định trọn thời hạn

Những lỗi thường gặp

  • Chỉ cần yêu cầu một chủ đề từ tiêu đề. Phân tích chủ đề dựa trên bối cảnh; Tiêu đề gây hiểu lầm.
  • Chấp nhận số phân loại mà không xác minh nó. Mặc dù AI tìm thấy lớp chính nhưng nó lại bỏ lỡ phần chia nhỏ.
  • Bỏ qua từ vựng được kiểm soát. Tính nhất quán của các kỳ nghỉ miễn phí.
  • Bỏ qua định kiến. AI có thể tiếp tục những điều khoản lỗi thời, loại trừ trong quá khứ.
  • Để lại quyết định hoàn toàn cho AI. Sự đại diện và công lý đòi hỏi sự phán xét; Quyết định là ở người đó.

Tóm lại

Trong phân tích và phân loại chủ đề, AI là trợ lý nhanh chóng trích xuất tóm tắt nội dung, khớp các chủ đề từ danh sách đã được phê duyệt và đề xuất lớp phân loại chính. Nhưng phân tích chủ đề về cơ bản là vấn đề phán đoán và trình bày: chuyên gia sẽ quyết định tiêu đề nào mô tả chính xác và công bằng nhất về nguồn, các chữ số chính xác của số phân loại và loại tiền tệ của các thuật ngữ. Chạy AI với nội dung thực và từ vựng được kiểm soát, xác minh số phân loại bằng bảng chính thức và cảnh giác với sự thiên vị.

Nhiệm vụ ứng dụng

Chuẩn bị phần giới thiệu về nguồn mà bạn có và một danh sách ngắn các chủ đề đã được phê duyệt. Nhận đề xuất AI với các mẫu “Trích xuất chủ đề” và “So khớp chủ đề đã phê duyệt”. Sau đó so sánh các gợi ý với bảng phân loại chính thức và từ vựng hiện tại của cơ sở giáo dục: có bao nhiêu gợi ý đúng, bạn đã sửa bao nhiêu gợi ý? Kiểm tra đề xuất cho các thuật ngữ đã lỗi thời bằng mẫu “Kiểm tra xu hướng và lần truy cập gần đây”.

danh sách kiểm tra

  • [ ] Tôi đã thực hiện phân tích chủ đề từ nội dung thực tế chứ không phải tiêu đề.
  • [ ] Tôi ánh xạ các tiêu đề từ từ vựng được kiểm soát.
  • [ ] Tôi đã xác minh các chữ số thấp hơn của số phân loại bằng bảng chính thức.
  • [ ] Tôi đã kiểm tra các đề xuất dựa trên các điều khoản lỗi thời và loại trừ.
  • [ ] Tôi đã đưa ra quyết định về chủ đề cuối cùng và phân loại theo ý riêng của mình.