Прибыль:
- Возможность ускорить обнаружение путем сканирования больших стопок документов с помощью искусственного интеллекта, исключения и обобщения важного.
- Поймите, что резюме — это карта открытий, а не доказательство, и будьте в состоянии связать каждый важный момент и процитировать исходный документ.
- Возможность сканировать дела и проверять исключение с помощью образцов без необходимости предоставления искусственного интеллекта результатов/комментариев.
Одним из самых больших препятствий в исторических исследованиях является поиск «того, что работает» в огромной куче материала. Исследователю, возможно, придется просмотреть сотни документов, томов газет, реестров или файлов корреспонденции для диссертации или статьи. Эта задача обзора ресурсов традиционно требует чтения страница за страницей и может занять недели. ИИ устраняет это узкое место, быстро сканируя и обобщая большие фрагменты текста и отмечая соответствующие места. Но и здесь опасность очевидна: резюме ИИ не заменяет источник; это просто карта, которая направляет вас к настоящему источнику.
В этом модуле вы узнаете, как сканировать большие исторические материалы с помощью ИИ, составлять надежные резюме, находить соответствующие отрывки и избегать самой опасной ловушки синопсиса: «доверять синопсису, не обращаясь к источнику». Цель состоит в том, чтобы использовать ИИ для повышения скорости, не жертвуя при этом точностью; При правильном использовании эти две цели не противоречат друг другу, а скорее подпитывают друг друга.
Краткое содержание не заменяет первоисточник
Давайте с самого начала изложим основной принцип: краткий обзор ИИ — это инструмент открытия, а не доказательство. Если историк собирается включить событие, цитату или часть данных в свое исследование, он должен взять их из исходного документа, а не из резюме ИИ. В резюме говорится: «В этом документе есть что-то подобное, посмотрите»; Он не говорит: «Именно так написано в документе». Потому что итоговый процесс сжимает, отбирает, иногда искажает, а иногда и добавляет то, чего вообще нет.
Вы можете использовать ИИ в трех важных сферах сканирования:
- Сканируйте и просеивайте: быстро выделяйте среди сотен документов, имеющих отношение к вашей теме.
- Подведение итогов: обрисовывание контуров, людей и тем длинного документа.
- Нахождение отрывка: Отмечаем в документе вопрос «Где места, где говорится на эту тему».
Во всех трех случаях результатом является «перенаправление»; Доказательства взяты из оригинального документа.
Здесь упускается из виду опасность — ограничение контекстного окна ИИ — количество текста, которое модель может обрабатывать за один раз. Когда вы отдаете сразу очень большую стопку документов, ИИ может «забыть» или просмотреть средние разделы; имеет тенденцию уделять внимание тому, что происходит в начале и в конце. Поэтому вместо того, чтобы умещать сотни документов в один запрос, разделение их на логические группы и сканирование каждой группы отдельно дает более достоверные результаты. Кроме того, выборочная проверка необходима, чтобы определить, является ли документ, о котором ИИ «никогда не упоминает», действительно нерелевантным или пропущенным.
Рабочий процесс: шаг за шагом
1. Уточните вопрос исследования. Ясный вопрос, а не расплывчатое «подытожьте мне это»: «Где в этих 40 документах места, где упоминается спор о правах на воду?»
2. Подготовьте ингредиенты. Отредактируйте тексты для сканирования (транскрипция или OCR). Прикрепите название источника/ссылку к каждому фрагменту, чтобы резюме можно было связать с источником.
3. Дайте инструкции по сканированию/сводке. Попросите ИИ полагаться исключительно на предоставленный вами текст, связывая каждое утверждение с источником (документом/страницей) и не добавляя ничего несуществующего.
4. Свяжите резюме с источником. Найдите и проверьте в исходном документе все важные моменты, отмеченные в резюме. Возьмите цитаты дословно из документа.
5. Пробелы в вопросах и предвзятость. Что мог упустить ИИ? Он просто подчеркнул очевидное? Он выбрал тот, который подходит к вашему вопросу, и скрыл противоположное?
Внимание: при создании сводки ИИ может добавить ссылку или результат, которого нет в документе, потому что это «кажется логичным». Тем более "какой вывод можно сделать из этих документов?" Подобные вопросы побуждают ИИ делать интерпретации и выводы. Следите за тем, чтобы краткий запрос был основан на фактах; оставьте комментарий при себе.
Сканирование задач с помощью таблицы
Квест
Вклад ИИ
Риск
проверка
Удалить соответствующий документ
скорость
Пропустить актуальное
контроль проб
Краткое изложение документа
контур
Деформировать/добавить
Сравнить с источником
Поиск отрывка/цитаты
закладки
неправильное местоположение
найти в документе
Сравнительное резюме
маркировка узором
подходящая ссылка
Подтвердите каждую претензию
Цитирование
проект
замена слов
слово в слово
Краткое описание: ИИ показывает, где он находится; В самом документе рассказывается, что произошло.
три мини-кейса
Кейс 1 — 300 документов сокращено до 2 дней. Исследователь изучал городской спор о правах на воду в 1900-1920 годах. Сканирование серии из 300 документов вручную заняло бы недели. МА отметила каждый документ как «связан ли он с правами на воду»; Из 300 документов 42 оказались актуальными. Исследователь подробно прочитал только эти 42. Но он также проверил 20 из 258 документов, помеченных как нерелевантные в качестве образца; Обнаружил, что 2 действительно связаны между собой, и исправил это. Урок: элиминация ускоряется, но ее необходимо контролировать с помощью выборки.
Случай 2 — Поддельный результат. Студент попросил YZ обобщить 15 документов и попросить «вывод из этих документов». ИИ написал причинно-следственную связь, которой не было в документах, как «результат» на свободном языке. Когда студент просмотрел документы, он увидел, что такой вывод не подкреплен ни одним документом. Урок: не позволяйте ИИ давать интерпретацию и выводы; Получите сканирование дела, а результаты определите вы.
Случай 3 — Модифицированная цитата. Автор помещал в свою статью «цитату» из аннотации ИИ. Когда он сравнил его с документом, то заметил, что ИИ упростил предложение и изменил несколько слов. Цитата уже не была точно такой же, как было написано в документе. Урок: каждая цитата берется из документа дословно, а не из аннотации.
Четыре копируемых шаблона
1) Сканирование в зависимости от источника:
Ниже приведены части документа, каждая из которых помечена соответствующей ссылкой. Мой исследовательский вопрос: [вопрос]. Для каждого документа просто отметьте «релевантный/нерелевантный/неопределенный» и, если применимо, укажите, к какому предложению/абзацу он относится, а также ссылку на документ. Добавляем комментарии, делаем выводы. Документация: [здесь]
2) Правдивое резюме:
Кратко опишите документ ниже. Правила: (1) Пишите только то, что есть в тексте, НЕ ДОБАВЛЯЙТЕ умозаключений/комментариев/выводов. (2) Свяжите каждый важный пункт с его местом (абзацем/страницей) в документе. (3) Если нужно цитировать, дайте слово в слово, не меняйте. (4) Напишите «неопределенную» информацию, которой нет в тексте. Документ: [здесь]
3) Поиск прохода:
Найдите ВСЕ упоминания этой темы в тексте ниже: [тема]. По каждому приведите краткую цитату (дословно) и ее местонахождение. Добавление мест, не входящих в данную тему. Отметьте совпадение, в котором вы не уверены, как [неразборчиво]. Текст: [здесь]
4) Сравнительный обзор случаев:
Ниже приведены два/три документа. Перечислите ЧТО каждый документ говорит по данному предмету [теме] отдельно, с указанием источника. ПОДГОТОВКА «заключения» или «общей оценки» документов; Просто дайте каждому документу собственное утверждение как факт. Документация: [здесь]
Слабая подсказка / Сильная подсказка
Слабый:
Прочитайте эти документы и суммируйте то, что они говорят мне о теме, результатах и их важности.
Желание «последствий» и «значительности» заставляет ИИ отклоняться от факта и изобретать интерпретации и связи; Он также не подключается к источнику.
Сильный:
Перечислите факты по [теме] в следующих документах, связав каждый из них со ссылкой на документ. ДОБАВЬТЕ комментарий, вывод или оценку важности. Приведите цитаты слово в слово. Если тема не упоминается в документе, напишите «не упоминается». Документация: [здесь]
Разница: верность фактам, ссылка на источник, запрет на интерпретацию и дословное цитирование превращают краткое изложение в надежную карту открытия.
Распространенные ошибки
- Принятие резюме за доказательства. Резюме ведет; Доказательства взяты из оригинального документа.
- Приказать ИИ «сделать выводы». Интерпретация, причина и следствие — это работа историка; ИИ сканирует дела.
- Беру цитату из аннотации. ИИ упрощает/заменяет кавычки; Каждая цитата взята дословно из документа.
- Совершенно не контролируя устранение. Если документы с пометкой «неактуально» не сверены с образцом, важные документы будут пропущены.
- Не просит пробелов. Необходимо задаться вопросом, что упускает из виду ИИ и что он искажает.
В итоге
Сканирование источников и обобщение — одна из областей, где ИИ экономит больше всего времени в исторических исследованиях: он просеивает сотни документов, обобщает их и отмечает соответствующие отрывки. Но резюме — это карта открытий, а не доказательств. Связывайте каждый ключевой момент с исходным документом, дословно цитируйте из документа, не позволяйте ИИ делать выводы и интерпретации, контролируйте исключение путем выборки и подвергайте сомнению то, что ИИ упустил. ИИ перенесет вас на нужную страницу; Ваша задача — прочитать эту страницу и разобраться в ней.
Задача приложения
Соберите не менее 10 документов по вашей теме и прикрепите к каждому ссылки. Устраните те, которые связаны с шаблоном «сканирования на основе источника»; затем проверьте некоторые из тех, что отмечены как «нерелевантные», самостоятельно в качестве образца. Подготовьте «достоверное резюме»: обобщите один из соответствующих результатов, а также найдите и проверьте каждый ключевой момент в резюме в документе. Обратите внимание, сколько очков добавляет или искажает ИИ.
контрольный список
- [ ] Я начал с четкого исследовательского вопроса.
- [ ] Я приложил ссылку на источник к каждой части документации.
- [ ] Я связал каждый пункт резюме с исходным документом.
- [ ] Я взял цитаты дословно из документа.
- [ ] Я проверил исключение путем выборки и поставил под сомнение пробелы.