이득:
- 인공 지능을 사용하여 실제 소스를 요약하고 비교하는 기능, '주어진 소스에만 기반함' 제약으로 조작된 속성의 근거를 제거합니다.
- 실제 카탈로그의 모든 인용을 확인하고, 모든 초록을 다시 소스로 확인하고, DOI/각인 환각을 포착하는 규율을 적용하는 능력
- 최신성, 다국어주의, 회색문학이 어떻게 인공지능 지식의 한계를 결정하는지, 독창적인 글쓰기가 필요한 이유를 이해할 수 있습니다.
고고학과 문화유산은 누적된 과학입니다. 각각의 새로운 연구는 수세기에 걸친 이전 출판물을 기반으로 합니다. 특정 지역, 발견 유형 또는 기간의 문헌(해당 주제에 대해 출판된 기사, 책, 보고서 및 논문의 전체)을 검색하는 것은 과학 연구의 첫 번째이자 가장 피곤한 단계입니다. 이 단원에서는 AI가 문헌 검토 속도를 높이는 방법과 이 분야에서 출처 검증이 왜 중요한지, 그리고 AI의 가장 위험한 실수인 환각(조작된 출처, 인용 및 정보)에 대처하는 방법을 자세히 살펴보겠습니다.
기본 원칙: AI는 문헌을 요약, 비교 및 정리하는 데 도움이 됩니다. 그러나 실제 카탈로그의 확인 없이는 인용을 사용할 수 없으며, 출처 자체를 읽지 않고는 어떤 요약도 과학적 주장으로 바뀔 수 없습니다. 인문학에서는 하나의 잘못된 출처가 전체 작품의 신뢰성을 파괴합니다.
이 분야에서 환각이 그토록 중요한 이유는 무엇입니까?
공개 채팅 도구의 가장 흔한 실수는 존재하지 않지만 매우 현실적으로 보이는 학술 자료를 생산하는 것입니다. AI는 실제 저자의 이름, 실제 저널 이름, 그럴듯한 제목을 결합하여 "완벽해 보이는" 인용을 구성할 수 있습니다. 어디서?
- AI는 "다음으로 가능성이 가장 높은 단어"를 생성합니다. (특별한 도구가 연결되어 있지 않는 한) 실제 데이터베이스를 보지 않습니다.
- 학술 인용은 패턴화되어 있기 때문에 AI는 패턴에 맞지만 내용이 조작된 인용을 생성하는 데 매우 "능합니다".
- 인문학에서는 독자가 출처를 즉시 확인하지 않는 경우가 많습니다. 이를 통해 가짜 어트리뷰션이 눈에 띄지 않게 활성화될 수 있습니다.
결론: 고고학자의 경우 AI 출력의 모든 저자-연도-제목 세 쌍은 달리 입증될 때까지 의심스러운 것으로 간주되어야 합니다.
팁: AI를 "자원 찾기"가 아닌 "당신이 가지고 있는 실제 자원을 처리"하는 보조자로 사용하십시오. 실제 기사를 직접 찾아 PDF를 AI에 전달한 다음 "내가 준 이 텍스트에 의존하세요"라고 말합니다. 따라서 환각의 근거는 대부분 제거됩니다.
문헌 검토 단계
- 범위와 질문. 무엇을 찾고 계신가요? 주제, 기간, 지역 및 언어 경계를 명확히 합니다.
- 실제 자원의 수집. 도서관 카탈로그, 기관 데이터베이스, 신뢰할 수 있는 디렉토리에서 확실한 출판물을 찾아보세요. 이 단계에서 AI를 위한 리소스를 "찾는" 것은 위험합니다.
- 요약 및 매핑. 수집한 실제 텍스트를 AI에 제공하여 주제와 토론을 요약하고 매핑합니다.
- 비교 및 격차 분석. 다양한 저자의 견해를 비교하고, 모순과 탐구되지 않은 격차를 찾아보세요.
- 철자와 귀속. 검증된 인용으로 자신의 주장을 작성하세요. AI는 초안을 제공합니다. 분석과 실제 인용으로 다시 작성합니다.
소스 검증 규율
각 인용문에 대해 다음을 확인하세요.
- 거기 있나요? 저자, 연도, 제목, 저널/출판사가 실제 카탈로그(도서관, DOI, 색인)에 있습니까?
- 그 사람이 말하는 대로 말하나요? 출처가 정말 AI가 주장하는 것을 말하고 있는 걸까요? 소스를 열고 관련 섹션을 읽어보세요.
- 문맥이 맞나요? 작성자의 의도에서 인용한 내용인가요? 반대 견해는 저자에게 귀속됩니까?
- 최신 상태이고 신뢰할 수 있나요? 출판물이 동료 검토를 거쳐 최신 상태로 유지되고 있습니까? 아니면 오래된 견해를 반영하고 있습니까?
주의: AI가 제공한 DOI 또는 재고 번호가 "올바른 형식"으로 나타난다고 해서 해당 기록이 존재한다는 의미는 아닙니다. 실제 시스템에서 해당 번호를 검색해 보세요. 존재하지 않는 DOI는 환각의 가장 흔한 징후 중 하나입니다.
세 개의 미니 케이스
사례 1 - 절약된 시간을 요약합니다. 한 박사과정 학생이 60개의 실제 기사(모두 자신이 찾아 다운로드한 것)를 AI에 제공하고 테마 맵을 만들었습니다. 그는 몇 주가 아닌 이틀 만에 검색 유형에 대한 다양한 저자의 견해를 비교하는 표 초안을 작성했습니다. 각 요약은 출처를 밝혀 검증되었습니다.
사례 2 - 가짜 용접 재해를 방지했습니다. 한 대학원생이 AI에게 "이 주제에 대한 출처 제안"을 요청했고 15개의 인용이라는 멋진 목록을 받았습니다. 그가 도서관에서 그것을 확인했을 때, 그는 목록 중 9개가 존재하지 않는다는 것을 발견했습니다. 즉, 실제 작가, 꾸며낸 제목이었습니다. 이 목록이 논문 참고문헌에 포함된다면 변론의 신뢰성이 무너지고 심지어 과학적 부정행위로 간주될 수도 있습니다.
사례 3 - 잘못된 속성이 수정되었습니다. 한 팀은 AI가 작가에게 "그 사이트의 날짜를 로마 시대로 날짜를 정했다"고 말했다고 보고했습니다. 우리가 출처를 살펴봤을 때 저자는 그 사이트가 로마 이전 시대의 것이라고 반대 주장을 한 것으로 나타났습니다. AI는 관점을 뒤집었다. 소스를 읽으면 심각한 실수를 예방할 수 있습니다.
복사 가능한 템플릿 4개
1) 주어진 출처에만 의존:
귀하의 역할: 문헌 요약 보조원. 아래에 붙여넣을 텍스트에만 의존하세요. 이 텍스트 외부의 정보, 출처 또는 참고 자료를 추가하지 마십시오. 내가 제공한 텍스트의 어느 부분이 근거를 두고 있는지 표시하여 각 주장을 적어 보십시오. 본문에 없는 내용에 대해 질문을 받으면 "주어진 출처에는 없습니다."라고 말하세요.
2) 테마 맵 및 비교:
아래에 [N]개의 소스에 대한 요약을 제공하겠습니다. 주제별로 그룹화하고 비교표를 만듭니다. 각 주제에 대해 저자가 말하는 내용, 동의하는 부분, 모순되는 부분이 나와 있습니다. 내가 제공한 본문의 견해만을 사용하십시오. 코멘트를 추가합니다.
3) 인용 확인 체크리스트:
아래 인용 목록을 확인할 때 각각에 대해 확인해야 하는 단계(카탈로그 검색, DOI 확인, 관련 페이지 읽기, 컨텍스트 확인)를 수행합니다. 귀하는 귀속의 정확성을 확인하지 않습니다. 무엇을 확인해야 하는지 말해 보세요. 소스 제작.
4) 격차 분석:
내가 제공한 문헌 요약을 바탕으로 이 주제에 대해 연구가 부족한 것으로 보이는 질문/간극을 나열하십시오. 각 간격에 대해 어떤 소스가 이를 열어두었는지 표시합니다. 내가 너희에게 준 본문에만 의지하라. 추측하지 마십시오.
약한 프롬프트 / 강한 프롬프트
약한 프롬프트:
이 주제에 관한 가장 중요한 학술 자료 15개와 그 요약을 제공하세요.
AI는 실제 데이터베이스를 보지 않고도 현실적이지만 부분적으로 조작되었을 가능성이 있는 목록을 생성합니다. 이것이 거짓 귀속 함정 그 자체입니다.
강력한 프롬프트:
아래에는 제가 찾은 실제 기사 12개의 전체 인용 및 요약을 붙여넣었습니다. 이를 바탕으로 테마맵과 비교표가 나옵니다. 새 리소스를 추가합니다. 각 줄이 어느 기사에서 왔는지 표시하십시오. 누락된 주제를 "이 리소스 세트에서 다루지 않음"으로 표시하세요.
차이점은 첫 번째는 소스를 조작할 위험이 있다는 것입니다. 후자는 실제 리소스를 안정적으로 처리합니다.
현재성, 언어 및 회색문학
고고학 문헌의 세 가지 특징으로 인해 AI 사용이 특히 위험해졌습니다. 첫 번째는 시사성입니다. 모델에 대한 지식은 특정 날짜에 동결되며 해당 날짜 이후의 발굴, 새로운 날짜 지정 및 수정 사항은 없습니다. AI는 대체된 뷰를 여전히 유효한 것으로 제시할 수 있습니다. 그렇기 때문에 최신 출판물을 스캔해야 합니다. 둘째, 다중 언어 사용: 고고학은 독일어, 프랑스어, 이탈리아어, 터키어 및 영어 이외의 많은 현지 언어로 작성됩니다. 중요한 발굴 보고서가 한 가지 언어로만 출판되었을 수도 있습니다. 영어 자료에만 의존한다는 것은 문헌의 상당 부분을 놓치는 것을 의미합니다. AI는 이러한 외국어 소스를 스캔하는 데 도움이 되지만, 다시 말하지만 실제 소스를 가까이에 가지고 있어야 합니다.
셋째, 회색 문헌: 고고학 지식의 대부분은 상업적 발굴 보고서, 기관 기록 보관소, 미발표 논문 등 공식 저널에 나타나지 않는 문서에 있습니다. 회색 문헌(기존 출판 디렉토리에서는 쉽게 사용할 수 없는 상업 또는 기업 채널에서 생성된 보고서)은 AI 훈련 데이터에 없거나 부족합니다. 따라서 AI는 이 정보를 모르거나 꾸며내지도 않습니다. 한 지역의 실제 고고학 이야기는 종종 이 회색 문헌에 있으며 기관 기록 보관소에서 실제 손을 통해서만 접근할 수 있습니다.
팁: 주제에 대해 "AI가 아무것도 찾을 수 없습니다" 또는 "리소스가 거의 없습니다"라고 말하는 것이 해당 주제에 대한 작업이 거의 없다는 의미는 아닙니다. 종종 출처는 회색 문헌, 외국어 또는 모델의 정보 섹션 뒤에 있습니다. 자원부족은 AI가 아닌 실제 아카이브에 물어보세요.
문학과제표
퀘스트
AI의 역할
인간의 결정
확인
소싱
약함/위험함
실제 카탈로그에서 선택
카탈로그 확인
요약
강함(주어진 텍스트에 대해)
정확성, 선택
소스 읽기
비교
테마/모순 지도
코멘트, 중량
소스 컨텍스트
인용문 작성
형식 개요
내용, 정확성
거기에 있나요?/그것이 말하나요?
격차 분석
후보자 질문
연구 가치
도메인 지식
일반적인 실수
- AI가 리소스를 "찾게" 만듭니다. 잘못된 귀속을 생성합니다. 리소스를 직접 찾아보세요.
- DOI/임프린트 형식에 의존합니다. 형식은 올바른 것처럼 보이지만 기록이 조작되었을 수 있습니다. 시스템에서 검색하세요.
- 출처를 읽지 않고 요약을 사용합니다. AI는 작가의 관점을 뒤집을 수 있다.
- AI 텍스트를 그대로 공개합니다. 독창성과 표절의 위험성 자신만의 분석으로 글을 쓰세요.
- "주어진 리소스만" 제약 조건을 두지 않습니다. 제약 없이 AI는 외부에서 조작된 정보를 추가합니다.
요약하면
문헌 검토에서 AI는 사실 소스를 요약, 비교, 분석하는 데 많은 시간을 절약해줍니다. 그러나 인문학에서 출처 확인은 협상할 수 없습니다. 출처를 직접 찾고, 실제 카탈로그의 모든 인용을 확인하고, 모든 초록을 다시 확인하고, "인용된 출처만"이라는 제약을 적용하고, 자신만의 독창적인 분석으로 최종 텍스트를 작성합니다. 가짜 소스는 귀하의 작업을 파괴합니다.
응용과제
주제를 선택하고, 도서관/색인에서 8-10개의 실제 출판물을 찾아 인용문을 수집하세요. "소스만 기준" 및 "테마 맵" 템플릿을 사용하여 비교 차트를 만듭니다. 별도의 실험에서 AI에게 "출처를 제안"(제한 없이)하라고 지시하고 카탈로그에서 하나씩 제안하는 인용을 확인하고 몇 개가 실제인지 확인합니다.
체크리스트
- [ ] 실제 카탈로그에서 출처를 직접 찾았습니다.
- [ ] AI에 "주어진 소스에만 의존"이라는 제약을 두었습니다.
- [ ] 나는 카탈로그/DOI를 통해 각 인용을 확인했습니다.
- [ ] 출처로 돌아가서 각 요약을 확인했습니다.
- [ ] 나만의 독창적인 분석과 확인된 참고자료를 바탕으로 최종 텍스트를 작성했습니다.