이득:
- 소스 진위성(계층 1)과 콘텐츠 충실도(계층 2)를 별도로 검증하는 기능
- 인용문을 주요 출처와 정확히 일치시키고 맥락에서 벗어나 왜곡을 인식하는 능력
- 인쇄물, 페이지 및 인쇄 정보를 수정하여 인용 무결성을 유지하는 기능
우리는 이전 단원에서 조작된 소스의 위험성에 대해 다루었습니다. 본 단원에서는 한 단계 더 나아가 출처 검증(인용문, 참고문헌, 주장이 특정 출처에 특정 형식으로 실제로 존재하는지 독립적으로 확인하는 과정)과 인용 무결성(저작물의 모든 참고문헌이 진짜이고 올바른 인용과 문맥에 충실하게 사용된다는 원칙)이라는 주제를 체계적인 방법으로 전환해 보겠습니다. 인문사회 분야 저작물의 가치는 출처의 신뢰성에 크게 좌우됩니다. AI 시대에는 '소스를 잘못 인용'하는 것은 물론, '소스가 전혀 존재하지 않는데도 실제인 것처럼 제시'할 위험이 있기 때문에 이는 더욱 중요해졌습니다.
본 단원에서는 인용 검증 단계, AI의 인용 생성 동작, "콘텐츠 충실도" 제어, 학문적 신뢰성을 보호하는 제어 시스템을 구축합니다.
두 개의 별도 인증 레이어
소스 확인은 두 가지 다른 질문을 별도로 묻습니다.
레이어 1 - 소스가 진짜인가요? 이 기사, 책, 페이지가 실제로 존재합니까? 저자, 연도, 잡지가 정확합니까? 이는 이전 장치의 제작 소스 헌팅이며 독립적인 카탈로그 관리를 통해 해결됩니다.
레이어 2 — 콘텐츠가 충실합니까? 출처가 실제라고 하더라도 그에 따른 의견, 인용문 또는 데이터가 실제로 해당 출처에서 그렇게 표시됩니까? AI는 잘못된 견해를 실제 출처에 귀속시킬 수 있습니다. 즉, 기존 책에 존재하지 않는 문장이나 저자가 실제로 옹호하지 않는 논문을 해당 책에 귀속시킬 수 있습니다. 이는 출처가 실제이기 때문에 첫 번째 확인을 통과했기 때문에 두 번째이자 더 교활한 실수입니다.
두 레이어를 모두 통과하지 못하는 인용은 귀하의 저작물에 포함되어서는 안 됩니다.
팁: 인용문을 확인할 때 다음 세 가지 사항을 함께 확인하십시오. (1) 출처가 있습니까? (2) 인용문이 해당 출처에 그대로 표시됩니까? (3) 인용문이 문맥에서 벗어나 의미가 변경되었습니까? 세 번째 검사는 가장 자주 건너뛰는 검사이며 가장 큰 왜곡이 발생하는 곳입니다.
확인 단계
1. 인쇄물의 목록을 작성하십시오. 저자, 제목, 연도, 출판 장소 등이 모두 신뢰할 수 있는 데이터베이스에서 일치합니다. 일치하지 않는 태그를 수정하거나 삭제하세요.
2. 기본 소스로 이동합니다. 2차 요약이 아닌 원문에서 직접 의견이나 인용문을 확인하세요. "아무개"라는 주장의 출처를 직접 눈으로 확인해 보세요.
3. 견적을 정확하게 일치시키세요. 인용부호 안의 각 문장은 출처에서 그대로 인용되어야 합니다. AI는 종종 “근접하지만 정확하지는 않은” 인용문을 생성합니다. 단어를 변경해도 인용문이 무효화됩니다.
4. 맥락을 확인하세요. 이 인용문은 원래의 맥락에서 무엇을 의미합니까? 저자는 이것을 옹호합니까, 아니면 반대 견해를 전달하고 반박합니까? 문맥에서 벗어난 인용문은 저자가 정반대의 말을 하게 만들 수 있습니다.
5. 페이지를 보호하고 인쇄합니다. 페이지 번호는 에디션마다 다릅니다. 어떤 에디션을 사용했는지 기록해 두세요.
주의: 가장 위험한 왜곡은 실제 저자의 실제 문장을 맥락에서 벗어나 취하는 것입니다. 예를 들어, 어떤 철학자가 "누군가는 주장할지도 모른다..."라는 말로 시작하는 의견을 인용한 후 마치 자신의 논제인 것처럼 반박하는 것입니다. 인용문 주변의 단락을 읽지 않고 인용문을 사용하지 마십시오.
세 개의 미니 케이스
사례 1 - 실제 출처, 가짜 인용문. 한 연구원은 실제로 존재하는 책을 바탕으로 AI가 제공한 인용문을 사용하고 싶었습니다. 책을 펴서 해당 페이지를 보니 문장이 '가까운'데 정확하지 않고, 두 핵심 단어도 달랐다. 이 차이로 인해 문장의 강조가 바뀌었습니다. 연구원은 축어적 텍스트를 사용했습니다. 레이어 1은 통과되었지만(소스는 실제임) 레이어 2(콘텐츠 충실도)에 문제가 있었습니다.
사례 2 — 문맥에 맞지 않는 인용. 한 학생이 AI를 통해 윤리 기사에서 문장을 검색했습니다. 저자는 특정 견해를 옹호하는 것처럼 보였습니다. 학생은 원래 문단을 읽었을 때 저자가 반대 견해를 전달하기 위해 문장을 구성한 것을 보고 즉시 이를 반박했습니다. 그 인용문에는 저자가 정반대의 말을 했습니다. 컨텍스트 확인을 통해 심각한 왜곡을 방지했습니다.
사례 3 - 압력 차이. 한 박사 과정 학생은 AI가 제공한 페이지 번호에 의존했습니다. 컨설턴트가 확인한 결과 페이지가 일치하지 않았습니다. AI가 다른 판의 번호 매기기를 사용했기 때문입니다. 학생은 자신이 사용하고 있던 판을 수정하고 모든 페이지 번호를 다시 확인했습니다. 1개의 에디션 차이로 인해 모든 참조가 이동되었습니다.
약한 프롬프트 / 강한 프롬프트
약한 프롬프트:
이 의견에 대한 인용문과 출처를 찾아보세요.
이 프롬프트는 조작된 소스와 문맥을 벗어난/잘못된 인용을 모두 생성하여 검증 부담을 모호하게 만듭니다.
강력한 프롬프트:
귀하의 역할: 꼼꼼한 인용 검사기. 원문과 인용문을 알려드리겠습니다. 각 인용문에 대해: 1) 인용문이 텍스트에 그대로 나타나는지 여부를 표시합니다(그렇지 않은 경우 "일치하지 않음"이라고 말함). 2) 문맥을 볼 수 있도록 인용문 주변의 문장 2개를 보여주세요. 3) 저자가 반대 의견을 옹호하거나 전달하기 위해 이 문장을 사용했는지 여부를 표시합니다. 소스를 조작하지 마십시오. 내가 제공한 텍스트로 작업하세요.텍스트 및 따옴표: [붙여넣기]
이 프롬프트는 세 가지 계층 모두를 포괄하는 일대일 일치, 컨텍스트 및 방어/전송 구별을 제어합니다.
복사 가능한 템플릿 4개
1) 정확한 견적 매칭:
아래에는 원본 텍스트와 후보 인용문이 나와 있습니다. 인용문이 소스에 그대로(단어 대 단어) 표시되는지 알려주세요. 그렇지 않은 경우 다른 단어에 표시하십시오. 댓글 추가.출처: [텍스트] 인용 후보: [인용]
2) 컨텍스트 충실도 확인:
출처의 맥락에서 다음 인용문이 저자 자신의 의견인지, 아니면 저자가 표현/비판하는 의견인지 판단하세요. 인용문 앞과 뒤의 문장을 보여주세요. 문맥에서 벗어나면 그 의미가 어떻게 왜곡될 수 있는지 설명하십시오. 출처: [텍스트] 인용문: [인용문]
3) 인용 검증 목록:
다음 인용의 경우 개별 카탈로그에서 확인해야 하는 모든 필드(저자, 제목, 연도, 출판사/저널, 권/호, 페이지, 판, DOI)가 체크리스트로 나타납니다. S진위성을 확인합니다. 그냥 확인 단계를 제공하십시오. 인용: [각인]
4) 단락 정확성:
아래에는 원본 텍스트와 의역을 제공합니다. 의역이 출처의 의미에 충실합니까, 아니면 뉘앙스를 추가/감소합니까? 그렇지 않다면 어디에서 벗어나는지 보여주세요. 출처만 믿으세요. 출처: [text] 단락: [text]
인증 레이어 테이블
제어
질문
확인 방법
건너뛰면 위험함
소스 현실
거기 있나요?
독립 카탈로그
유령 귀속
인쇄물 정확도
각인이 맞나요?
카탈로그와 일치
잘못된 참조
인용 리터럴성
말 그대로 같은 말인가요?
원본과의 비교
견적을 만들어냈다
컨텍스트 충실도
의미가 보존되나요?
환경 단락 읽기
역왜곡
페이지/인쇄
번호가 맞나요?
인쇄 수정
카약 참고자료
일반적인 실수
- 출처가 진짜이기 때문에 인용문을 사실로 간주합니다. 레이어 1을 통과한 리소스는 레이어 2(콘텐츠)에서 실패할 수 있습니다. 두 가지를 별도로 확인하세요.
- 문맥을 읽지 않습니다. 주변을 보지 않고 인용문을 사용하면 작가는 그 반대의 말을 하게 될 수도 있습니다.
- "가까운" 인용문을 문자 그대로 착각합니다. 단어 하나라도 바뀌면 따옴표는 유효하지 않습니다. 그대로 받아들이거나 다른 말로 바꾸십시오.
- 의역을 확인하지 않습니다. 자신의 의역이 출처에 충실하다고 가정합니다. 뉘앙스를 추가/제거하는 것도 왜곡입니다.
- 맹목적으로 페이지 번호를 신뢰합니다. 인쇄 차이로 인해 숫자가 이동합니다. 사용하는 압력을 수정하십시오.
요약하면
소스 검증은 소스의 진위 여부와 콘텐츠가 충실하게 전송되었는지 여부라는 두 가지 개별 계층으로 구성됩니다. AI는 허위 소스와 실제 소스에 잘못 귀속된 보기 등 두 계층 모두에서 오류를 생성합니다. 안전한 귀속을 위해 작성자의 목록을 작성하고, 기본 소스로 이동하여 인용문을 그대로 일치시키고, 맥락을 읽고, 에디션을 고정하세요. 가장 교활한 왜곡은 문맥에서 실제 문장을 빼내는 것입니다. 인용 무결성은 인문학 분야의 학문적 신뢰성의 기초입니다. AI가 이 속도를 높일 수 있지만 보증인은 바로 당신입니다.
응용과제
- AI가 주제에 대해 3개의 인용문이 포함된 단락을 생성하도록 합니다.
- 각 인용문에 대해 소스로 이동하여 "축어적 인용문 일치" 템플릿을 사용하여 단어별로 확인하세요.
- "컨텍스트 충실도 확인" 템플릿을 사용하여 하나 이상의 인용문의 컨텍스트를 검사하세요. 작성자 자신의 의견인가요?
- 인용문을 자신의 말로 바꾸고 "의역 정확도" 템플릿을 사용하여 그 충실도를 확인하세요.
- 사용 중인 판에 따라 출판물의 페이지 번호를 확인하십시오.
체크리스트
- [ ] 독립 카탈로그에 있는 각 리소스(Tier 1)의 진위 여부를 확인했습니다.
- [ ] 원본에 있는 각 인용문의 내용 충실도(레이어 2)를 확인했습니다.
- [ ] 인용문 안의 인용문은 문자 그대로임을 확인하였습니다.
- [ ] 인용문의 맥락을 읽고 왜곡이 없는지 확인했습니다.
- [ ] 제가 작성한 문단이 출처에 충실한지 확인했습니다.
- [ ] 내가 사용한 판에 따라 페이지 번호를 수정했습니다.