Unidad 7 / 11

Revisión de la literatura, verificación de fuentes y lucha contra las alucinaciones

Ganancias:

  • Capacidad de utilizar inteligencia artificial para resumir y comparar fuentes reales, eliminando la base para atribuciones inventadas con la restricción de "basarse únicamente en la fuente dada".
  • Capacidad para aplicar la disciplina de verificar cada cita en el catálogo real, verificar cada resumen hasta la fuente y detectar alucinaciones de DOI/impresión
  • Ser capaz de comprender cómo la actualidad, el multilingüismo y la literatura gris determinan los límites del conocimiento de la inteligencia artificial y por qué se requiere la escritura original.

La arqueología y el patrimonio cultural son una ciencia acumulativa: cada nuevo estudio se basa en publicaciones anteriores que abarcan siglos. Explorar la literatura (el conjunto de artículos, libros, informes y tesis publicados sobre ese tema) de una región, un tipo de hallazgo o un período es el primer y más agotador paso de cualquier estudio científico. En esta unidad, veremos en profundidad cómo la IA acelera la revisión de la literatura, pero por qué la verificación de fuentes es primordial en este campo y cómo combatir el error más peligroso de la IA: la alucinación (fuentes, citas e información fabricadas).

Principio básico: la IA ayuda a resumir, comparar y organizar la literatura; Pero ninguna cita puede utilizarse sin confirmación en un catálogo real, y ningún resumen puede convertirse en una afirmación científica sin leer la fuente misma. En humanidades, una fuente falsa destruye la credibilidad de todo el trabajo.

¿Por qué las alucinaciones son tan importantes en este campo?

El error más común de las herramientas de chat público es producir recursos académicos que no existen pero que parecen muy realistas. La IA puede crear una cita que parezca "perfecta" combinando el nombre de un autor real, el nombre de una revista real y un título plausible. ¿De donde?

  • La IA produce la “siguiente palabra más probable”; no mira una base de datos real (a menos que esté conectada una herramienta especial).
  • Debido a que las citas académicas siguen un patrón, la IA es muy "buena" para crear una cita que se ajuste al patrón pero cuyo contenido sea inventado.
  • En humanidades, el lector a menudo no comprueba inmediatamente la fuente; Esto permite que la atribución falsa pase desapercibida.

Conclusión: para un arqueólogo, cada triplete autor-año-título en la salida de la IA debe considerarse sospechoso hasta que se demuestre lo contrario.

Consejo: utilice la IA no como un “buscador de recursos” sino como un asistente que “procesa los recursos reales que tiene”. Encuentre los artículos reales usted mismo, entregue los archivos PDF a la IA y luego diga "confíe en estos textos que le di". De este modo, se elimina en gran medida la base de las alucinaciones.

Pasos de la revisión de la literatura.

  1. Alcance y pregunta. ¿Qué estás buscando? Aclare los límites del tema, el período, la región y el idioma.
  2. Colección de recursos reales. Encuentre publicaciones auténticas de catálogos de bibliotecas, bases de datos institucionales y directorios confiables. Es arriesgado "encontrar" recursos para la IA en este paso.
  3. Resumir y mapear. Entregue los textos reales que ha recopilado a AI para resumir y mapear temas y discusiones.
  4. Comparación y análisis de brechas. Compare las opiniones de diferentes autores, encuentre contradicciones y lagunas inexploradas.
  5. Ortografía y atribución. Escribe tu propio argumento con citas verificadas. La IA da borrador; reescribes con tu análisis y citas reales.

Disciplina de verificación de fuente

Para cada cita, marque:

  • ¿Hay? ¿El autor, año, título, revista/editor se encuentran en un catálogo real (biblioteca, DOI, índice)?
  • ¿Dice lo que dice? ¿La fuente realmente dice lo que afirma la IA? Abra la fuente y lea la sección correspondiente.
  • ¿Es correcto el contexto? ¿La cita está tomada de la intención del autor? ¿Se atribuye al autor la opinión contraria?
  • ¿Está actualizado y es confiable? ¿La publicación está revisada por pares, es actual o refleja una visión desactualizada?
Precaución: El hecho de que un DOI o número de inventario proporcionado por AI aparezca en el "formato correcto" no indica que ese registro exista. Busque el número en el sistema real. Un DOI inexistente es uno de los signos más comunes de alucinaciones.

tres mini casos

Caso 1: resumen ahorrado tiempo. Un estudiante de doctorado entregó 60 artículos reales (todos los cuales encontró y descargó) a AI y creó un mapa temático; Redactó una tabla que compara las opiniones de diferentes autores sobre un tipo de hallazgo en dos días en lugar de semanas. Cada resumen ha sido obtenido y verificado.

Caso 2: Se evitó un falso desastre de soldadura. Un estudiante de posgrado pidió a AI que "sugiriera fuentes sobre este tema" y obtuvo una ingeniosa lista de 15 citas. Cuando lo revisó en la biblioteca, descubrió que 9 de la lista nunca existieron: autores reales, títulos inventados. Si esta lista se incluyera en la bibliografía de la tesis, la credibilidad de la defensa colapsaría e incluso podría considerarse una mala conducta científica.

Caso 3: Atribución incorrecta corregida. Un equipo informaría que la IA le dijo a un escritor que "fechó ese sitio en el período romano"; Cuando acudimos a la fuente, se vio que el autor afirmaba lo contrario, que el yacimiento era prerromano. La IA había invertido la opinión. La lectura de la fuente evitó un grave error.

Cuatro plantillas copiables

1) Confiar únicamente en la fuente proporcionada:

Su función: asistente de resúmenes de literatura. Confíe SÓLO en los textos que pegaré a continuación. NO AGREGUE ninguna información, fuentes o referencias ajenas a estos textos. Anota cada una de tus afirmaciones, indicando en qué parte del texto que te entregué se basa. Si le preguntan sobre algo que no está en el texto, diga "no está en las fuentes dadas".

2) Mapa temático y comparación:

Proporcionaré resúmenes de [N] fuentes a continuación. Agrúpelos por temas y cree una tabla comparativa: para cada tema, qué autores dicen qué, en qué están de acuerdo, en qué se contradicen. Utilice únicamente las opiniones de los textos que he proporcionado; añadiendo comentarios.

3) Lista de verificación de verificación de citas:

Al VERIFICAR la lista de citas a continuación, siga los pasos que necesito verificar para cada una (buscar en el catálogo, confirmación del DOI, leer la página correspondiente, verificación de contexto). NO confirma la exactitud de las atribuciones; dime que debo comprobar. Fabricación de fuentes.

4) Análisis de brechas:

Con base en los resúmenes de la literatura que he proporcionado, enumere las preguntas/lagunas que parecen no estar suficientemente investigadas sobre este tema. Para cada espacio, muestra qué fuente lo dejó abierto. Confía sólo en los textos que te he dado; No especules.

Aviso débil / Aviso fuerte

Aviso débil:

Proporcione las 15 fuentes académicas más importantes sobre este tema y sus resúmenes.

La IA produce una lista realista pero probablemente parcialmente fabricada sin mirar una base de datos real; Ésta es la trampa de la falsa atribución en sí misma.

Potente mensaje:

A continuación pego las citas completas y los resúmenes de los 12 artículos reales que encontré. Basado ÚNICAMENTE en estos, surge un mapa temático y una tabla comparativa. AGREGAR nuevo recurso. Indique de qué artículo proviene cada línea. Marque los temas que faltan como "no cubiertos en este conjunto de recursos".

La diferencia: el primero conlleva el riesgo de fuentes inventadas; este último maneja recursos reales de manera confiable.

Actualidad, lengua y literatura gris

Tres características de la literatura arqueológica hacen que el uso de la IA sea particularmente riesgoso. La primera es la actualidad: el conocimiento de un modelo está congelado en una fecha determinada, y en él faltan excavaciones, nuevas dataciones y correcciones posteriores a esa fecha. La IA puede presentar una visión superada como todavía válida; Por eso deberías escanear las publicaciones actuales. En segundo lugar, el multilingüismo: la arqueología está escrita en alemán, francés, italiano, turco y muchos idiomas locales además del inglés. Es posible que un informe de excavación importante se haya publicado en un solo idioma; Depender únicamente de fuentes en inglés significa perder una gran parte de la literatura. La IA ayuda a escanear estas fuentes en idiomas extranjeros, pero nuevamente, debes tener la fuente real a mano.

En tercer lugar, la literatura gris: la gran mayoría del conocimiento arqueológico reside en documentos que no aparecen en los diarios oficiales, como informes de excavaciones comerciales, archivos institucionales y tesis inéditas. La literatura gris (informes producidos en canales comerciales o corporativos que no están fácilmente disponibles en los directorios de publicaciones tradicionales) está ausente o es escasa en los datos de capacitación en IA; Por tanto, la IA o no conoce esta información o la inventa. La verdadera historia arqueológica de una región se encuentra a menudo en esta literatura gris, y sólo se puede llegar a ella con la mano real de los archivos institucionales.

Consejo: Decir "La IA no pudo encontrar nada" o "hay pocos recursos" sobre un tema no significa que haya poco trabajo sobre ese tema; A menudo, la fuente se encuentra en literatura gris, en un idioma extranjero o después de la sección de información del modelo. Pregúntele al archivo real sobre la falta de recursos, no a la IA.

mesa de trabajo de literatura

Búsqueda

Papel de la IA

decisión humana

verificación

abastecimiento

Débil/en riesgo

Selección del catálogo real.

Confirmación de catálogo

resumiendo

Fuerte (al texto dado)

precisión, elección

Leer la fuente

Comparación

Mapa temático/contradicción

Comentario, peso

contexto fuente

Escritura de citas

esquema de formato

contenido, precisión

¿Hay/dice?

Análisis de brechas

Preguntas del candidato

Valor de la investigación

Conocimiento del dominio

Errores comunes

  • Hacer que la IA "encuentre" recursos. Produce atribución falsa; Encuentre los recursos usted mismo.
  • Confiando en el formato DOI/impresión. Aunque el formato parezca correcto, el registro puede ser falso; Buscar en el sistema.
  • Usar el resumen sin leer la fuente. La IA puede revertir la opinión del autor.
  • Publicar el texto de IA tal cual. Originalidad y riesgo de plagio; Escribe con tu propio análisis.
  • No imponer la restricción de "solo recurso dado". Sin restricciones, la IA agrega información fabricada externamente.

En resumen

En la revisión de la literatura, la IA ahorra mucho tiempo al resumir, comparar y analizar fuentes objetivas. Pero en humanidades, la verificación de fuentes no es negociable: busque las fuentes usted mismo, verifique cada cita en el catálogo real, revise cada resumen, imponga la restricción de "sólo fuente citada" y escriba el texto final con su propio análisis original. Una fuente falsa destruirá tu trabajo.

Tarea de aplicación

Elija un tema, busque entre 8 y 10 publicaciones reales en la biblioteca/índice y recopile sus citas. Haga un cuadro comparativo con las plantillas "Basado únicamente en la fuente" y "Mapa temático". En un experimento separado, dígale a la IA que "sugiera una fuente" (sin restricciones) y verifique las citas que sugiere una por una en el catálogo y observe cuántas son reales.

lista de verificación

  • [ ] Las fuentes las encontré yo mismo en catálogos reales.
  • [] Puse la restricción de "confiar únicamente en la fuente dada" en la IA.
  • [ ] He confirmado cada cita con el catálogo/DOI.
  • [] He verificado cada resumen volviendo a la fuente.
  • [ ] Escribí el texto final con mi propio análisis original y referencias confirmadas.