Unidad 3 / 12

Revisión de literatura y acceso a información basada en evidencia

Ganancias:

  • Capacidad para utilizar inteligencia artificial en el mapeo de literatura, escaneo de conceptos y priorización de lectura para gestionar el riesgo de fuentes fabricadas (alucinaciones)
  • Capacidad para establecer un flujo de verificación que confirme cada cita, hallazgo y afirmación del tamaño del efecto de la fuente primaria.
  • Capacidad para distinguir el nivel de evidencia (metanálisis, ECA, caso) y sopesar el resumen de IA con respecto a la jerarquía de evidencia.

La psicología es una profesión basada en la evidencia: la evidencia de la investigación nos dice si una intervención funciona, no “simplemente me lo parece a mí”. Cuando un experto quiere mantenerse actualizado, escribir una tesis o elegir el enfoque correcto para un caso, recurre a la literatura. Pero la literatura es enorme; Cada año se publican decenas de miles de artículos. La inteligencia artificial (IA) es un tremendo acelerador en este caso: define un concepto, mapea el campo, sugiere qué artículo se debe leer primero y simplifica un texto complejo. Pero aquí radica la característica más peligrosa de la IA en la literatura: fabrica fuentes inexistentes. En esta unidad, aprenderá cómo hacer de la IA un acelerador en el negocio de la literatura, cómo trabajar sin caer en la trampa de fuentes fabricadas (alucinaciones).

¿Qué hace la IA en la literatura, qué constituye?

Tareas de literatura en las que la IA es fuerte: explicar un concepto en un lenguaje sencillo; resumir los principales debates en un campo; hacer legible un texto; sugerir palabras clave y estrategia de búsqueda; resumir un artículo (cuando proporcionas el texto); comparando diferentes puntos de vista. En estos, la IA reduce las horas de lectura a minutos.

Cosas que inventa la IA: citas (fuentes que parecen perfectas pero que no existen, incluido el autor, el año, la revista, el número DOI); estadísticas (números reales como tamaño del efecto, tamaño de muestra, valor p); hallazgos (un estudio afirma haber "descubierto eso" cuando en realidad no es así). Esto se debe a que la IA no es un motor de búsqueda, sino un “adivinador de palabras probables”: genera el formato de cita más probable, sin verificar su precisión.

Atención: Cualquier cita dada por AI no es válida sin que usted la verifique en la fuente principal (el artículo mismo). Incluso un DOI aparentemente perfecto puede ser falso. Siempre es mejor decir "No pude encontrarlo" que "Puse la fuente equivocada".

Jerarquía de la evidencia: no todos los hallazgos son iguales

Cuando AI resume un hallazgo, no indica su fuerza probatoria. Sin embargo, existe una jerarquía de evidencia. Al sopesar una afirmación, es fundamental saber en qué tipo de evidencia se basa.

Nivel de evidencia

¿Qué quieres decir?

poder

Metanálisis/revisión sistemática

Combinación estadística de múltiples estudios.

más alto

Ensayo controlado aleatorio (ECA)

Experimento en el que los participantes se dividen en grupos aleatorios.

alto

Estudio longitudinal/transversal.

Observacional, no experimental.

medio

Serie de casos/reporte de caso

Descripción de uno o varios casos.

bajo

Opinión de expertos / escritura teórica.

Más interpretación que evidencia

más bajo

Cuando la IA le dice "la investigación muestra..." su primera pregunta debería ser: ¿Qué tipo de investigación? El hallazgo de un metanálisis no tiene el mismo peso que el hallazgo de un informe de caso único.

Paso a paso: flujo de literatura seguro impulsado por IA

  1. Haga que la IA explique el concepto. Para ir al grano rápidamente, pídale a la IA un resumen simple y conceptos clave. (Esto es un comienzo, no una fuente).
  2. Configurar estrategia de búsqueda. Pídale a AI que sugiera palabras clave, sinónimos y cadenas de búsqueda; Úselo en bases de datos reales (motores de búsqueda académicos, archivos de revistas).
  3. Encuentre fuentes reales usted mismo. Obtenga artículos de bases de datos revisadas por pares. Utilice títulos sugeridos por IA como pistas de búsqueda, no como citas.
  4. Resumir texto a IA. Entregue el texto del artículo real que encontró a la IA y solicite un resumen/comparación. La IA ya no inventa cosas porque tiene texto real.
  5. Confirme cada número y hallazgo. La IA compara el tamaño del efecto en el resumen con el valor real en el texto.
  6. Etiqueta el nivel de evidencia. Escriba el tipo de evidencia al lado de cada hallazgo.
Consejo: utilice la IA en la literatura de dos modos diferentes: “sugerente sin fuente” (exposición de conceptos, idea de búsqueda) y “resumidor con fuente” (cuando proporciona el texto). Esto último es seguro porque la IA funciona a partir del texto que tú proporcionas, no de su propia memoria.

tres mini casos

Caso 1: La epidemia de atribuciones falsas. Un estudiante de posgrado solicita una cita de AI para un capítulo de 15 fuentes sobre trastornos de ansiedad. La IA lo da todo en formato APA. Cuando el estudiante revisa, ve que 6 de 15 fuentes en realidad no existen (40%) y 3 están asignadas a la revista equivocada. Entonces la mitad de la lista es inutilizable. Lección: la atribución proviene de la base de datos real, no de la IA.

Caso 2: Uso correcto. Un médico le entrega el texto en PDF de 4 metanálisis reales a AI uno por uno y dice "tabla el número de muestra, el tamaño del efecto principal y la limitación de cada uno". La IA reduce 4 artículos de 30 páginas a una tabla comparativa en 10 minutos. El médico confirma cada número por mensaje de texto; Todos resultan ser correctos porque la IA trabajó a partir del texto dado, no de su propia memoria.

Caso 3: Trampa del nivel de evidencia. Un experto pregunta a la IA: "¿Funciona la terapia X?" pregunta. La IA dice “sí, los estudios lo avalan” y cuenta cuatro “estudios”. Cuando el experto lo examina, ve que tres de ellos son un único reporte de caso y uno es una publicación de blog; No existe ni un solo ECA. Aunque la afirmación pueda parecer formalmente "probada", su poder probatorio es muy débil.

Indicaciones y plantillas copiables

Recién estoy comenzando con este tema. SIN CREAR FUENTES, solo dame una introducción conceptual: conceptos básicos, discusiones importantes del campo y una lista de palabras clave + sinónimos que puedo usar al realizar búsquedas. Atribución; Si se requiere atribución, diga "busque la fuente usted mismo". Asunto: [asunto]

Estoy pegando el texto de un artículo real a continuación. Trabaje únicamente a partir de este texto, no agregue información externa. Extraiga lo siguiente: pregunta de investigación, método, muestra (n), hallazgo principal y tamaño del efecto, limitaciones, nivel de evidencia. Texto: [texto del artículo]

A continuación se muestra el texto de 3 artículos. Colóquelos en una tabla comparativa con las siguientes columnas: autor-año, muestra, método, hallazgo principal, nivel de evidencia, limitación. Trabaje únicamente a partir de los textos proporcionados, no agregue fuentes. Textos: [textos]

Enumere cada afirmación numérica (n, p, tamaño del efecto, porcentaje) en este texto en una línea separada para que pueda confirmarla con el artículo original. No agregue ningún número que no pueda verificar usted mismo. Texto: [resumen]

Aviso débil / Aviso fuerte

Mensaje débil: "Proporcione 10 fuentes académicas sobre la eficacia de la terapia cognitivo-conductual en la depresión".

Este mensaje invita a la IA a inventar atribuciones de memoria; Una parte importante de la producción será espuria.

Mensaje potente: "Sugiera palabras clave, sinónimos y cadenas de búsqueda para buscar en la base de datos sobre terapia cognitivo-conductual y depresión. No proporcione fuentes ni citas; buscaré los artículos en la base de datos real y luego le daré sus textos".

Este mensaje coloca a la IA en el papel seguro (estratega de búsqueda); Las referencias provienen de la fuente real.

Errores comunes

  • Utilizando directamente la atribución otorgada por la IA. A menudo se inventan fuentes aparentemente perfectas; Nunca se utiliza sin confirmación.
  • Confiar ciegamente en el DOI/enlace. La IA también puede producir DOI realista pero inexistente; No se considerará válido hasta que lo abras y lo revises.
  • Ignorando el nivel de evidencia. Sin preguntar si hay un blog o un metaanálisis detrás de la frase "los estudios dicen".
  • Sustituyendo el resumen de AI por el artículo. Es un mapa resumido; Basar una decisión crítica únicamente en el resumen significa emitir un juicio sin leer el texto.
  • Usando en modo único. Siempre usando IA en modo "recurso de la memoria"; mientras que el modo seguro es el modo "resumir a partir del texto dado".

En resumen

En el negocio de la literatura, la IA es un poderoso acelerador para la aclaración de conceptos, la estrategia de búsqueda y el resumen (cuando proporcionas el texto). Pero fabrica referencias, estadísticas y hallazgos a partir de su propia memoria (alucinaciones). Verificar cada cita y número de la fuente primaria; Considere inválida la fuente que no puede encontrar. Etiquete el nivel de evidencia (desde el metanálisis hasta el informe de caso) para cada hallazgo. Utilice la IA en dos modos distintos: "sugerente sin fuente" y "resumidor con fuente", con preferencia por este último.

Tarea de aplicación

Elige un tema. Primero pídale a la IA 5 citas sobre ese tema (modo fuente). Luego busque estas 5 citas una por una en un motor de búsqueda académico real y observe cuántas existen realmente. Luego busque 2 artículos reales sobre el mismo tema, envíe sus textos a la IA y haga que produzca una tabla comparativa. Compare dos experiencias: ¿cuál dio resultados confiables?

lista de verificación

  • [ ] No utilicé ninguna de las referencias dadas por AI sin confirmarlas.
  • [] Obtuve los artículos de una base de datos real revisada por pares.
  • [] Para el resumen, le di a la IA el texto real del artículo (no de memoria).
  • [] Comparé cada afirmación numérica con el texto original.
  • [] Etiqueté el nivel de evidencia para cada hallazgo.
  • [] Invalidé la fuente que no pude encontrar.