zisky:
- Schopnost používat umělou inteligenci při mapování literatury, skenování konceptů a určování priorit čtení pro řízení rizika umělých zdrojů (halucinací)
- Schopnost vytvořit ověřovací tok, který potvrdí každou citaci, nález a velikost účinku z primárního zdroje
- Schopnost rozlišit úroveň důkazů (metaanalýza, RCT, případ) a porovnat souhrn AI s hierarchií důkazů
Psychologie je profese založená na důkazech: výzkumné důkazy nám říkají, zda intervence funguje, nikoli „jen se mi to tak zdá“. Když chce odborník zůstat aktuální, napsat diplomovou práci nebo zvolit správný přístup k případu, obrátí se na literaturu. Ale literatura je obrovská; Každý rok vyjdou desítky tisíc článků. Umělá inteligence (AI) je zde obrovským akcelerátorem: definuje koncept, mapuje pole, navrhuje, který článek byste si měli přečíst jako první, zjednodušuje složitý text. Zde však leží nejnebezpečnější rys AI v literatuře: vytváří si neexistující zdroje. V této lekci se naučíte, jak udělat z AI akcelerátor v literatuře, jak pracovat, aniž byste se dostali do pasti vymyšlených zdrojů (halucinací).
Co dělá AI v literatuře, co tvoří?
Úkoly v literatuře, kde je umělá inteligence silná: vysvětlení konceptu srozumitelným jazykem; shrnout hlavní debaty v oboru; aby byl text čitelný; navrhnout klíčová slova a strategii vyhledávání; shrnout článek (když poskytnete text); porovnávání různých pohledů. V nich AI zkrátí hodiny čtení na minuty.
Věci, které AI tvoří: citace (zdroje, které vypadají perfektně, ale neexistují, včetně autora, roku, časopisu, čísla DOI); statistiky (skutečně vypadající čísla jako velikost účinku, velikost vzorku, p-hodnota); zjištění (studie tvrdí, že „to našla“, i když ve skutečnosti nenašla). Je to proto, že umělá inteligence není vyhledávač, ale „pravděpodobný hádač slov“: generuje nejpravděpodobnější formát citace, aniž by kontrolovala jeho přesnost.
Upozornění: Jakákoli citace poskytnutá AI není platná, aniž byste ji ověřili z primárního zdroje (samotného článku). I zdánlivě dokonalý DOI může být falešný. Vždy je lepší říct „nemohl jsem to najít“ než „uvedl jsem špatný zdroj“.
Hierarchie důkazů: ne všechny nálezy jsou stejné
Když AI shrnuje nález, neřekne vám jeho důkazní sílu. Existuje však hierarchie důkazů. Při zvažování tvrzení je nezbytné vědět, na jakém typu důkazu je založeno.
Úroveň důkazů
co tím myslíš?
moc
Metaanalýza / systematický přehled
Statistická kombinace více studií
nejvyšší
Randomizovaná kontrolovaná studie (RCT)
Experiment, ve kterém jsou účastníci rozděleni do náhodných skupin
vysoká
Podélná/průřezová studie
Pozorovací, neexperimentální
střední
Série případů / kazuistika
Popis jednoho nebo více případů
nízká
Odborný posudek / teoretické psaní
Více výkladů než důkazů
nejnižší
Když vám AI řekne „výzkum ukazuje…“, vaše první otázka by měla znít: Jaký typ výzkumu? Nález metaanalýzy nemá stejnou váhu jako nález jedné kazuistiky.
Krok za krokem: zabezpečený tok literatury s umělou inteligencí
- Nechte AI vysvětlit koncept. Abyste se rychle dostali k věci, požádejte AI o jednoduché shrnutí a klíčové koncepty. (Toto je startér, ne zdroj.)
- Nastavte strategii vyhledávání. Požádejte AI, aby navrhla klíčová slova, synonyma a vyhledávací řetězec; použít na skutečných databázích (akademické vyhledávače, archivy časopisů).
- Najděte si skutečné zdroje sami. Získejte články z recenzovaných databází. Používejte názvy navržené umělou inteligencí jako vodítko pro hledání, nikoli jako citace.
- Shrňte text do AI. Dejte text skutečného článku, který jste našli, AI a požádejte o shrnutí/srovnání. AI už nevytváří věci, protože má skutečný text.
- Potvrďte každé číslo a nález. AI porovná velikost účinku v abstraktu se skutečnou hodnotou v textu.
- Označte úroveň důkazů. U každého nálezu napište typ důkazu.
Tip: Umělou inteligenci používejte v literatuře ve dvou různých režimech: „sugestivní bez zdroje“ (výklad konceptu, nápad hledání) a „zdrojový sumář“ (když zadáte text). To druhé je bezpečné, protože AI funguje z textu, který poskytnete, nikoli ze své vlastní paměti.
tři mini pouzdra
Případ 1 – Epidemie falešného přisuzování. Postgraduální student požaduje citaci AI pro kapitolu o 15 zdrojích o úzkostných poruchách. AI to vše dává ve formátu APA. Při kontrole student vidí, že 6 z 15 zdrojů ve skutečnosti neexistuje (40 %) a 3 jsou přiřazeny ke špatnému časopisu. Polovina seznamu je tedy nepoužitelná. Ponaučení: atribuce pochází ze skutečné databáze, nikoli z AI.
Případ 2 – Správné použití. Lékař předá text ve formátu PDF 4 skutečných metaanalýz AI jednu po druhé a řekne "tabulka číslo vzorku, velikost hlavního účinku a omezení každé z nich." AI redukuje 4 30stránkové články do srovnávací tabulky za 10 minut. Lékař každé číslo potvrdí textem; Všechny se ukázaly jako správné, protože AI pracovala z daného textu, nikoli ze své vlastní paměti.
Případ 3 – Úroveň důkazů past. Expert se ptá AI: "Funguje terapie X?" ptá se. AI říká „ano, studie to podporují“ a počítá čtyři „studie“. Když to znalec prozkoumá, uvidí, že tři z nich jsou jedinou kazuistikou a jeden je blogový příspěvek; Neexistuje ani jedna RCT. Ačkoli se tvrzení může zdát formálně „prokázané“, jeho důkazní síla je velmi slabá.
Kopírovatelné výzvy a šablony
S tímto tématem teprve začínám. BEZ VYTVOŘENÍ ZDROJŮ, poskytněte mi pouze koncepční úvod: základní pojmy, hlavní diskuse o oboru a seznam klíčových slov + synonym, která mohu použít při vyhledávání. Atribuce; Pokud je vyžadováno uvedení zdroje, řekněte „najděte si zdroj sami“. Předmět: [předmět]
Níže vkládám text skutečného článku. Pracujte pouze z tohoto textu, nepřidávejte vnější informace. Extrahujte následující: výzkumnou otázku, metodu, vzorek (n), hlavní zjištění a velikost účinku, omezení, úroveň důkazů. Text: [text článku]
Níže je text 3 článků. Vložte je do srovnávací tabulky s následujícími sloupci: autor-rok, vzorek, metoda, hlavní zjištění, úroveň důkazů, omezení. Pracujte pouze z uvedených textů, zdroje nepřidávejte. Texty: [texty]
Uveďte každý číselný nárok (n, p, velikost účinku, procento) v tomto textu na samostatný řádek, abych jej mohl potvrdit původním článkem. Nepřidávejte žádná čísla, která nemůžete sami ověřit.Text: [shrnutí]
Slabá výzva / Silná výzva
Slabá výzva: "Uveďte 10 akademických zdrojů o účinnosti kognitivně behaviorální terapie u deprese."
Tato výzva vyzve AI, aby vytvořila atribuci z paměti; Významná část výstupu bude falešná.
Výkonná výzva: "Navrhněte klíčová slova, synonyma a vyhledávací řetězce k prohledání databáze kognitivně behaviorální terapie a deprese. Neuvádějte zdroje/citace; najdu články ze skutečné databáze a poté vám dám jejich texty."
Tato výzva staví AI do bezpečné role (strateg vyhledávání); Reference pocházejí ze skutečného zdroje.
Časté chyby
- Přímo pomocí atribuce dané AI. Zdánlivě dokonalé zdroje jsou často vymyšlené; Nikdy se nepoužívá bez potvrzení.
- Slepě důvěřovat DOI/odkazu. AI může také vytvářet realistické, ale neexistující DOI; Nebude považován za platný, dokud jej neotevřete a nezkontrolujete.
- Ignorování úrovně důkazů. Neptejte se, zda je za větou „studie říkají“ blog nebo metaanalýza.
- Nahrazení článku souhrnem AI. Je to souhrnná mapa; Založit kritické rozhodnutí pouze na shrnutí znamená učinit úsudek bez čtení textu.
- Použití v jediném režimu. Vždy používat AI v režimu „zdroj z paměti“; zatímco bezpečný je režim „shrnout z daného textu“.
V souhrnu
V literatuře je umělá inteligence výkonným akcelerátorem pro objasňování konceptů, vyhledávací strategii a sumarizaci (pokud poskytujete text). Reference, statistiky a poznatky si ale vymýšlí z vlastní paměti (halucinace). Ověřte každou citaci a číslo z primárního zdroje; Zvažte zdroj, který nemůžete najít neplatný. Označte úroveň důkazů (od metaanalýzy po kazuistiku) pro každý nález. Umělou inteligenci používejte ve dvou odlišných režimech: „nezdrojovaný sugestivní“ a „zdrojový sumátor“, přičemž upřednostňujete druhý.
Aplikační úkol
Vyberte téma. Nejprve požádejte AI o 5 citací na toto téma (režim zdrojů). Pak prohledejte těchto 5 citací jednu po druhé ve skutečném akademickém vyhledávači a poznamenejte si, kolik jich skutečně existuje. Pak najděte 2 skutečné články na stejné téma, vložte jejich texty do AI a nechte ji vytvořit srovnávací tabulku. Porovnejte dvě zkušenosti: která poskytla spolehlivý výstup?
kontrolní seznam
- [ ] Nepoužil jsem žádnou z referencí poskytnutých AI, aniž bych je potvrdil.
- [ ] Články jsem získal ze skutečné, recenzované databáze.
- [ ] Pro shrnutí jsem dal AI aktuální text článku (ne z paměti).
- [ ] Každý číselný nárok jsem porovnal s původním textem.
- [ ] U každého nálezu jsem označil úroveň důkazů.
- [ ] Zneplatnil jsem zdroj, který jsem nemohl najít.