Jedinica 8 / 11

Pregled literature i sinteza ekonomskih istraživanja

Dobici:

  • Sposobnost korištenja umjetne inteligencije za izradu strategije pretraživanja, mape koncepta i nacrta sinteze za ekonomsko pitanje
  • Sposobnost prepoznavanja rizika od izvora, lažnih citata i lažnih nalaza koje umjetna inteligencija može izmisliti te verificirati svaku referencu iz izvornog izvora
  • Sposobnost pretvaranja nalaza u uravnotežen literaturni sažetak sa suprotstavljenim pogledima, metodološkim razlikama i granicama konteksta.

Nijedna ekonomska analiza nije rođena u vakuumu. Prije nego započnete s političkim pitanjem, prognozom, izvješćem, zapitajte se "što se zna o ovom pitanju, o čemu se raspravlja?" Potrebno je odgovoriti na pitanje. To je ono što je pregled literature: organizirana kompilacija postojećeg znanja, nalaza i rasprava o nekoj temi. Čini se da je umjetna inteligencija sjajan akcelerator u ovom poslu — sažimanje teme, mapiranje koncepata, razvrstavanje suprotnih pogleda. Ali tu krije najopasniju zamku: umjetna inteligencija može proizvesti nepostojeće izvore, lažne autore i izmišljena otkrića s potpunim povjerenjem. Nepromjenjivo pravilo ove jedinice: Svaka referenca, svaki nalaz, svako ime provjerava se iz izvornog izvora; U tekst ne ulaze nepotvrđene reference.

Što umjetna inteligencija radi dobro u literaturi, a što nikad?

Što čini dobro (korisno): Mapiranje teme i njezinih podnaslova, predlaganje ključnih pojmova i pojmova za pretraživanje koje treba potražiti, sažimanje i uspoređivanje tekstova koje ste dali, uokvirivanje "strana" rasprave, izdvajanje strukture argumenata teksta.

Nikada mu se ne vjeruje (opasno): Izrada pravih citata i priznanja. Umjetna inteligencija može napraviti krajnje realne, ali potpuno izmišljene rečenice poput "Yılmaz (2019) je otkrio da je odnos inflacije i rasta negativan." Autor možda ne postoji, članak možda ne postoji ili stvarni članak može govoriti suprotno. To se u literaturi naziva halucinacijom i kobno je za akademsku/profesionalnu reputaciju.

Pažnja: Samo zato što ID koji daje umjetna inteligencija "izgleda realno" ne dokazuje ništa. Naziv časopisa može biti točan, godina razumna, ime autora može biti tursko — a članak možda nikada neće postojati. Prihvaćate da postoji tek kada ga pronađete u stvarnoj bazi podataka (stranica časopisa, DOI, knjižnica).

Pravi tijek rada: AI karte, vi provjeravate

  1. Pojasnite pitanje. Što tražite? Opseg, razdoblje, geografija, metoda?
  2. Napravite konceptualnu kartu. Zatražite od umjetne inteligencije podnaslove tema, ključne pojmove i pojmove za pretraživanje — to su pokazivači koji se mogu provjeriti, a ne izvori.
  3. Napravi pravi poziv. Potražite te pojmove u stvarnim bazama podataka (akademske tražilice, arhivi časopisa, institucionalne publikacije).
  4. Sažmite pronađene tekstove umjetnoj inteligenciji. Sada imate pravi tekst; AI to može sažeti i usporediti.
  5. Sintetizirajte i uravnotežite. Suprotstavljeni nalazi, razlike u metodama i granice konteksta predstavljeni su zajedno.
  6. Provjerite svaku atribuciju. Postoji li svaka referenca uključena u tekst doista, je li njezina atribucija točna, sadrži li doista navedeni nalaz?
Savjet: koristite umjetnu inteligenciju kao "stratega pretraživanja i sažimača", a ne "pronalazača izvora". Vi pronađite i provjerite izvor; AI vam pomaže razumjeti i usporediti izvor koji pronađete.

Uravnotežena sinteza: bez opredjeljenja

Dobar sažetak literature ne predstavlja niti jedno otkriće kao apsolutnu istinu. Postoje suprotni nalazi o većini pitanja u ekonomiji: jedna studija nalazi pozitivan odnos, a druga ne. To je obično zbog razlika u metodi, razdoblju, zemlji ili podacima. Iskrena sinteza čini ove razlike vidljivima: "Studije koje koriste metodu A nalaze ovo, studije koje koriste metodu B nalaze ono; razlika vjerojatno proizlazi iz ove pretpostavke."

tri mini kućišta

Slučaj 1 — Uhvaćeno lažno pripisivanje. Jedan je istraživač nazvao AI ​​"sažetim 5 studija o odnosu između minimalne plaće i zaposlenosti." AI je dao pet pristojnih oznaka. Istraživač je svaki tražio u akademskoj bazi podataka: tri su bila stvarna, dva nisu uopće - kombinacija autor-godina-časopis bila je potpuno izmišljena. Iskoristio je prava tri i izvadio dva. Bez provjere, dva izvora duhova dospjela bi u članak.

Slučaj 2 — Nepovoljan nalaz. AI je citirao pravi članak s točnim naslovom, ali je rekao da je "ova studija pronašla X." Istraživač je otvorio izvorni rad: zapravo je otkrio suprotno. Umjetna inteligencija je krivi nalaz pripisala pravom izvoru. Čak i ako je otisak istinit, pouka da se ne može koristiti bez provjere tvrdnje bila je pojačana.

Slučaj 3 — Uravnotežena sinteza. Jedan je analitičar prikupio literaturu o utjecaju porezne politike. U prvom nacrtu, AI je izvukao jednostran zaključak ("pozitivan utjecaj"). Analitičar je također dodao suprotne studije i pokazao da razlika dolazi od metode (kratkoročni vs dugoročni podaci). Rezultat je bio uravnotežen sažetak "uvjetnog"; Ocjena politike postala je pouzdanija.

validacijska tablica

AI izlaz

Korak provjere

Citat/impresum

Postoji li zapravo u bazi podataka/sa DOI-jem?

"Ova je studija otkrila ovo"

Je li ovo stvarno nalaz u izvornom tekstu?

Numerički rezultat

Odgovara li tablici/sažetku u članku?

"Opće prihvaćenost je ovakva"

Jesu li suprotni nalazi potisnuti?

Pojmovi za pretraživanje

Daje li smislene rezultate u stvarnom pretraživanju?

Četiri predloška za kopiranje

1) Koncept mape i strategije pretraživanja:

Istražit ću sljedeće ekonomsko pitanje: [pitanje]. Dajte mi podnaslove predmeta, ključne pojmove i pojmove za pretraživanje (turski + engleski) koje mogu koristiti u akademskoj bazi podataka. PROIZVODNJA IZVORA/CITATA; samo mi reci gdje da tražim i u kojim terminima.

2) Rezimiranje ponuđenog teksta:

Ispod je tekst/sažetak stvarnog članka. Sažmite ovo: istraživačko pitanje, metoda, podaci, glavni nalaz, ograničenja. Nemojte dodavati ništa što NIJE u tekstu; Označite dio u koji niste sigurni kao "nejasan u tekstu".[tekst]

3) Usporedna sinteza:

Usporedite sažetke ove 4 stvarne studije koje sam vam dao: koje pokazuju slične nalaze, koje pokazuju kontradiktorne nalaze i što (metoda, razdoblje, država, podaci) je vjerojatno objašnjenje razlike? Nemojte nametati jednostrani zaključak; učiniti suprotne nalaze jednako vidljivima.

4) Lista za provjeru citata:

Navedite sve reference u ovom nacrtu. Za svaki navedite tri stvari koje trebam provjeriti: (1) postoji li izvor doista, (2) je li pripisivanje točno, (3) sadrži li nalaz koji mu se pripisuje? Ne smatrajte nijedno od njih "sigurnim" dok ih ne potvrdim.

Slab upit / Jak upit

Slab upit:

Napišite sažetak literature o ovoj temi i navedite izvore.

AI proizvodi tekst koji izgleda realistično, ali je ispunjen djelomično izmišljenim referencama; Ako ne potvrdite, lažni izvori će ući u izvješće.

Snažan upit:

Istražit ću odnos minimalne plaće i zaposlenja. Najprije mi dajte podnaslove i pojmove za pretraživanje (PROIZVODNJA izvora/citata). Naći ću prava djela i donijeti vam njihove tekstove; Vi samo rezimirajte i usporedite što sam donio. Jednako predstavite suprotne nalaze i raspravite dolazi li razlika od metode ili razdoblja. Nemojte dodavati brojeve ili nalaze koji nisu u tekstu.

Uobičajene greške

  • Traženje izvora/navoda izravno od umjetne inteligencije i njihovo korištenje bez provjere. Rizik od halucinacija.
  • Zamjena realnih otisaka za stvarne. Izgled nije dokaz.
  • Ne primjećujući pripisivanje pogrešnog nalaza ispravnoj oznaci. Postoji izvor, ali tvrdnja može biti lažna.
  • Jednosmjerna sinteza. Prikrivanje suprotnih nalaza.
  • Zaobilaženje razlike metoda/kontekst. Usporedba jabuka i krušaka.
  • Curenje broja u sažetak kojeg nema u tekstu. “Nadjev” umjetne inteligencije.

Ukratko

U pregledu literature, AI je moćan strateg pretraživanja i sažimač, ali nepouzdan generator izvora. Pravi tijek rada: AI mapira koncepte i pojmove za pretraživanje, vi pronalazite i provjeravate stvarne izvore, a zatim AI sažima i uspoređuje vaša otkrića. Svaka referenca i nalaz potvrđeni su iz izvornog izvora; Sinteza iskreno odražava suprotstavljena gledišta i metodološke razlike.

Zadatak aplikacije

Odaberite ekonomsko pitanje. Nabavite konceptualnu kartu i pojmove za pretraživanje od AI s predloškom 1 (bez traženja izvora). Pronađite najmanje tri stvarne studije u stvarnoj akademskoj bazi podataka s ovim pojmovima. Sažmite ih i usporedite s predlošcima 2 i 3. Zatim, u zasebnom pokušaju, zatražite od umjetne inteligencije izravan citat i pretražite bazu podataka za citate koje daje kako biste utvrdili koliko ih je stvarnih, a koliko izmišljenih te ih zabilježite.

popis za provjeru

  • [ ] Koristio sam AI kao stratega pretraživanja/sažetka, a ne generatora resursa.
  • [ ] Sam sam pronašao prave izvore i provjerio ih u bazi podataka.
  • [ ] Potvrdio sam da svaka referenca stvarno postoji i da je njezino pripisivanje ispravno.
  • [ ] Provjerio sam pripisani nalaz iz izvornog teksta.
  • [ ] Predstavio sam suprotne nalaze i metodološke razlike na uravnotežen način.
  • [ ] Provjerio sam da u sažetak nisu procurile brojke/nalazi kojih nema u tekstu.
  • [ ] U tekst nisam uključio neprovjerene reference.