Jedinica 8 / 11

Pregled literature i sinteza ekonomskih istraživanja

Dobici:

  • Sposobnost korištenja umjetne inteligencije za izradu strategije pretraživanja, konceptualne mape i nacrta sinteze za ekonomska pitanja
  • Sposobnost prepoznavanja rizika od izvora, lažnih citata i lažnih nalaza koje umjetna inteligencija može napraviti, te provjera svake reference iz originalnog izvora
  • Sposobnost transformacije nalaza u uravnoteženi sažetak literature sa suprotnim stavovima, metodološkim razlikama i granicama konteksta.

Nijedna ekonomska analiza se ne rađa u vakuumu. Prije nego započnete s političkim pitanjem, prognozom, izvještajem, pitajte "šta se zna o ovom pitanju, o čemu se raspravlja?" Potrebno je odgovoriti na pitanje. To je ono što je pregled literature: organizovana kompilacija postojećeg znanja, nalaza i debata o nekoj temi. Umjetna inteligencija izgleda kao blistav akcelerator u ovom poslu – sažimanje teme, mapiranje koncepata, razvrstavanje suprotnih stavova. Ali tu se krije najopasnija zamka: umjetna inteligencija može s potpunim povjerenjem proizvesti nepostojeće izvore, lažne autore i izmišljene nalaze. Nepromjenjivo pravilo ove jedinice: svaka referenca, svaki nalaz, svako ime je potvrđeno iz originalnog izvora; U tekst nema neprovjerenih referenci.

Šta umjetna inteligencija radi dobro u literaturi, a šta nikad?

Šta radi dobro (korisno): mapiranje teme i njenih podnaslova, predlaganje ključnih koncepata i pojmova za pretraživanje koje treba tražiti, sumiranje i upoređivanje tekstova koje dajete, uokvirivanje „strana“ debate, izdvajanje strukture argumenata iz teksta.

Nikada ne treba vjerovati (opasno): Stvaranje pravih citata i zasluga. Umjetna inteligencija može napraviti krajnje realistične, ali potpuno izmišljene rečenice poput "Yılmaz (2019) otkrio je da je odnos inflacije-rast negativan." Autor možda ne postoji, članak možda ne postoji, ili stvarni članak može reći suprotno. Ovo se u literaturi naziva halucinacija i kobno je za akademsku/profesionalnu reputaciju.

Pažnja: Samo zato što lična karta koju je dala umjetna inteligencija "izgleda realistično" ne dokazuje ništa. Naziv časopisa može biti tačan, godina razumna, ime autora može biti tursko — a članak možda nikada neće postojati. Prihvatate da postoji samo kada ga pronađete u stvarnoj bazi podataka (stranica časopisa, DOI, biblioteka).

Pravi tok posla: AI mape, vi provjerite

  1. Pojasnite pitanje. sta trazis Obim, period, geografija, metod?
  2. Napravite koncept mapu. Pitajte AI za podnaslove tema, ključne koncepte i pojmove za pretraživanje - ovo su provjerljivi pokazivači, a ne izvori.
  3. Pravi poziv. Potražite ove pojmove u stvarnim bazama podataka (akademski pretraživači, arhive časopisa, institucionalne publikacije).
  4. Pronađene tekstove sažeti u umjetnu inteligenciju. Sada imate pravi tekst; AI to može sažeti i uporediti.
  5. Sintetizirajte i balansirajte. Suprotstavljeni nalazi, razlike u metodama i granice konteksta predstavljeni su zajedno.
  6. Provjerite svaku atribuciju. Da li svaka referenca uključena u tekst zaista postoji, da li je njena atribucija tačna, da li zaista sadrži traženi nalaz?
Savjet: Koristite AI kao „stratega pretraživanja i rezimatora“, a ne „pronalaženja izvora“. Pronalazite i potvrđujete izvor; AI vam pomaže da shvatite i uporedite izvor koji pronađete.

Uravnotežena sinteza: bez uzimanja na stranu

Dobar sažetak literature ne predstavlja niti jedan nalaz kao apsolutnu istinu. Postoje suprotni nalazi o većini pitanja u ekonomiji: jedna studija nalazi pozitivnu vezu, a druga ne. To je obično zbog razlika u metodi, periodu, zemlji ili podacima. Iskrena sinteza čini ove razlike vidljivim: "Studije koje koriste metodu A pronalaze ovo, studije koje koriste metodu B otkrivaju ono; razlika vjerovatno potiče iz ove pretpostavke."

tri mini kofera

Slučaj 1 — Izmišljena atribucija uhvaćena. Jedan istraživač je nazvao AI "sažima 5 studija o odnosu između minimalne plaće i zaposlenja". AI je dao pet pristojnih oznaka. Istraživač je svakog tražio u akademskoj bazi podataka: tri su bila stvarna, dva nisu bila – kombinacija autora-godina-časopis bila je potpuno izmišljena. Iskoristio je pravu trojku i izvadio dva. Bez provjere, dva izvora duhova bi ušla u članak.

Slučaj 2 — Nepovoljan nalaz. AI je citirao pravi članak s tačnim autorskim redom, ali je rekao da je "ova studija pronašla X." Istraživač je otvorio originalni rad: zapravo je otkrio suprotno. Umjetna inteligencija pripisala je pogrešan nalaz pravom izvoru. Čak i ako je otisak tačan, pouka da se ne može koristiti bez provjere tvrdnje je ojačana.

Slučaj 3 — Uravnotežena sinteza. Jedan analitičar je prikupio literaturu o uticaju poreske politike. U prvom nacrtu, AI je izveo jednostrani zaključak („uticaj pozitivan“). Analitičar je dodao i suprotne studije i pokazao da razlika dolazi iz metode (kratkoročni naspram dugoročnih podataka). Rezultat je bio uravnotežen sažetak „uslovnog“; Rejting politike je postao pouzdaniji.

tabela validacije

AI izlaz

Korak verifikacije

Citat/impresum

Da li zaista postoji u bazi podataka/sa DOI?

"Ova studija je otkrila ovo"

Je li to zaista nalaz u originalnom tekstu?

Numerički rezultat

Da li odgovara tabeli/sažetku u članku?

"Opće prihvaćeno je ovako"

Da li su suprotna otkrića potisnuta?

Pojmovi za pretragu

Da li daje značajne rezultate u stvarnom pretraživanju?

Četiri šablona za kopiranje

1) Koncept mapa i strategija pretraživanja:

Istražit ću sljedeće ekonomsko pitanje: [pitanje]. Dajte mi podnaslove predmeta, ključne pojmove i pojmove za pretraživanje (turski + engleski) koje mogu koristiti u akademskoj bazi podataka. IZVOR/CITAT PROIZVODNJE; samo mi reci gde da tražim i pod kojim uslovima.

2) Rezimirajući ponuđeni tekst:

Ispod je tekst/sažetak stvarnog članka. Sumirajte ovo: istraživačko pitanje, metoda, podaci, glavni nalaz, ograničenja. Nemojte dodavati ništa što NIJE u tekstu; Označite dio za koji niste sigurni kao "nejasan u tekstu".[tekst]

3) Komparativna sinteza:

Uporedite rezimee ove 4 stvarne studije koje sam vam dao: koje pokazuju slične nalaze, koje pokazuju kontradiktorne nalaze i šta (metod, period, zemlja, podaci) verovatno treba da objasni razlika? Nemojte nametati jednostrani zaključak; čine suprotne nalaze jednako vidljivim.

4) Lista za provjeru citata:

Navedite sve reference u ovom nacrtu. Za svaki navedite tri stvari koje moram provjeriti: (1) da li izvor zaista postoji, (2) da li je atribucija tačna, (3) sadrži li nalaz koji mu se pripisuje? Ne smatrajte nijednu od njih "sigurnim" dok ih ne potvrdim.

Slaba prompt / Jaka prompt

Slab upit:

Napišite sažetak literature na ovu temu i navedite izvore.

AI proizvodi tekst koji izgleda realistično, ali je ispunjen djelomično izmišljenim referencama; Ako ne potvrdite, lažni izvori će ući u izvještaj.

Snažan upit:

Istražit ću odnos minimalne plaće i zaposlenja. Prvo mi dajte podnaslove i pojmove za pretragu (PROIZVODNJA izvora/citata). Pronaći ću prava djela i donijeti vam njihove tekstove; Vi samo sumirate i uporedite ono što sam doneo. Predstavite suprotne nalaze podjednako i razgovarajte o tome da li razlika dolazi od metode ili perioda. Nemojte dodavati brojeve ili nalaze kojih nema u tekstu.

Uobičajene greške

  • Tražiti izvore/citate direktno od umjetne inteligencije i koristiti ih bez provjere. Rizik od halucinacija.
  • Zamijeniti realistične otiske za stvarne. Izgled nije dokaz.
  • Ne primjećujući pripisivanje pogrešnog nalaza ispravnoj oznaci. Postoji izvor, ali tvrdnja može biti lažna.
  • Jednosmjerna sinteza. Prikrivanje suprotnih nalaza.
  • Zaobilaženje razlike metode/konteksta. Poređenje jabuka i krušaka.
  • Propuštanje broja u sažetak koji nije u tekstu. "Nadev" od veštačke inteligencije.

Ukratko

U pregledu literature, AI je moćan strateg pretraživanja i sažetak, ali nepouzdan generator izvora. Pravi tok posla: AI mapira koncepte i pojmove za pretragu, vi pronalazite i potvrđujete stvarne izvore, zatim AI sažima i upoređuje vaše nalaze. Svaka referenca i nalaz je potvrđen iz originalnog izvora; Sinteza iskreno odražava suprotne stavove i metodološke razlike.

Zadatak aplikacije

Odaberite pitanje iz ekonomije. Nabavite mapu koncepta i pojmove za pretraživanje od AI s predloškom 1 (bez traženja izvora). Pronađite najmanje tri stvarne studije u pravoj akademskoj bazi podataka sa ovim terminima. Sažmite ih i uporedite ih sa predlošcima 2 i 3. Zatim, u odvojenom pokušaju, zatražite od umjetne inteligencije direktan citat i pretražite bazu podataka za citate koje daje kako biste utvrdili koliko su stvarni, a koliko izmišljeni i zabilježite ih.

kontrolna lista

  • [ ] Koristio sam AI kao strateg za pretragu/sažetak, a ne kao generator resursa.
  • [ ] Sam sam pronašao prave izvore i provjerio ih u bazi podataka.
  • [ ] Potvrdio sam da svaka referenca zaista postoji i da je njena atribucija tačna.
  • [ ] Provjerio sam pripisani nalaz iz originalnog teksta.
  • [ ] Predstavio sam suprotne nalaze i metodološke razlike na uravnotežen način.
  • [ ] Provjerio sam da u sažetak nisu procurili brojevi/nalazi koji nisu bili u tekstu.
  • [ ] U tekst nisam uključio nijednu neprovjerenu referencu.