Jedinica 11 / 11

Granice, rizik modela, etika, privatnost i upravljanje

Dobici:

  • Sposobnost sustavnog navođenja glavnih ograničenja umjetne inteligencije u ekonomskoj analizi (izrada, datum preseka podataka, sljepoća kauzaliteta, strukturni prijelom)
  • Sposobnost uspostavljanja sigurnog korištenja i tijeka rada usklađenog s KVKK koji štiti povjerljive podatke, tržišno osjetljive informacije i osobne podatke
  • Sposobnost dizajniranja i implementacije okvira upravljanja umjetnom inteligencijom na razini poduzeća (registracija, verifikacija, odgovornost, lanac odobrenja)

Modul ispit

1. Središnji bankar stavlja prognozu inflacije generiranu umjetnom inteligencijom izravno u službenu bilješku o politici bez ikakve provjere. Koja je temeljna pogreška u ovom pristupu?

  • A) Pretvaranje izlaza umjetne inteligencije u odluku bez povezivanja s izvorom, ponovnog izračunavanja i podvrgavanja ekonomskoj provjeri; Ignoriranje da je odgovornost na ljudima ✔
  • B) Strogo je zabranjeno koristiti umjetnu inteligenciju u ekonomskim prognozama
  • C) Umjetna inteligencija uvijek prikazuje inflaciju nižom nego što jest
  • D) Predviđanje nije prikazano u grafikonu

Opis: Umjetna inteligencija proizvodi statistički pregled; ali odgovornost za predviđanje i sadržaj formalnog policy brief-a leži na nadležnom ekonomistu i instituciji. Neprovjereni izlaz je rizičan kao i nepotpisano izvješće; Broj mora biti povezan s izvornim izvorom, preračunat i propušten kroz ekonomski filter.

2. Koji je najsigurniji pristup kada pitate umjetnu inteligenciju: 'Dajte mi brojku deficita tekućeg računa za Tursku u 2024.'?

  • A) Vjerujte broju koji daje umjetna inteligencija i koristite ga izravno
  • B) Potvrđivanje brojke iz službene publikacije bilance plaćanja CBRT-a i provjera datuma/jedinice ✔
  • C) Dobivanje broja s nasumične stranice s vijestima na internetu
  • D) Ignoriranje broja jer će se ionako promijeniti

Objašnjenje: Broj koji daje umjetna inteligencija može biti stariji od datuma preseka podataka o obuci ili može biti izmišljen (halucinacija). Jedini točan izvor ekonomskih podataka je službena publikacija; U ovom primjeru, to je CBRT statistika bilance plaćanja. Broj mora biti potvrđen iz izvornog izvora.

3. Analitičar umjetnoj inteligenciji daje neobrađene CPI serije i kaže 'izračunajte stvarni rast'. Što je od sljedećeg ispravno ponašanje provjere valjanosti?

  • A) Dodavanje rezultata u izvješće bez njegovog čitanja
  • B) Samo gledajući da li se ishod 'čini razumnim'
  • C) Provjerite rezultat čitanjem generirane formule/koda i ručnim izračunavanjem barem jednog razdoblja ✔
  • D) Pitajte umjetnu inteligenciju 'jesi li siguran?' i biti zadovoljan odgovorom 'da'

Objašnjenje: U standardnim ekonomskim izračunima kao što je stvarno-nominalna pretvorba, AI možda neće koristiti ispravnu formulu ili pomiješati baznu godinu. Analitičar mora pročitati generirani kod i formulu, ručno izračunati barem jedno opažanje i usporediti rezultat. Transparentno, objašnjivo računovodstvo ima prednost.

4. Zašto se provodi 'backtesting' u predviđanju vremenskih serija?

  • A) Pokazati koliko 'lijepo' model odgovara povijesnim podacima
  • B) Za automatsko finaliziranje procjene
  • C) Za uljepšavanje podataka
  • D) Izmjeriti stvarni uspjeh predviđanja testiranjem modela u prethodnim razdobljima kada nije bio u obuci ✔

Opis: Backtest mjeri koliko dobro model predviđa za razdoblja u prošlosti koja ne poznaje; Štiti model od zamke pretjeranog opremanja gledajući samo podatke kojima odgovara. To je preduvjet za upotrebljivost modela u stvarnom svijetu.

5. Što je 'bazni učinak' u komentarima o inflaciji i zašto mu treba posvetiti pozornost?

  • A) Na godišnju promjenu utječe niska/visoka vrijednost prošlogodišnjeg usporednog razdoblja ✔
  • B) Inflacija uvijek raste
  • C) Temeljna inflacija viša od ukupne
  • D) Desezoniranje cijena

Objašnjenje: Osnovni učinak je da na godišnju stopu promjene utječu prošlogodišnji (bazni) niski ili visoki, kao i ovogodišnji razvoj. Pad ukupne godišnje inflacije mogao bi biti posljedica visoke prošlogodišnje baze, a ne stvarnog usporavanja. Ova se zamka često zanemaruje u sažecima umjetne inteligencije.

6. Kako se uloga umjetne inteligencije može najtočnije definirati u studiji scenarija?

  • A) Vidovnjak koji sa sigurnošću zna budućnost
  • B) Donositelj konačne odluke koji sam utvrđuje pretpostavke
  • C) Pomoćnik koji očite pretpostavke pretvara u transparentne izračune i opcije čini vidljivima; presuda je u čovjeku ✔
  • D) Alat preciznosti koji čini skriptu nepotrebnom

Objašnjenje: Scenarij nije predviđanje, već uvjetna vježba 'ako-onda' temeljena na izričitim pretpostavkama. AI je akcelerator u prevođenju pretpostavki u proračunske tablice i čini opcije vidljivima; Međutim, vlasništvo nad pretpostavkama, njihova razumnost i konačna prosudba leži na ekonomistu.

7. AI koristi jak kauzalni jezik kao što je 'X povećava Y' kada tumači izlaz regresije. Koji je ispravan odgovor ekonomista?

  • A) Prihvaćanje kauzalnog jezika onakvog kakav jest
  • B) Ispravite jezik provjerom rizika izostavljenih varijabli/endogenosti i ispravljanjem činjenice da odnos ne znači uzročnost.
  • C) Potpuno odbacivanje regresije
  • D) Pretpostavka da je uzročnost dokazana ako je R-kvadrat visok

Objašnjenje: Regresija uglavnom mjeri odnos (korelaciju); Uzročnost se može tvrditi samo uz odgovarajući dizajn (eksperiment, instrumentalna varijabla, prirodni eksperiment, itd.) i pretpostavke. Postoje rizici izostavljenih varijabli, endogenosti i obrnute uzročnosti. Ekonomist mora obuzdati ovaj pretjerani kauzalni jezik i propitivati ​​uvjete.

8. Dali ste umjetnoj inteligenciji da pripremi sažetak literature o ekonomskoj temi, a tekst daje reference poput '(Yılmaz, 2019.)'. Što trebate učiniti prvo?

  • A) Stavljanje citata u izvješće onakvima kakvi jesu
  • B) Pretpostavka dobre kvalitete samo zato što postoji mnogo citata
  • C) Samo gledajući dosljednost godina objavljivanja
  • D) Provjerite iz izvornog izvora da svaka referenca stvarno postoji i sadrži nalaz ✔

Objašnjenje: Umjetna inteligencija može proizvesti izvore i reference koji zapravo ne postoje (halucinacije). Svaka referenca mora biti potvrđena iz izvornog izvora da stvarno postoji, da je njezino pripisivanje točno i da stvarno sadrži traženi nalaz. Neprovjereno pripisivanje je akademski i profesionalni rizik.

9. Koji je najpošteniji način prenošenja neizvjesnosti u javnom gospodarskom izvješću?

  • A) Dati jedan točan broj i uopće ne spominjati nesigurnost
  • B) Skrivanje najgoreg mogućeg scenarija i davanje samo optimističnog broja
  • C) Jasno navedite raspon predviđanja, scenarije i temeljne pretpostavke ✔
  • D) Odbacivanje neizvjesnosti govoreći 'to je komplicirano'

Objašnjenje: Neizvjesnost je neizbježna u ekonomskim predviđanjima i analizama. Jasno navođenje raspona, scenarija i pretpostavki umjesto jednog točnog broja je iskrena komunikacija. Skrivanje dvosmislenosti dovodi čitatelja u zabludu i potkopava vjerodostojnost organizacije.

10. Kada grafikon prikazuje rast BDP-a, okomita os počinje na 2%, a ne na 0%. Zašto bi ovo moglo dovesti u zabludu?

  • A) Isprekidana os može preuveličati male razlike i učiniti promjenu većom nego što jest ✔
  • B) Gdje os počinje uopće ne utječe na grafikon
  • C) Grafikon automatski postaje precizniji
  • D) Bitan je samo odabir boje, os je nebitna

Objašnjenje: crtkana os (ne počinje od nule) može vizualno povećati male razlike i učiniti promjenu dramatičnom. U iskrenoj vizualizaciji, izbor osi ne bi trebao iskriviti poruku; Ako se koristi crtkana os, ona mora biti jasno označena.

11. Analitičar think tanka uključuje tržišno osjetljive podatke koji još nisu javno objavljeni u javni (nepoduzetnički) AI alat. Koji je ključni rizik?

  • A) Nema rizika, podaci su već brojčani
  • B) Jedini rizik je da se graf pokaže krivim
  • C) Umjetna inteligencija vrlo sporo obrađuje podatke
  • D) Rizik od curenja podataka, obrade od strane trećih strana i kršenja pravila privatnosti/tržišta ✔

Otkrivanje: unos povjerljivih ili tržišno osjetljivih podataka u javni alat stvara rizik obrade podataka od strane trećih strana, curenja podataka ili korištenja za obuku modela; To predstavlja kršenje privatnosti/KVKK i rizik od tržišne manipulacije i povlaštenih informacija. Osjetljive podatke treba obrađivati ​​u sigurnim alatima koje je odobrila institucija i po potrebi ih anonimizirati.

12. Brojke istog pokazatelja preuzete iz dva različita izvora (TURKSTAT i međunarodna organizacija) se ne podudaraju. Koje je najvjerojatnije nedužno objašnjenje?

  • A) Jedan od izvora sigurno laže
  • B) Može postojati razlika u definiciji, baznoj godini, opsegu, desezoniranju ili reviziji; metapodaci moraju biti usklađeni ✔
  • C) Razlika u brojevima je nevažna, dovoljno je uzeti njihov prosjek
  • D) Dovoljno je pitati umjetnu inteligenciju i pustiti je da odabere koji je točan.

Objašnjenje: Razlika u istom pokazatelju u različitim izvorima uglavnom je posljedica razlika u definiciji, baznoj godini, opsegu, desezoniranju ili reviziji (verzija). Metapodaci (definicija, jedinica, razdoblje, ispravak) moraju biti usklađeni prije usporedbe brojki.

13. Što je od sljedećeg zadatak u kojem je umjetna inteligencija SNAŽNA u ekonomskoj analizi, ubrzavajući uz ljudsku provjeru?

  • A) Samo dati konačno odobrenje službene brojke inflacije
  • B) Donošenje odluka o monetarnoj politici umjesto institucije
  • C) Ubrzajte zadatke kao što je izrada koda za čišćenje podataka i sažimanje dugih izvješća ✔
  • D) Stavljanje neprovjerene pretpostavke u javno izvješće

Opis: Umjetna inteligencija; Snažan u mehaničkim zadacima i zadacima izrade kao što je izrada koda, sažimanje dugog izvješća, predlaganje koraka za čišćenje podataka, ispravljanje formatiranja i jezika. Međutim, krajnja odgovornost za predviđanje, političke odluke i proizvodnju službenih brojki leži na ljudima. Ispravna uporaba je ubrzati tamo gdje je jaka i zadržati kritičku prosudbu u osobi.

14. Koja je najprikladnija praksa upravljanja kako bi se osiguralo praćenje i revizija rezultata umjetne inteligencije u instituciji?

  • A) Uspostavite lanac sljedivosti i odobrenja koji bilježi zahtjeve, alate, podatke i korake provjere ✔
  • B) Uopće ne bilježi rezultate kako se radno opterećenje ne bi povećalo
  • C) Svatko može slobodno koristiti vozilo koje želi s podacima koje želi.
  • D) Samo osoba s najvišim položajem koristi umjetnu inteligenciju, ne vode se nikakvi zapisi

Opis: Dobro upravljanje; Zahtijeva bilježenje koji je rezultat proizveden s kojim zahtjevom, s kojim alatom, s kojim podacima, korak provjere i odgovoran lanac odobrenja. Ova disciplina bilježenja i priznavanja omogućuje praćenje pogrešaka i razjašnjavanje odgovornosti.