Winst:
- Vermogen om systematisch de belangrijkste beperkingen van kunstmatige intelligentie in economische analyses op te sommen (fabricage, data-cut-off date, causaliteitsblindheid, structurele breuk)
- Mogelijkheid om een veilige gebruiks- en KVKK-compatibele workflow tot stand te brengen die vertrouwelijke gegevens, marktgevoelige informatie en persoonlijke gegevens beschermt
- Mogelijkheid om een AI-governanceframework op ondernemingsniveau te ontwerpen en te implementeren (registratie, verificatie, verantwoording, goedkeuringsketen)
Module-examen
1. Een centrale bankier plaatst een door AI gegenereerde inflatievoorspelling rechtstreeks in een officiële beleidsnota, zonder enige verificatie. Wat is de fundamentele fout in deze aanpak?
- A) Het transformeren van de output van kunstmatige intelligentie in een besluit zonder het aan de bron te koppelen, het opnieuw berekenen ervan en het ondergaan van economische verificatie; Negeren dat de verantwoordelijkheid bij mensen ligt ✔
- B) Het is ten strengste verboden om kunstmatige intelligentie te gebruiken in economische voorspellingen
- C) Kunstmatige intelligentie laat de inflatie altijd lager zien dan ze is
- D) De voorspelling wordt niet weergegeven in een grafiek
Beschrijving: Kunstmatige intelligentie produceert een statistisch overzicht; maar de verantwoordelijkheid voor de prognoses en de inhoud van een formele beleidsbrief ligt bij de bevoegde econoom en de instelling. Niet-geverifieerde output is net zo riskant als een niet-ondertekend rapport; Het getal moet gekoppeld worden aan de oorspronkelijke bron, herberekend en door een economisch filter gehaald worden.
2. Wat is de veiligste aanpak als je kunstmatige intelligentie vraagt: 'Geef mij het tekort op de lopende rekening voor Türkiye in 2024'?
- A) Vertrouw op het nummer dat door kunstmatige intelligentie wordt gegeven en gebruik het direct
- B) Bevestiging van het cijfer uit de officiële publicatie van de betalingsbalans van het CBRT en verificatie van de datum/eenheid ✔
- C) Het nummer ophalen van een willekeurige nieuwssite op internet
- D) Het nummer negeren omdat het toch zal veranderen
Toelichting: Het door kunstmatige intelligentie gegeven getal kan ouder zijn dan de afsluitdatum van de trainingsgegevens of kan verzonnen zijn (hallucinatie). De enige nauwkeurige bron van economische gegevens is de officiële publicatie; In dit voorbeeld zijn dit de CBRT-betalingsbalansstatistieken. Het nummer moet worden bevestigd door de oorspronkelijke bron.
3. Een analist geeft ruwe CPI-reeksen aan kunstmatige intelligentie en zegt 'bereken de echte groei'. Welke van de volgende is een correct validatiegedrag?
- A) Het resultaat aan het rapport toevoegen zonder het te lezen
- B) Gewoon kijken of de uitkomst 'redelijk lijkt'
- C) Controleer het resultaat door de gegenereerde formule/code te lezen en handmatig ten minste één periode te berekenen ✔
- D) Vraag kunstmatige intelligentie 'weet je het zeker?' en tevreden zijn met het antwoord ‘ja’
Uitleg: Bij standaard economische berekeningen, zoals de reële-nominale conversie, gebruikt de AI mogelijk niet de juiste formule of verwisselt hij het basisjaar. De analist moet de gegenereerde code en formule lezen, minimaal één waarneming handmatig berekenen en het resultaat vergelijken. Een transparante, verklaarbare boekhouding heeft de voorkeur.
4. Waarom wordt er bij het voorspellen van tijdreeksen 'backtesting' uitgevoerd?
- A) Om te laten zien hoe 'mooi' het model past bij historische gegevens
- B) Om de schatting automatisch af te ronden
- C) Om de gegevens te verfraaien
- D) Het echte voorspellingssucces meten door het model te testen in eerdere perioden waarin het niet in training was ✔
Beschrijving: Backtest meet hoe goed het model voorspelt over perioden in het verleden die het niet kent; Het beschermt het model tegen de valkuil van overfitting door alleen te kijken naar de gegevens waarin het past. Het is een voorwaarde voor de bruikbaarheid van het model in de echte wereld.
5. Wat is het 'basiseffect' in inflatiecommentaren en waarom vereist dit aandacht?
- A) De jaarlijkse verandering wordt beïnvloed door de laagste/hoogste waarde van de vergelijkingsperiode van vorig jaar ✔
- B) De inflatie stijgt altijd
- C) De kerninflatie is hoger dan de nominale inflatie
- D) Seizoensgebonden aanpassing van de prijzen
Uitleg: Het basiseffect is dat het jaarlijkse mutatietempo wordt beïnvloed door de (basis)laag of hoog van vorig jaar en door de ontwikkeling van dit jaar. Een daling van de totale jaarlijkse inflatie kan het gevolg zijn van de hoge basis van vorig jaar en niet van een echte vertraging. Deze valkuil wordt vaak over het hoofd gezien in AI-samenvattingen.
6. Hoe kan de rol van kunstmatige intelligentie het meest nauwkeurig worden gedefinieerd in een scenariostudie?
- A) Een ziener die de toekomst met zekerheid kent
- B) De uiteindelijke beslisser die zelf de aannames bepaalt
- C) Een assistent die voor de hand liggende aannames omzet in transparante berekeningen en opties zichtbaar maakt; het oordeel ligt in de mens ✔
- D) Een precisie-instrument dat het script overbodig maakt
Toelichting: Het scenario is geen voorspelling, maar een voorwaardelijke 'als-dan'-oefening gebaseerd op expliciete aannames. AI is een versneller bij het vertalen van aannames naar spreadsheets en het zichtbaar maken van opties; Het eigendom van de aannames, de redelijkheid ervan en het uiteindelijke oordeel berusten echter bij de econoom.
7. AI gebruikt sterke causale taal zoals 'X verhoogt Y' bij het interpreteren van een regressie-uitvoer. Wat is het juiste econoomantwoord?
- A) Het accepteren van de causale taal zoals die is
- B) Corrigeer de taal door de risico's van weggelaten variabelen/endogeniteit te controleren en het feit te corrigeren dat een relatie geen causaliteit betekent.
- C) Regressie volledig weggooien
- D) Ervan uitgaande dat causaliteit bewezen is als R-kwadraat hoog is
Uitleg: Regressie meet vooral de relatie (correlatie); Causaliteit kan alleen worden geclaimd onder de juiste opzet (experiment, instrumentele variabele, natuurlijk experiment, enz.) en aannames. Er zijn risico's van weggelaten variabelen, endogeniteit en omgekeerde causaliteit. De econoom moet dit buitensporige causale taalgebruik beteugelen en de omstandigheden in twijfel trekken.
8. Je hebt kunstmatige intelligentie een literatuursamenvatting over een economisch onderwerp laten maken, en de tekst bevat verwijzingen als '(Yılmaz, 2019)'. Wat moet je eerst doen?
- A) De citaten in het rapport plaatsen zoals ze zijn
- B) Er vanuit gaan dat de kwaliteit goed is alleen maar omdat er veel citaten zijn
- C) Kijk alleen maar naar de consistentie van publicatiejaren
- D) Verifieer vanuit de originele bron dat elke referentie daadwerkelijk bestaat en de bevinding bevat ✔
Toelichting: Kunstmatige intelligentie kan bronnen en referenties opleveren die in werkelijkheid niet bestaan (hallucinatie). Van elke verwijzing moet vanuit de oorspronkelijke bron worden geverifieerd dat deze daadwerkelijk bestaat, dat de toeschrijving correct is en dat deze daadwerkelijk de geclaimde bevinding bevat. Niet-geverifieerde toeschrijving is een academisch en professioneel risico.
9. Wat is de meest eerlijke manier om onzekerheid over te brengen in een openbaar economisch rapport?
- A) Eén enkel nauwkeurig getal geven en de onzekerheid helemaal niet vermelden
- B) Het worstcasescenario verbergen en alleen het optimistische getal geven
- C) Vermeld duidelijk het prognosebereik, de scenario's en de onderliggende aannames ✔
- D) Onzekerheid wegnemen door te zeggen ‘het is ingewikkeld’
Uitleg: Onzekerheid is onvermijdelijk bij economische voorspellingen en analyses. Het duidelijk vermelden van marges, scenario's en aannames in plaats van één exact getal is eerlijke communicatie. Het verbergen van dubbelzinnigheid misleidt de lezer en ondermijnt de geloofwaardigheid van de organisatie.
10. Wanneer een grafiek de bbp-groei weergeeft, begint de verticale as op 2% in plaats van op 0%. Waarom zou dit misleidend kunnen zijn?
- A) De gestippelde as kan kleine verschillen overdrijven en de verandering groter maken dan deze is ✔
- B) Waar de as begint, heeft geen enkele invloed op de grafiek
- C) De grafiek wordt automatisch nauwkeuriger
- D) Alleen kleurselectie is belangrijk, as is onbelangrijk
Uitleg: Een gestippelde as (niet beginnend bij nul) kan kleine verschillen visueel vergroten en de verandering dramatisch doen lijken. Bij eerlijke visualisatie mag de keuze van de as de boodschap niet vertekenen; Indien een gestippelde as wordt gebruikt, moet deze duidelijk gemarkeerd zijn.
11. Een denktankanalist stopt marktgevoelige gegevens die nog niet openbaar zijn gemaakt in een openbare (niet-ondernemings) AI-tool. Wat is het belangrijkste risico?
- A) Er is geen risico, de gegevens zijn al numeriek
- B) Het enige risico is dat de grafiek verkeerd blijkt te zijn
- C) Kunstmatige intelligentie verwerkt gegevens zeer langzaam
- D) Risico op datalekken, verwerking door derden en schending van privacy/marktregels ✔
Openbaarmaking: het invoeren van vertrouwelijke of marktgevoelige gegevens in een openbare tool brengt het risico met zich mee dat de gegevens door derden worden verwerkt, gelekt of gebruikt om het model te trainen; Dit brengt zowel een schending van de privacy/KVKK met zich mee als een risico op marktmanipulatie en voorkennis. Gevoelige gegevens moeten worden verwerkt in door de instelling goedgekeurde, veilige tools en indien nodig worden geanonimiseerd.
12. De cijfers van dezelfde indicator uit twee verschillende bronnen (TURKSTAT en een internationale organisatie) komen niet overeen. Wat is de meest waarschijnlijke onschuldige verklaring?
- A) Eén van de bronnen liegt absoluut
- B) Er kan een verschil zijn in definitie, basisjaar, reikwijdte, seizoensaanpassing of herziening; metadata moeten op één lijn liggen ✔
- C) Het verschil in aantallen is onbelangrijk, het gemiddelde nemen ervan is voldoende
- D) Het is voldoende om de kunstmatige intelligentie te vragen en deze te laten kiezen welke de juiste is.
Toelichting: Het verschil in dezelfde indicator in verschillende bronnen is meestal te wijten aan verschillen in definitie, basisjaar, reikwijdte, seizoensaanpassing of herziening (versie). Metadata (definitie, eenheid, periode, correctie) moeten op één lijn worden gebracht voordat cijfers worden vergeleken.
13. Welke van de volgende is een taak waarbij AI STERK is in economische analyse en versnelt met menselijke validatie?
- A) Om alleen al het officiële inflatiecijfer definitief goed te keuren
- B) Het nemen van monetairbeleidsbeslissingen in plaats van de instelling
- C) Versnel taken zoals het opstellen van code voor het opschonen van gegevens en het samenvatten van lange rapporten ✔
- D) Het plaatsen van de niet-geverifieerde gok in het openbare rapport
Omschrijving: Kunstmatige intelligentie; Sterk in mechanische en tekentaken zoals het opstellen van code, het samenvatten van lange rapporten, het voorstellen van stappen voor het opschonen van gegevens, het corrigeren van opmaak en taalgebruik. De uiteindelijke verantwoordelijkheid voor voorspellingen, beleidsbeslissingen en productie van officiële cijfers ligt echter bij de mens. Het juiste gebruik is om te versnellen waar het sterk is en het kritische oordeel in de persoon te houden.
14. Wat is de meest geschikte bestuurspraktijk om ervoor te zorgen dat de output van kunstmatige intelligentie binnen een instelling wordt gemonitord en gecontroleerd?
- A) Breng een traceerbaarheids- en goedkeuringsketen tot stand waarin de verzoeken, het gereedschap, de gegevens en de verificatiestappen worden vastgelegd ✔
- B) De outputs helemaal niet registreren, zodat de werkdruk niet toeneemt
- C) Iedereen kan vrijelijk het voertuig gebruiken dat hij of zij wil, met de gewenste gegevens.
- D) Alleen de hoogste persoon maakt gebruik van kunstmatige intelligentie, er worden geen gegevens bijgehouden
Omschrijving: Goed bestuur; Het vereist vastleggen welke output met welk verzoek, met welke tool, met welke gegevens is geproduceerd, een verificatiestap en een verantwoorde goedkeuringsketen. Deze discipline van het vastleggen en erkennen maakt het mogelijk om fouten terug te traceren en de verantwoordelijkheid te verduidelijken.