Unité 11 / 11

Limites, risque de modèle, éthique, confidentialité et gouvernance

Gains :

  • Capacité à lister systématiquement les principales limites de l'intelligence artificielle dans l'analyse économique (fabrication, date butoir des données, cécité de causalité, rupture structurelle)
  • Capacité à établir une utilisation sécurisée et un flux de travail conforme au KVKK qui protège les données confidentielles, les informations sensibles du marché et les données personnelles
  • Capacité à concevoir et à mettre en œuvre un cadre de gouvernance de l'IA au niveau de l'entreprise (enregistrement, vérification, responsabilité, chaîne d'approbation)

Examen de module

1. Un banquier central insère une prévision d’inflation générée par l’IA directement dans une note de politique officielle sans aucune vérification. Quelle est l’erreur fondamentale de cette approche ?

  • A) Transformer le résultat de l'intelligence artificielle en décision sans le relier à la source, le recalculer et subir une vérification économique ; Ignorer que la responsabilité incombe aux gens ✔
  • B) Il est strictement interdit d'utiliser l'intelligence artificielle dans les prévisions économiques
  • C) L’intelligence artificielle montre toujours une inflation inférieure à ce qu’elle est
  • D) La prédiction n'est pas présentée sous forme de graphique

Description : L'intelligence artificielle produit un aperçu statistique ; mais la responsabilité des prévisions et du contenu d’une note d’orientation formelle incombe à l’économiste compétent et à l’institution. Une sortie non vérifiée est aussi risquée qu’un rapport non signé ; Le numéro doit être lié à la source originale, recalculé et passé par un filtre économique.

2. Quelle est l'approche la plus sûre lorsque vous demandez à l'intelligence artificielle : « Donnez-moi le chiffre du déficit du compte courant de la Turquie en 2024 » ?

  • A) Faites confiance au numéro donné par l’intelligence artificielle et utilisez-le directement
  • B) Confirmer le chiffre de la publication officielle de la balance des paiements de la CBRT et vérifier la date/unité ✔
  • C) Obtenir le numéro sur un site d'information aléatoire sur Internet
  • D) Ignorer le numéro car il changera de toute façon

Explication : Le numéro donné par l'intelligence artificielle peut être plus ancien que la date limite des données d'entraînement ou peut être inventé (hallucination). La seule source précise de données économiques est la publication officielle ; Dans cet exemple, il s’agit des statistiques de balance des paiements de la CBRT. Le numéro doit être confirmé à partir de la source originale.

3. Un analyste donne des séries brutes d'IPC à l'intelligence artificielle et dit « calculer la croissance réelle ». Lequel des énoncés suivants constitue un comportement de validation correct ?

  • A) Ajouter le résultat au rapport sans le lire
  • B) Il suffit de vérifier si le résultat « semble raisonnable »
  • C) Vérifiez le résultat en lisant la formule/code généré et en calculant manuellement au moins une période ✔
  • D) Demandez à l'intelligence artificielle « êtes-vous sûr ? » et être satisfait de la réponse « oui »

Explication : Dans les calculs économiques standard tels que la conversion réelle-nominale, l'IA peut ne pas utiliser la formule correcte ou confondre l'année de base. L'analyste doit lire le code et la formule générés, calculer manuellement au moins une observation et comparer le résultat. Une comptabilité transparente et explicable est préférable.

4. Pourquoi un « backtesting » est-il effectué dans les prévisions de séries chronologiques ?

  • A) Pour montrer à quel point le modèle s'adapte aux données historiques
  • B) Pour finaliser automatiquement le devis
  • C) Pour embellir les données
  • D) Mesurer le succès réel de la prédiction en testant le modèle au cours des périodes précédentes lorsqu'il n'était pas en formation ✔

Description : le backtest mesure dans quelle mesure le modèle prédit sur des périodes passées qu'il ne connaît pas ; Il protège le modèle du piège du surajustement en examinant uniquement les données auxquelles il correspond. C’est une condition préalable à l’utilisabilité du modèle dans le monde réel.

5. Qu'est-ce que « l'effet de base » dans les commentaires sur l'inflation et pourquoi faut-il y prêter attention ?

  • A) La variation annuelle est affectée par le plus bas/le plus haut de la période de comparaison de l'année dernière ✔
  • B) L’inflation augmente toujours
  • C) L’inflation sous-jacente est supérieure au chiffre global
  • D) Désaisonnalisation des prix

Explication : L'effet de base est que le taux de variation annuel est affecté par le plus bas ou le plus haut (de base) de l'année dernière ainsi que par l'évolution de cette année. Une baisse de l'inflation globale annuelle pourrait être due au niveau de base élevé de l'année dernière et non à un véritable ralentissement. Cet écueil est souvent négligé dans les résumés d’IA.

6. Comment définir le plus précisément possible le rôle de l’intelligence artificielle dans une étude de scénario ?

  • A) Un voyant qui connaît l'avenir avec certitude
  • B) Le décideur final qui détermine lui-même les hypothèses
  • C) Un assistant qui transforme des hypothèses évidentes en calculs transparents et rend les options visibles ; le jugement est dans l'homme ✔
  • D) Un outil de précision qui rend le script inutile

Explication : Le scénario n'est pas une prédiction, mais un exercice conditionnel « si-alors » basé sur des hypothèses explicites. L’IA est un accélérateur pour traduire les hypothèses en feuilles de calcul et rendre les options visibles ; Cependant, la propriété des hypothèses, leur caractère raisonnable et leur jugement final appartiennent à l'économiste.

7. L'IA utilise un langage causal fort tel que « X augmente Y » lors de l'interprétation d'un résultat de régression. Quelle est la bonne réponse de l’économiste ?

  • A) Accepter le langage causal tel qu’il est
  • B) Corrigez le langage en vérifiant les risques d'omission de variables/endogénéité et en corrigeant le fait que relation ne signifie pas causalité.
  • C) Supprimer complètement la régression
  • D) En supposant que la causalité soit prouvée si le R au carré est élevé

Explication : La régression mesure principalement la relation (corrélation) ; La causalité ne peut être affirmée que dans le cadre d’une conception (expérience, variable instrumentale, expérience naturelle, etc.) et d’hypothèses appropriées. Il existe des risques d’omission de variables, d’endogénéité et de causalité inverse. L’économiste doit freiner ce langage causal excessif et remettre en question les conditions.

8. Vous avez demandé à l'intelligence artificielle de préparer un résumé de la littérature sur un sujet économique, et le texte donne des références telles que « (Yılmaz, 2019) ». Que devez-vous faire en premier ?

  • A) Mettre les citations dans le rapport telles quelles
  • B) En supposant une bonne qualité simplement parce qu'il existe de nombreuses citations
  • C) Il suffit de regarder la cohérence des années de publication
  • D) Vérifiez à partir de la source originale que chaque référence existe réellement et contient la découverte ✔

Explication : L’intelligence artificielle peut produire des sources et des références qui n’existent pas réellement (hallucination). Chaque référence doit être vérifiée à partir de la source originale qu'elle existe réellement, que son attribution est correcte et qu'elle contient effectivement la découverte revendiquée. L'attribution non vérifiée constitue un risque académique et professionnel.

9. Quelle est la manière la plus honnête d’exprimer l’incertitude dans un rapport économique public ?

  • A) Donner un seul chiffre précis et ne pas mentionner du tout l'incertitude
  • B) Cacher le pire des cas et donner uniquement le chiffre optimiste
  • C) Énoncez clairement la fourchette de prévision, les scénarios et les hypothèses sous-jacentes ✔
  • D) Éliminer l'incertitude en disant « c'est compliqué »

Explication : L’incertitude est inévitable dans les prévisions et analyses économiques. Énoncer clairement les plages, les scénarios et les hypothèses plutôt qu’un seul chiffre exact constitue une communication honnête. Cacher l’ambiguïté induit le lecteur en erreur et mine la crédibilité de l’organisation.

10. Lorsqu'un graphique montre la croissance du PIB, l'axe vertical commence à 2 % au lieu de 0 %. Pourquoi cela pourrait-il être trompeur ?

  • A) L'axe pointillé peut exagérer les petites différences et rendre le changement plus important qu'il ne l'est ✔
  • B) Le point de départ de l'axe n'affecte pas du tout le graphique
  • C) Le graphique devient automatiquement plus précis
  • D) Seule la sélection des couleurs est importante, l'axe n'a pas d'importance

Explication : Un axe en pointillés (ne partant pas de zéro) peut grossir visuellement de petites différences et donner l'impression que le changement est spectaculaire. Dans une visualisation honnête, le choix de l’axe ne doit pas déformer le message ; Si un axe en pointillés est utilisé, il doit être clairement marqué.

11. Un analyste d’un groupe de réflexion intègre des données sensibles au marché qui n’ont pas encore été rendues publiques dans un outil d’IA public (non professionnel). Quel est le risque principal ?

  • A) Il n'y a aucun risque, les données sont déjà numériques
  • B) Le seul risque est que le graphique s'avère faux
  • C) L'intelligence artificielle traite les données très lentement
  • D) Risque de fuite de données, de traitement par des tiers et de violation des règles de confidentialité/du marché ✔

Divulgation : la saisie de données confidentielles ou sensibles au marché dans un outil public crée le risque que les données soient traitées par des tiers, divulguées ou utilisées pour entraîner le modèle ; Cela pose à la fois une violation de la vie privée/KVKK et un risque de manipulation de marché et d'informations privilégiées. Les données sensibles doivent être traitées dans des outils sécurisés approuvés par l’institution et anonymisées si nécessaire.

12. Les chiffres du même indicateur tirés de deux sources différentes (TURKSTAT et une organisation internationale) ne concordent pas. Quelle est l’explication innocente la plus probable ?

  • A) L’une des sources ment définitivement
  • B) Il peut y avoir une différence dans la définition, l'année de référence, la portée, la désaisonnalisation ou la révision ; les métadonnées doivent être alignées ✔
  • C) La différence des nombres n'a pas d'importance, prendre leur moyenne suffit
  • D) Il suffit de demander à l’intelligence artificielle et de la laisser choisir laquelle est la bonne.

Explication : La différence entre un même indicateur dans différentes sources est principalement due à des différences de définition, d'année de base, de champ d'application, de désaisonnalisation ou de révision (version). Les métadonnées (définition, unité, période, correction) doivent être alignées avant de comparer les chiffres.

13. Parmi les tâches suivantes, laquelle est une tâche pour laquelle l'IA est FORTE en analyse économique, s'accélérant avec la validation humaine ?

  • A) Donner l’approbation définitive du seul chiffre officiel de l’inflation
  • B) Prendre des décisions de politique monétaire à la place de l’institution
  • C) Accélérer les tâches telles que la rédaction du code de nettoyage des données et la synthèse de longs rapports ✔
  • D) Mettre la supposition non vérifiée dans le rapport public

Description : Intelligence artificielle ; Fort dans les tâches mécaniques et de rédaction telles que la rédaction de code, la synthèse de longs rapports, la suggestion d'étapes de nettoyage des données, la correction du formatage et du langage. Cependant, la responsabilité ultime des prévisions, des décisions politiques et de la production des chiffres officiels incombe aux humains. Le bon usage est d’accélérer là où il est fort et de garder le jugement critique chez la personne.

14. Quelle est la pratique de gouvernance la plus appropriée pour garantir que les résultats de l’intelligence artificielle sont surveillés et audités dans une institution ?

  • A) Établir une chaîne de traçabilité et d'approbation qui enregistre la demande, l'outil, les données et les étapes de vérification ✔
  • B) Ne pas enregistrer du tout les sorties afin que la charge de travail n'augmente pas
  • C) Chacun peut utiliser librement le véhicule de son choix avec les données qu'il souhaite.
  • D) Seule la personne la plus expérimentée utilise l'intelligence artificielle, aucun enregistrement n'est conservé

Description : Saine gouvernance; Cela nécessite d'enregistrer quel résultat a été produit avec quelle demande, avec quel outil, avec quelles données, une étape de vérification et une chaîne d'approbation responsable. Cette discipline d’enregistrement et de reconnaissance permet de retracer les erreurs et de clarifier les responsabilités.