одиниця 11 / 11

Межі, модельний ризик, етика, конфіденційність і управління

Прибуток:

  • Здатність систематично складати перелік основних обмежень штучного інтелекту в економічному аналізі (фабрикація, кінцева дата даних, сліпота причинно-наслідкових зв’язків, структурний розрив)
  • Можливість налагодити безпечне використання та робочий процес, сумісний із KVKK, який захищає конфіденційні дані, ринкову інформацію та особисті дані
  • Здатність розробляти та впроваджувати структуру управління ШІ на рівні підприємства (реєстрація, перевірка, підзвітність, ланцюжок затвердження)

Модульний екзамен

1. Керівник центрального банку поміщає створений штучним інтелектом прогноз інфляції безпосередньо в офіційну політичну записку без будь-якої перевірки. У чому принципова помилка такого підходу?

  • A) Перетворення вихідних даних штучного інтелекту в рішення без підключення до джерела, перерахунку та проходження економічної перевірки; Ігнорування того, що відповідальність лежить на людях ✔
  • Б) Суворо заборонено використовувати штучний інтелект в економічних прогнозах
  • В) Штучний інтелект завжди показує інфляцію нижче, ніж вона є
  • D) Прогноз не представлений у вигляді графіка

Опис: Штучний інтелект створює статистичну схему; але відповідальність за прогнозування та зміст офіційного аналітичного запису покладається на компетентного економіста та установу. Неперевірений результат такий же ризикований, як і непідписаний звіт; Номер має бути прив’язаний до першоджерела, перерахований і пропущений через економічний фільтр.

2. Який найбезпечніший підхід, коли ви запитуєте штучний інтелект: «Дайте мені цифру дефіциту поточного рахунку для Туреччини у 2024 році»?

  • А) Довіряйте числу, наданому штучним інтелектом, і використовуйте його безпосередньо
  • B) Підтвердження цифри з офіційної публікації платіжного балансу CBRT і перевірка дати/одиниці ✔
  • C) Отримання номера з випадкового сайту новин в Інтернеті
  • Г) Ігнорування числа, оскільки воно все одно зміниться

Пояснення: число, надане штучним інтелектом, може бути старшим за кінцеву дату даних навчання або може бути вигаданим (галюцинація). Єдиним точним джерелом економічних даних є офіційне видання; У цьому прикладі це статистика платіжного балансу CBRT. Номер повинен бути підтверджений з першоджерела.

3. Аналітик надає штучному інтелекту необроблені ряди ІСЦ і каже «обчисліть реальне зростання». Що з наведеного нижче є правильною поведінкою перевірки?

  • А) Додавання результату до звіту без його читання
  • B) Просто дивлячись на те, чи результат «здається розумним»
  • C) Перевірте результат, прочитавши згенеровану формулу/код і вручну обчисливши принаймні один період ✔
  • D) Запитайте штучний інтелект: "Ви впевнені?" і бути задоволеним відповіддю «так»

Пояснення: у стандартних економічних розрахунках, таких як перетворення реального в номінальний, штучний інтелект може використовувати не правильну формулу або переплутати базовий рік. Аналітик повинен прочитати згенерований код і формулу, вручну розрахувати принаймні одне спостереження та порівняти результат. Перевага надається прозорій, зрозумілій бухгалтерії.

4. Чому в прогнозуванні часових рядів проводиться «ретроспективне тестування»?

  • A) Щоб показати, наскільки «добре» модель відповідає історичним даним
  • B) Щоб автоматично завершити кошторис
  • C) Щоб прикрасити дані
  • D) Виміряти реальний успіх прогнозування шляхом тестування моделі в попередні періоди, коли вона не була в навчанні ✔

Опис: Backtest вимірює, наскільки добре модель прогнозує минулі періоди, про які вона не знає; Він захищає модель від пастки переобладнання, переглядаючи лише ті дані, які вона відповідає. Це необхідна умова для зручності використання моделі в реальному світі.

5. Що таке «базовий ефект» у коментарях щодо інфляції та чому він потребує уваги?

  • A) На річну зміну впливає найнижчий/максимальний показник минулорічного періоду порівняння ✔
  • Б) Інфляція завжди зростає
  • C) Базова інфляція є вищою за базову
  • Г) Сезонне коригування цін

Пояснення: Базовий ефект полягає в тому, що на річну швидкість зміни впливають минулорічний (базовий) низький або високий рівень, а також розвиток цього року. Зниження загальної річної інфляції може бути наслідком високої бази минулого року, а не реальним уповільненням. Цей підводний камінь часто не помічається в резюме ШІ.

6. Як можна найбільш точно визначити роль штучного інтелекту в сценарному дослідженні?

  • А) Провидець, який точно знає майбутнє
  • B) Особа, яка приймає остаточне рішення, яка самостійно визначає припущення
  • C) Помічник, який перетворює очевидні припущення на прозорі розрахунки та робить варіанти видимими; судження в людині ✔
  • D) Інструмент точності, який робить сценарій непотрібним

Пояснення: сценарій — це не передбачення, а умовна вправа «якщо-тоді», заснована на явних припущеннях. AI є прискорювачем у перекладі припущень в електронні таблиці та робить варіанти видимими; Проте право власності на припущення, їх обґрунтованість і остаточне судження належить економісту.

7. ШІ використовує чітку причинно-наслідкову мову, наприклад «X збільшує Y», коли інтерпретує результат регресії. Яка правильна відповідь економіста?

  • А) Прийняття причинної мови такою, якою вона є
  • B) Виправте мову, перевіривши ризики пропущених змінних/ендогенності та виправивши той факт, що зв’язок не означає причинно-наслідкового зв’язку.
  • C) Повністю відкинути регресію
  • D) Припущення, що причинність доведена, якщо R-квадрат високий

Пояснення: регресія здебільшого вимірює зв’язок (кореляцію); Причинно-наслідковий зв’язок можна стверджувати лише за відповідного дизайну (експеримент, інструментальна змінна, природний експеримент тощо) і припущень. Існують ризики пропущених змінних, ендогенності та зворотньої причинності. Економіст повинен стримувати цю надмірну причинно-наслідкову мову та ставити під сумнів умови.

8. Ви доручили штучному інтелекту підготувати короткий виклад літератури на економічну тему, і в тексті наведені посилання на кшталт «(Yılmaz, 2019)». Що потрібно зробити в першу чергу?

  • A) Розміщення цитат у звіті такими, якими вони є
  • B) Припущення хорошої якості лише тому, що є багато цитат
  • C) Просто дивлячись на послідовність років публікації
  • D) Перевірте з першоджерела, що кожне посилання насправді існує та містить знахідку ✔

Пояснення: Штучний інтелект може створювати джерела та посилання, яких насправді не існує (галюцинації). Кожне посилання має бути перевірено з оригінального джерела, що воно дійсно існує, що його авторство є правильним і що воно дійсно містить заявлену знахідку. Неперевірене присвоєння авторства є академічним і професійним ризиком.

9. Який найчесніший спосіб передати невизначеність у публічному економічному звіті?

  • A) Вказати одну точну цифру й узагалі не згадати про невизначеність
  • B) Приховування найгіршого сценарію та надання лише оптимістичного числа
  • C) Чітко вкажіть діапазон прогнозу, сценарії та основні припущення ✔
  • D) Відкинути невизначеність, сказавши «це складно»

Пояснення: невизначеність неминуча в економічному прогнозуванні та аналізі. Чесним спілкуванням є чітке визначення діапазонів, сценаріїв і припущень, а не однієї точної цифри. Приховування двозначності вводить читача в оману та підриває довіру до організації.

10. Коли діаграма показує зростання ВВП, вертикальна вісь починається з 2%, а не з 0%. Чому це може ввести в оману?

  • A) Пунктирна вісь може перебільшити невеликі відмінності та зробити зміну більшою, ніж вона є ✔
  • B) Початок осі не впливає на графік взагалі
  • В) Графік автоматично стає більш точним
  • Г) Важливий лише вибір кольору, вісь неважлива

Пояснення: пунктирна вісь (не починаючи з нуля) може візуально збільшити невеликі відмінності та зробити зміну драматичною. У чесній візуалізації вибір осі не повинен спотворювати повідомлення; Якщо використовується пунктирна вісь, вона повинна бути чітко позначена.

11. Аналітик мозкового центру вставляє чутливі до ринку дані, які ще не були оприлюднені, у загальнодоступний (некорпоративний) інструмент ШІ. Який ключовий ризик?

  • A) Ризику немає, дані вже числові
  • B) Єдиний ризик полягає в тому, що графік виявиться неправильним
  • В) Штучний інтелект дуже повільно обробляє дані
  • D) Ризик витоку даних, обробки третіми сторонами та порушення правил конфіденційності/ринку ✔

Розголошення: введення конфіденційних або чутливих до ринку даних у загальнодоступний інструмент створює ризик обробки даних третіми сторонами, витоку чи використання для навчання моделі; Це створює як порушення конфіденційності/KVKK, так і ризик маніпулювання ринком та інсайдерської інформації. Конфіденційні дані слід обробляти за допомогою схвалених установою безпечних інструментів і, за необхідності, анонімізувати.

12. Цифри одного показника, взяті з двох різних джерел (ТУРКСТАТ і міжнародна організація), не збігаються. Яке найвірогідніше невинне пояснення?

  • А) Одне з джерел точно бреше
  • B) Можлива різниця у визначенні, базовому році, сфері застосування, сезонному коригуванні чи перегляді; метадані повинні бути вирівняні ✔
  • C) Різниця в числах неважлива, достатньо взяти їх середнє значення
  • Г) Достатньо запитати штучний інтелект і дозволити йому вибрати, який із них правильний.

Пояснення: Різниця в тому самому показнику в різних джерелах здебільшого пов’язана з відмінностями у визначенні, базовому році, масштабі, сезонному коригуванні або перегляді (версії). Метадані (визначення, одиниця вимірювання, період, виправлення) необхідно вирівняти перед порівнянням цифр.

13. Що з наведеного нижче є завданням, де штучний інтелект СИЛЬНИЙ в економічному аналізі, прискорюючи перевірку людиною?

  • А) Лише остаточно затвердити офіційну цифру інфляції
  • B) Прийняття рішень щодо монетарної політики замість установи
  • C) Прискорити виконання таких завдань, як складання коду очищення даних і узагальнення довгих звітів ✔
  • D) Розміщення неперевіреного припущення в публічному звіті

Опис: Штучний інтелект; Сильний у механічних і чернеткових завданнях, таких як складання коду, узагальнення довгого звіту, пропозиція кроків очищення даних, виправлення форматування та мови. Однак основна відповідальність за прогнозування, політичні рішення та отримання офіційних цифр лежить на людях. Правильним використанням є прискорення там, де воно сильніше, і збереження критичного судження в людині.

14. Яка практика управління є найбільш прийнятною для забезпечення моніторингу та аудиту результатів штучного інтелекту в установі?

  • A) Встановіть ланцюжок відстеження та затвердження, який записує запит, інструмент, дані та етапи перевірки ✔
  • B) Не записувати результати взагалі, щоб не збільшити навантаження
  • C) Кожен може вільно використовувати потрібний транспортний засіб із потрібними даними.
  • D) Штучний інтелект використовує тільки найстарша особа, записи не ведуться

Опис: Раціональне управління; Для цього потрібно записати, який результат було створено з яким запитом, за допомогою якого інструменту, за допомогою яких даних, етап перевірки та відповідальний ланцюжок затвердження. Ця дисципліна запису та підтвердження дозволяє відстежувати помилки та з’ясовувати відповідальність.