Јединица 4 / 11

Пословна интелигенција (БИ), дизајн извештаја и метрика

Добици:

  • Способност да се објасне слојеви пословне интелигенције (извор, ЕТЛ, складиште података, извештај) и тачна дефиниција кључних пословних метрика (КПИ).
  • Способност коришћења вештачке интелигенције за израду метричке дефиниције, СКЛ нацрт и нарацију извештаја и пружање резултата са стварним подацима
  • Способност препознавања ризика од конфузије корелације-узрочности и обмањујућих метрика у резултатима анализе подржане АИ

Пословна интелигенција (БИ) је дисциплина која прикупља дисперзоване податке организације, чини их спремним за анализу и производи информације које подржавају одлучивање из ових података. За МИС професионалца, БИ је слој где се „подаци претварају у одлуке“. Необрађени записи о поруџбини сами по себи немају смисла; али "у ком региону се промет смањио овог месеца, зашто?" Он производи вредност када постане извештај који може да одговори на питање. У овој јединици видећемо слојеве БИ, прави метрички дизајн и где је вештачка интелигенција акцелератор и замка у овом процесу.

БИ архитектура се генерално састоји од следећих слојева. Изворни системи: Места одакле подаци потичу, као што су ЕРП, ЦРМ, е-трговина. ЕТЛ процес (енглески Ектрацт-Трансформ-Лоад): Процес који издваја податке из извора (Ектрацт), чисти их и претвара у стандардну структуру (Трансформ) и учитава их у циљ (Лоад). Складиште података: Централно складиште где се прикупљају историјски и доследни подаци дизајнирани за анализу. Слој извештавања/визуелизације: контролне табле, извештаји и ад-хоц упити. У овом ланцу, квалитет сваког слоја одређује следећи; Ако је извор прљав, прљав је и извештај.

Исправно дефинисање метрика и КПИ-ја

Метрика је измерена нумеричка вредност: укупан промет, број поруџбина. КПИ (Кључни индикатор учинка) је критична метрика која мери учинак у односу на циљ: „месечна стопа одлива купаца испод 5%“. Није свака метрика КПИ; КПИ је метрика која је повезана са пословним циљем и покреће одлуку.

Најподмуклији проблем БИ пројеката је нејасна дефиниција метрике. Шта значи „активан купац“? Наручили сте у последњих 30 или 90 дана? Да ли се броје повратници? Ако два тима подразумевају различите ствари под „бројем активних купаца“, иста контролна табла показује две различите чињенице. Зато сваки КПИ треба да има једну реченицу, широко прихваћену дефиницију. АИ брзо производи нацрте ових дефиниција; али је на пословној јединици да одлучи која је дефиниција „тачна“.

Савет: Када дизајнирате КПИ, запишите три ствари: (1) формулу (шта је тачно бројилац/именилац), (2) временски оквир, (3) изузети случајеви. Када АИ каже „издвоји нејасноће у дефиницији овог КПИ-а као питања“ открива скривене претпоставке.

Корак по корак: генерисање извештаја помоћу вештачке интелигенције

Корак 1 — Разјасните питање. Којој одлуци ће послужити извештај? Конкретан циљ типа „ми ћемо одлучити у који регион ћемо пребацити буџет“, а не „треба да изгледа лепо“.

Корак 2 — Дефинишите метрику. Напишите потребне КПИ са формулама, прозорима и изузецима. Вештачка интелигенција може да произведе нацрт дефиниција.

Корак 3 — Генеришите СКЛ нацрт. Дајте информације о шеми вештачкој интелигенцији и направите нацрт упита. Али прочитајте и разумејте упит пре него што га покренете.

Корак 4 — Потврдите са малим подацима. Прво покрените упит на малом узорку са познатим резултатима; Ручно проверите укупне вредности. АИ СКЛ може бити синтаксички исправан, али логички нетачан.

Корак 5 — Додајте нарацију, тестне тврдње. АИ може произвести наративни текст за извештај; али доказати сваку узрочну тврдњу („зато је пала продаја“).

Замка корелације и узрочности

Најопаснија грешка у БИ је тумачење две метрике које делују заједно као „једна ствара другу“. Корелација је када се две вредности мењају заједно; Узрочност је када једно узрокује друго. Реченица „Како је расла продаја сладоледа, повећавали су се случајеви дављења” је тачна, али сладолед не изазива утапање; Уобичајени узрок је лето (вруће време). Вештачка интелигенција може лако да прави узрочне реченице када прави нарацију извештаја; Стручњак МИС-а на ове тврдње одговара питањем "има ли још неко објашњење?" Требало би да га тестира. У супротном, погрешна одлука ће бити донета на основу погрешног разлога.

Три мини случаја: према бројевима

Случај 1 — Цена недефинисане метрике. У једној телеком компанији, број „активних претплатника” представљен управном одбору био је 2,1 милион, а извештај финансијског тима био је 1,7 милиона. Разлика је била у томе што је један бројао 90 дана као „активан“, док је други бројао 30 дана. Две недеље се расправљало о погрешној стопи раста док се заједничка дефиниција није разјаснила. Дефиниција КПИ од једне реченице би избегла ову забуну.

Случај 2 — АИ је погрешан СКЛ. Код једног продавца, АИ је додао повратне линије укупној вредности када је генерисао упит „просечна корпа по купцу“; Резултат је био 12% изнад стварне вредности. СКЛ је био синтактички савршен. Када је стручњак ручно верификовао познати укупан број дана, ухватио је одступање и додао филтер поврата.

Случај 3 — Грешка узрочности. У компанији за е-трговину, на контролној табли је писало „продаја је 18% већа на дане када се шаље кампања путем е-поште“ и тим је био на путу да повећа буџет кампање. Анализа је показала да су кампање већ биле темпиране тако да се поклопе са данима кампање са великим прометом (периоди снижења). То је био период, а не е-пошта, који је подстакао продају. Ако би се буџет повећао без тестирања са контролном групом, новац би био бачен.

Слаба порука / јака промпт

Слабо обавештење:

Напишите СКЛ извештај о продаји из ове табеле.

Снажан упит:

Ваша улога: Ви сте пажљив БИ аналитичар. Напишите НАЦРТ СКЛ упита према дијаграму испод. Правила: - Користите само дате табеле/поља; поље које се не уклапа.- ИЗУЗИМАЊЕ враћа (статус='Поврат') из укупног.- Временски оквир: последњих 30 дана.- Коментаришите ред по ред шта ради упит.- Предложите 1 узорак линију који се може ручно потврдити за тестирање на крају.Схема:Ордер(ид, цустомер_ид, дате, амоунт) (статус)П ласт сегментур наме,Цусто промет по сегментима.

Моћни промпт ограничава шему, намеће пословно правило (искључујући повратак), одређује прозор и захтева проверљив излаз.

Четири шаблона за копирање

1) Појашњење дефиниције КПИ:

Напишите пун опис за следеће КПИ: формула (бројилац/именилац), временски оквир, изузети случајеви. Додајте било какву нејасноћу у дефиницију као питање.КПИ: [име, нпр. „стопа одлива клијената“]

2) СКЛ логичка провера:

Испитајте следећи СКЛ упит: да ли постоји ризик од логичких грешака, нетачних ЈОИН-ова, недостајућих филтера или двоструког бројања? Напишите оправдање за сваки налаз. Не мењајте упит, само га проверите. СКЛ: [упит]

3) Извештај нарације + контрола потраживања:

Напишите кратак резиме из табеле резултата испод. Означите [ПОТРЕБАН ДОКАЗ] поред сваке узрочне тврдње и предложите алтернативно објашњење. Само се ослоните на податке у табели. Табела: [подаци]

4) Провера доследности метрике:

У два извештаја у наставку, показатељи са истим именом дају различите вредности. Наведене су могуће разлике у дефиницији (временски прозор, филтер, прорачун). Извештаји: [А] [Б]

Упоредни графикон: добар и лош КПИ

карактеристика

Лош КПИ

Добар КПИ

Опис

"Активни купац"

„Клијент са ≥1 завршеном поруџбином у последњих 30 дана“

веза са метом

Ниједан

„Останак испод стопе губитка од 5%“

мерљивост

двосмислено

формула јасна

изузетак

неизвесно

Искључујући поврате

Да ли то покреће одлуку?

бр

Да

Уобичајене грешке

  • Остављајући метрику недефинисану. Ако се речи попут „активан“, „успешан“, „завршен“ користе без формуле, сваки тим се рачуна другачије.
  • Покретање АИ СКЛ-а без верификације. Синтаксички исправан упит може бити логички нетачан; двоструко бројање и нетачан ЈОИН су уобичајени.
  • Збуњујућа корелација са узрочности. Размишљање да се „с тим повећало“ значи „ово је изазвало оно“ довело би до погрешне одлуке.
  • Ванити метричка потрага. Погрешни фенси, али неодлучни показатељи као што је „укупан број кликова“ као КПИ.
  • Представљање бројева без контекста. Само „промет 4,2 милиона“ је бесмислен; Контекст је потребан на основу прошлог месеца, циља или буџета.
Опрез: Наративи извештаја које производи вештачка интелигенција су убедљиви и флуидни; Ово тачно повећава ризик. Течна реченица може садржати лажну тврдњу о узрочности. Тестирајте сваку тврдњу „јер“ и „зато“ доказима.

Укратко

Пословна интелигенција је слој који трансформише раштркане податке у одлуке и састоји се од извора, ЕТЛ-а, складишта података и ланца извештавања. КПИ је критична метрика везана за пословни циљ, са јасно дефинисаном формулом и изузецима; недефинисана метрика је најчешћа БИ грешка. Вештачка интелигенција обезбеђује значајну брзину у изради КПИ дефиниције, СКЛ нацрта и наратива извештаја; али сваки СКЛ мора бити логички оправдан, сваки број мора бити подржан познатим подацима, а свака узрочна тврдња мора бити тестирана доказима. Корелација није узрочна веза; Флуид нарација не гарантује тачност.

Задатак апликације

Дизајнирајте КПИ „стопе завршетка“ за платформу за онлајн курсеве. (1) Напишите опис од једне реченице са формулом, временским оквиром и изузецима (нпр. да ли се отказане регистрације рачунају?). (2) Направите једноставну шему (Регистрација, Курс, Напредак) и генеришите СКЛ нацрт за овај КПИ са моћним упитом. (3) Пронађите барем један могући ризик од двоструког бројања или погрешног филтрирања у упиту. (4) Одштампајте сажетак закључка и у њему означите сваку узрочну тврдњу. (5) Поставите пример замке корелације-узрочности и објасните како бисте је тестирали.

контролна листа

  • [ ] Формула, временски оквир и изузетак за сваки КПИ су написани.
  • [ ] Прочитао сам и разумео СКЛ који генерише АИ ред по ред.
  • [ ] Ручно сам потврдио упит са мало познатим подацима.
  • [ ] Тестирао сам сваку узрочну тврдњу у извештају са доказима.
  • [ ] Контекстуализовао сам сваки број помоћу референтне вредности (циљ/последњи период).
  • [ ] Постигао сам консензус међу тимовима о дефиницијама метрике.