Pelnas:
- Galimybė apibrėžti kiekvienos iniciatyvos sėkmės metriką, pagrįstą verslo rezultatu, įvertintu pagal pradinį lygį
- Galimybė sąžiningai skaičiuoti paslėptas išlaidas (integracija, priežiūra, priežiūra) ir apskaičiuoti realią IG neperdedant naudos
- Gebėjimas įrodyti vertę per kontrolinės grupės ir scenarijų analizę ir pagrįsti sprendimą padidinti, taisyti ar nutraukti įrodymais
Dažniausia AI investicijų mirties priežastis nėra techninis gedimas; vertė negali būti įrodyta. Jei pilotas „veikia puikiai“, bet niekas negali tiksliai pasakyti, ką jis atneša, jis bus uždarytas pirmą kartą sumažinus biudžetą. Šiame skyriuje sužinosite, kaip apskaičiuoti dirbtinio intelekto iniciatyvų IG (Investicijų grąžą), kaip išmatuoti verslo vertę metrikais ir kaip pagrįsti investicinius sprendimus remiantis įrodymais. Tikslas yra atskirti „gerai besijaučiančius“ pilotus nuo startuolių, kurie gamina „įrodytą vertę“.
Kodėl sunku išmatuoti vertę ir kodėl tai būtina?
AI vertė kartais yra tiesioginė (sumažina darbo trukmę nuo 10 valandų iki 2 valandų), kartais netiesioginė (didėja klientų pasitenkinimas). Iššūkis yra padaryti netiesioginę vertę išmatuojamą. Taisyklė yra tokia: jūs negalite valdyti ir apginti vertės, kurios negalite išmatuoti. Štai kodėl kiekviena iniciatyva turi turėti bent vieną skaitmeninę sėkmės metriką ir ši metrika turi būti išmatuota prieš iniciatyvos pradžią (tai vadinama bazine linija; dabartinės būklės įvertinimas prieš tobulinimą).
Vertė skirstoma į keturias pagrindines kategorijas:
Vertės tipas
Pavyzdinė metrika
matavimo sunkumas
išlaidų mažinimas
Valanda/TL už sandorį
lengva
Pajamų didinimas
Konversijos rodiklis, krepšelio suma
vidutinis
rizikos mažinimas
Klaidų / atitikties pažeidimų skaičius
vidutinis
Patirtis/kokybė
Pasitenkinimo balas, reakcijos laikas
Sunku, bet būtina
Patarimas: prieš pradedant pilotą, „kaip atpažinsime sėkmę? Parašykite skaitinį atsakymą į klausimą ir išmatuokite esamą būseną (bazinę padėtį). Bet koks „patobulinimo“ teiginys, pateiktas be pagrindo, yra atviras diskusijoms.
Paprastas IG apskaičiavimas
Pagrindinė formulė: ROI = (grynoji nauda − bendrosios išlaidos) / visos išlaidos. Tačiau tikroji disciplina yra sąžiningas daiktų skaičiavimas.
Išlaidų pusė (kurios dauguma organizacijų neįvertina): licencijavimo / naudojimo mokestis, integravimo, duomenų paruošimo, mokymo, pakeitimų valdymo, nuolatinės priežiūros ir žmogaus priežiūros išlaidos. AI „paslėptos išlaidos“ dažnai yra integracija ir priežiūra.
Nauda (kurią dauguma organizacijų perdeda): konvertuodami sutaupytą laiką į tikrus pinigus, paklauskite, ar sutaupytas laikas iš tikrųjų virsta verte. Sutaupyti 10 minučių per dieną 100 žmonių verta tik tuo atveju, jei tas laikas skiriamas prasmingam darbui.
Pavyzdys: Sąskaitų faktūrų apdorojimo įrankis kainuoja 300 000 TL per metus (licencija + integracija + priežiūra), nauda yra 12 000 sąskaitų × 15 min santaupų × darbo sąnaudos = 720 000 TL. IG = (720 000–300 000) / 300 000 = 140%. Bet "ar tikrai 15 minučių buvo sutaupyta?" Klausimas gali sušvelninti naudą; Štai kodėl bandomasis matavimas yra labai svarbus.
Žingsnis po žingsnio: įrodykite vertę
1. Išmatuokite bazinę liniją. Prieš bandydami užrašykite esamą būseną pagal skaičių.
2. Nustatykite aiškų sėkmės metriką. Pasirinkite vieną ar dvi metrikas, susietas su verslo rezultatu.
3. Sąžiningai sudėkite visas išlaidų dalis. Nepamirškite paslėptų išlaidų (integravimas, priežiūra, priežiūra).
4. Išmatuokite tikrąją naudą bandomajame etape. Pasikliaukite matavimais, o ne spėlionėmis; stipresnis, jei yra kontrolinė grupė.
5. Nuspręskite: mastelį, pataisykite arba sustabdykite. Jei įrodymų pakanka, padidinkite; Jei ne, sąžiningai uždarykite.
trys mini dėklai
1 atvejis – bandomasis projektas be bazinės linijos. Vienas skambučių centras paskelbė, kad AI padėjėjas „labai sėkmingas“, tačiau prieš pradėdamas nematavo vidutinės skambučio trukmės. Sprendime dėl mastelio finansų direktorius klausia „kiek jis pagerėjo? jis paklausė; niekas negalėjo atsakyti. Projektas sustojo 3 mėnesiams, retrospektyvus matavimas: pagerėjimas buvo tik 4%, daug mažesnis nei tikėtasi. Jei būtų pradinis lygis, tai būtų pastebėta anksti.
2 atvejis – paslėptos išlaidos. Viena įmonė apskaičiavo AI įrankio licenciją (200 000 USD per metus), bet neįskaičiavo integracijos (350 000 USD) ir nuolatinio žmogaus stebėjimo (2 visą darbo dieną dirbantys žmonės). Projektas, kuris buvo laikomas „pelningu“, veikė nuostolingai, pridėjus realias išlaidas. Kai visi elementai buvo suskaičiuoti, taikymo sritis buvo susiaurinta, o išlaidos sumažintos naudojant stebėjimo automatizavimą.
3 atvejis. Įrodymai su kontroline grupe. Elektroninės prekybos įmonė atvėrė savo AI produkto rekomendaciją pusei vartotojų (bandomoji grupė), bet ne pusei (kontrolinė grupė). Per 6 savaites bandomosios grupės krepšelio suma buvo 7% didesnė. Tuo baigėsi diskusijos „AI arba sezonai“; Kontrolinės grupės dėka vertė buvo aiškiai įrodyta ir prieinama visoje šalyje.
Keturi kopijuojami šablonai
1) Vertės hipotezė ir metrika:
Jūsų vaidmuo: verslo vertės analitikas. Sukurkite šios AI iniciatyvos vertės hipotezę: kokią metriką tikimės pagerinti, nuo kokios pradinės padėties, kiek? Taip pat parašykite, kaip ir kokiu dažnumu bus matuojama metrika. Iniciatyva: [tekstas]
2) Visas išlaidų paskirstymas:
Išvardykite tikslius šios AI iniciatyvos išlaidų elementus: licencija / naudojimas, integravimas, duomenų paruošimas, mokymas, pokyčių valdymas, priežiūra, žmogaus priežiūra. Būtinai pabrėžkite paslėptas išlaidas, kurios dažnai pamirštamos. Iniciatyva: [tekstas]
3) IG skaičiavimo sistema:
Nustatykite IG skaičiavimą su šiais naudos ir sąnaudų duomenimis: grynoji nauda, bendrosios išlaidos ir IG procentas. Suabejokite prielaida, kad nauda „iš tikrųjų virsta pinigais“, ir parodykite du optimistinius / pesimistinius scenarijus. Duomenys: [nauda ir kaina]
4) Instruktažas dėl mastelio keitimo:
Konvertuokite šiuos bandomuosius rezultatus į sprendimų instruktažą valdybai: pradinė padėtis, išmatuota nauda, bendrosios išlaidos, investicijų grąža, pagrindinė rizika ir rekomendacija (mastas / taisymas / sustabdymas). Sąžiningai pasakykite, ar įrodymai stiprūs, ar silpni. Rezultatai: [tekstas]
Silpnas raginimas / Stiprus raginimas
Silpnas: „Apskaičiuokite šio AI projekto IG“.
Rezultatas: optimistiška, nekvestionuojama problema dėl trūkstamo rašiklio; nepatikimas sprendimui.
Stiprus: "Apskaičiuokite sąskaitų faktūrų apdorojimo automatizavimo investicijų grąžą. Nauda: 12 000 sąskaitų faktūrų per metus, sutaupykite 15 minučių vienai sąskaitai faktūrai, darbo valandos 250 TL. Kaina: metinė licencija 200 000 TL, vienkartinė integracija 350 000 TL, nuolatinis 1 žmogaus scenarijus ir tik optimistiška priežiūra. 70% sutaupytų laiko virsta realia verte, parašykite, kurį variantą rekomenduotumėte man nuspręsti.
Rezultatas: Sąžininga, prielaidomis pagrįsta, scenarijus sudaryta ir sprendžiama analizė.
Dažnos klaidos
- Nematau bazinės linijos. Sakymas „mes pasveikome“, nežinant, kas nutiko anksčiau, negali būti įrodytas.
- Apeiti paslėptas išlaidas. Integracija, priežiūra ir priežiūra paprastai yra svarbesni už licencijavimą.
- Pervertinkite naudą. Ne visas sutaupytas laikas virsta verte; Naudokite realų konversijos koeficientą.
- Nesudaro kontrolinės grupės. Neturint kontrolinės grupės lieka neaišku, ar pagerėjimą lemia dirbtinis intelektas, ar koks nors kitas efektas.
- Visai nematuojant minkštosios naudos. Jei patirties ir kokybės nepaisoma, nes juos sunku išmatuoti, didelė dalis vertės lieka nematoma.
Dėmesio: dirbtinis intelektas gali sukurti IG sistemą, tačiau vadovas yra atsakingas už įvestų skaičių ir prielaidų tikroviškumą. Gerai atrodanti investicijų grąža, sukurta naudojant perdėtą naudos prielaidą, klaidina investicijų komitetą ir pakerta pasitikėjimą. Visada patikrinkite skaičių šaltinį.
Apibendrinant
DI startuoliai dažnai miršta ne dėl technikos, o dėl nesugebėjimo įrodyti vertės. Kiekviena iniciatyva turi turėti bent vieną metriką, susietą su verslo rezultatu, įvertintą pagal pradinį lygį. Skaičiuodami IG, sąžiningai suskaičiuokite visas paslėptas išlaidas (integracija, priežiūra, priežiūra) ir neperdėti naudos; Klauskite, ar sutaupytas laikas iš tikrųjų virsta verte. Jei įmanoma, įrodykite su kontroline grupe. Jei įrodymai stiprūs, masto, jei silpni, sąžiningai sustokite. Kitame skyriuje pamatysime, kaip valdyti riziką, kurią kiekviena įmonė turi kartu su savo verte.
Taikymo užduotis
Pasirinkite AI naudojimo atvejį. Prieš pradėdami, užsirašykite bazinę liniją, kurią turite išmatuoti, ir sėkmės metriką. 2. Pašalinkite visus išlaidų elementus (įskaitant paslėptus) naudodami šabloną. Sukurkite du IG scenarijus, optimistinį ir pesimistinį, naudodami 3 šabloną. Galiausiai, „ar šie įrodymai įtikins mane, kad padidėtų? Sąžiningai atsakykite į klausimą.
kontrolinis sąrašas
- [ ] Apibrėžiau išankstinės intervencijos pradinę liniją.
- [ ] Nustačiau bent vieną metriką, susietą su verslo rezultatais.
- [ ] Sudėjau visus išlaidų elementus (įskaitant paslėptus).
- [ ] Sušvelninau naudos prielaidą realiu konversijos koeficientu.
- [ ] Apskaičiavau du scenarijus – optimistinį ir pesimistinį.
- [ ] Jei įmanoma, suplanavau kontrolinę grupę.
- [ ] Sąžiningai įvertinau sprendimo priėmimo įrodymų stiprumą.