Kasu:
- Võimalus määratleda iga algatuse jaoks edumõõdik, mis põhineb äritulemustel, mida mõõdetakse lähtetasemega
- Võimalus ausalt arvestada varjatud kulusid (integreerimine, järelevalve, hooldus) ja arvutada realistlik ROI ilma kasu liialdamata
- Võimalus tõestada väärtust kontrollgrupi ja stsenaariumianalüüsi abil ning rajada otsus mastaapsuse, parandamise või katkestamise kohta tõenditele
AI-investeeringute kõige levinum surmapõhjus ei ole tehniline rike; väärtust ei saa tõestada. Kui piloot "jookseb suurepäraselt", kuid keegi ei oska öelda, mida see täpselt toob, suletakse see esimese eelarvekärbega. Selles üksuses saate teada, kuidas arvutada tehisintellekti algatuste ROI (investeeringutasuvus), kuidas mõõta äriväärtust mõõdikutega ja kuidas investeerimisotsuseid tõenditele tuginedes teha. Eesmärk on eraldada "hea enesetunde" piloodid alustavatest ettevõtetest, mis toodavad "tõestatud väärtust".
Miks on väärtust raske mõõta ja miks see vajalik on?
AI väärtus on mõnikord otsene (töö vähendamine 10 tunnilt 2 tunnile), mõnikord kaudne (kliendi rahulolu suurendamine). Väljakutse on muuta kaudne väärtus mõõdetavaks. Reegel on järgmine: te ei saa juhtida ega kaitsta väärtust, mida te ei saa mõõta. Seetõttu peab igal algatusel olema vähemalt üks numbriline edumõõdik ja seda mõõdikut tuleb mõõta enne algatuse algust (seda nimetatakse baastasemeks; hetkeseisu mõõtmine enne täiustamist).
Väärtus jaguneb nelja põhikategooriasse:
Väärtuse tüüp
Näidismõõdik
mõõtmise raskus
kulude vähendamine
Tund/TL tehingu kohta
lihtne
Tulude suurendamine
Konversioonimäär, ostukorvi summa
keskmine
riski vähendamine
Vigade/nõuetele vastavuse rikkumiste arv
keskmine
Kogemus/kvaliteet
Rahuloluskoor, reageerimisaeg
Raske, kuid vajalik
Näpunäide. Enne pilootprojekti algust küsige, kuidas me edu ära tunneme? Kirjutage küsimusele numbriline vastus ja mõõtke hetkeseisund (alustase). Kõik "parandamise" väited, mis on esitatud ilma lähtetasemeta, on avatud aruteluks.
Lihtne ROI arvutamine
Põhivalem: ROI = (puhaskasu − kogukulu) / kogukulu. Kuid tõeline distsipliin on esemete aus loendamine.
Kulude pool (mida enamik organisatsioone ei arvesta): litsentsi-/kasutustasu, integreerimiskulud, andmete ettevalmistamine, koolitus, muudatuste haldamine, pidev hooldus ja inimjärelevalve. AI "varjatud kulu" on sageli integreerimine ja järelevalve.
Kasu pool (mida enamik organisatsioone liialdab): ajasäästu ümberarvestamisel pärisrahaks küsige, kas säästetud aeg muutub ka tegelikult väärtuseks. 10 minuti säästmine 100 inimese jaoks on seda väärt vaid siis, kui see aeg kulub sisukale tööle.
Näide: Arvete töötlemise tööriist maksab 300 000 TL aastas (litsents + integratsioon + järelevalve), hüvitis on 12 000 arvet × 15 min kokkuhoid × tööjõukulu = 720 000 TL. ROI = (720 000–300 000) / 300 000 = 140%. Aga "Kas 15 minutit oli tõesti säästetud?" Küsimus võib kasu pehmendada; Seetõttu on pilootmõõtmine kriitiline.
Samm-sammult: väärtuse tõestamine
1. Mõõtke baasjoont. Salvestage enne proovimist hetkeolek numbri järgi.
2. Määrake selge edumõõdik. Valige üks või kaks mõõdikut, mis on seotud äritulemusega.
3. Liitke kõik kuluartiklid ausalt kokku. Ärge unustage varjatud kulusid (integreerimine, järelevalve, hooldus).
4. Mõõtke piloodil tegelikku kasu. Tuginege mõõtmisele, mitte oletustele; tugevam, kui on kontrollrühm.
5. Otsustage: skaleerige, parandage või peatuge. Kui tõendid on piisavad, suurendage; Kui ei, siis sulgege see ausalt.
kolm minikarpi
Juhtum 1 – piloot ilma lähtetasemeta. Üks kõnekeskus kuulutas oma tehisintellekti abilise "väga edukaks", kuid ei mõõtnud enne alustamist kõne keskmist pikkust. Skaleerimise otsuses küsib finantsjuht: "Kui palju see on paranenud?" ta küsis; keegi ei osanud vastata. Projekt peatus 3 kuuks, tagantjärele mõõtmine: paranemine oli vaid 4%, oodatust palju väiksem. Kui oleks olemas lähtejoon, oleks seda varakult näha.
Juhtum 2 – varjatud kulud. Üks ettevõte arvutas tehisintellekti tööriista litsentsi (200 000 dollarit aastas), kuid ei arvestanud integratsiooni (350 000 dollarit) ja pidevat inimeste jälgimist (2 täiskohaga inimest). Projekt, mida peeti "kasumlikuks", töötas tegelike kuludega lisades kahjumiga. Kui kõik kaubad olid loendatud, kitsestati ulatust ja kulusid vähendati valveautomaatika abil.
Juhtum 3 – tõendid kontrollrühmaga. E-kaubanduse ettevõte avas oma tehisintellekti tootesoovituse pooltele kasutajatele (testrühm), kuid mitte poolele (kontrollrühm). 6 nädalaga oli korvisumma testrühmas 7% suurem. Sellega lõppes arutelu "AI või aastaajad"; Tänu kontrollrühmale oli väärtus selgelt tõestatud ja kättesaadav kogu riigis.
Neli kopeeritavat malli
1) Väärtuse hüpotees ja mõõdik:
Sinu roll: äriväärtuse analüütik. Looge selle AI algatuse jaoks väärtushüpotees: millist mõõdikut me loodame parandada, millisest lähtetasemest, kui palju? Kirjutage ka, kuidas ja mis sagedusega mõõdikut mõõdetakse. Algatus: [tekst]
2) Täielik kulude jaotus:
Loetlege järgmise AI algatuse täpsed kuluartiklid: litsents/kasutus, integreerimine, andmete ettevalmistamine, koolitus, muudatuste juhtimine, hooldus, inimjärelevalve. Tõstke kindlasti esile varjatud kulud, mis sageli unustatakse. Algatus: [tekst]
3) ROI arvutamise raamistik:
Seadistage ROI arvutus järgmiste tulu- ja kuluandmetega: puhaskasum, kogukulu ja ROI protsent. Seadke kahtluse alla eeldus, et kasu „tõeliselt väljendub rahas” ja näidake kahte optimistlikku/pessimistlikku stsenaariumi. Andmed: [kasu ja kulu]
4) Skaleerimise otsuse infotund:
Teisendage järgmised piloottulemused juhatusele tehtavaks otsustusinfoks: lähtetase, mõõdetud kasu, kogukulu, ROI, peamised riskid ja soovitus (skaala/parandus/peatus). Öelge ausalt, kas tõendid on tugevad või nõrgad. Tulemused: [tekst]
Nõrk viip / Tugev viip
Nõrk: "Arvutage selle AI projekti ROI."
Tulemus: Optimistlik, vaieldamatu probleem puuduva pastakaga; otsuse tegemiseks ebausaldusväärne.
Tugev: "Arvutage arvete töötlemise automatiseerimise investeeringutasuvus. Kasu: 12 000 arvet aastas, säästes 15 minutit arve kohta, töötunnid 250 TL. Kulud: aastane litsents 200 000 TL, ühekordne integreerimine 350 000 TL, pidev 1 inimese stsenaarium ja ainult kahe inimese optimistlik järelevalve. 70% aja kokkuhoiust muutub reaalseks väärtuseks, kirjutage, kumma kasuks soovitate.
Tulemus: aus, oletustega küsitav, skriptitud ja otsustusvõimeline analüüs.
Levinud vead
- Ei mõõda baasjoont. Ütlemist "oleme terveks saanud" teadmata, mis varem juhtus, ei saa tõestada.
- Varjatud kuludest mööda hiilimine. Integreerimine, järelevalve ja hooldus on üldiselt suuremad kui litsentsimine.
- Ülehinnake kasu. Mitte kogu säästetud aeg ei muutu väärtuseks; Kasutage realistlikku konversioonimäära.
- Kontrollrühma ei moodusta. Ilma kontrollrühmata jääb selgusetuks, kas paranemine tuleb tehisintellektist või mõnest muust efektist.
- Ei mõõda üldse pehmet kasu. Kui kogemus ja kvaliteet jäetakse välja, sest neid on raske mõõta, jääb suur osa väärtusest nähtamatuks.
Tähelepanu: tehisintellekt võib luua ROI raamistiku, kuid juht vastutab sisestatud arvude ja eelduste realistlikkuse eest. Hea välimusega ROI, mis on toodetud liialdatud tulueeldusega, eksitab investeerimiskomiteed ja õõnestab usaldust. Kontrollige alati numbrite allikat.
Kokkuvõttes
AI idufirmad ei sure sageli mitte tehnika, vaid väärtuse tõestamise ebaõnnestumise tõttu. Igal algatusel peaks olema vähemalt üks äritulemusega seotud mõõdik, mida mõõdetakse lähtetasemega. ROI arvutamisel arvesta ausalt kõik varjatud kulud (integreerimine, järelevalve, hooldus) ja ära liialda kasuga; Küsi, kas säästetud aeg muutub ka tegelikult väärtuseks. Võimalusel tõestage kontrollrühmaga. Kui tõendid on tugevad, ulatuge, kui nõrgad, siis ausalt lõpetage. Järgmises üksuses näeme, kuidas maandada riske, mis iga ettevõtmisega kaasnevad koos oma väärtusega.
Rakenduse ülesanne
Valige AI kasutusjuht. Enne alustamist kirjutage üles baasjoon, mida peate mõõtma, ja edumõõdik. 2. Eemaldage malliga kõik kuluartiklid (ka peidetud). Looge malliga 3 kaks investeeringutasuvuse stsenaariumi, optimistlik ja pessimistlik. Lõpuks: "kas see tõendusmaterjal veenab mind skaleerima?" Vasta küsimusele ausalt.
kontrollnimekiri
- [ ] Määratlesin sekkumiseelse baasjoone.
- [ ] Olen tuvastanud vähemalt ühe äritulemusega seotud mõõdiku.
- [ ] Liitsin kõik kuluartiklid (ka peidetud).
- [ ] Ma vähendasin kasu oletust realistliku konversioonimääraga.
- [ ] Arvutasin välja kaks stsenaariumi, optimistliku ja pessimistliku.
- [ ] Planeerisin võimalusel kontrollrühma.
- [ ] Olen ausalt hinnanud otsuse tõendite tugevust.