Nyereség:
- Képes sikermutatót meghatározni az üzleti eredmények alapján, az alapértékhez viszonyítva minden egyes kezdeményezéshez
- Képes a rejtett költségek (integráció, felügyelet, karbantartás) őszintén számlálására és a reális ROI kiszámítására anélkül, hogy túlzásba venné a hasznot
- Képesség az érték bizonyítására kontrollcsoport- és forgatókönyv-elemzésen keresztül, és bizonyítékokra alapozza a méretezésre, javításra vagy abbahagyásra vonatkozó döntést
A mesterséges intelligencia-befektetések halálozásának leggyakoribb oka nem a műszaki hiba; értékét nem lehet bizonyítani. Ha egy pilóta "nagyon fut", de senki sem tudja megmondani, hogy pontosan mit hoz, akkor az első költségvetési megszorításkor leállítják. Ebben a részben megtudhatja, hogyan számíthatja ki a mesterséges intelligencia kezdeményezések ROI-ját (Return on Investment), hogyan mérheti az üzleti értéket mérőszámokkal, és hogyan lehet bizonyítékokra alapozni a befektetési döntéseket. A cél az, hogy elkülönítsék a „jó érzésű” pilótákat a „bizonyított értéket” produkáló startupoktól.
Miért nehéz az értéket mérni és miért van rá szükség?
Az AI értéke néha közvetlen (10 óráról 2 órára csökkenti a munkát), néha közvetett (növeli a vevői elégedettséget). A kihívás a közvetett érték mérhetővé tétele. A szabály a következő: nem tudod kezelni és megvédeni azt az értéket, amelyet nem tudsz mérni. Ezért minden kezdeményezésnek rendelkeznie kell legalább egy numerikus sikermutatóval, és ezt a mérőszámot a kezdeményezés megkezdése előtt mérni kell (ezt nevezzük alapállapotnak; a fejlesztés előtti jelenlegi állapot mérése).
Az érték négy fő kategóriába sorolható:
Érték típusa
Példamutató
mérési nehézség
költségcsökkentés
Óra/TL tranzakciónként
könnyű
A bevétel növelése
Átváltási arány, kosár összege
közepes
kockázat csökkentése
A hibák/megsértések száma
közepes
Tapasztalat/minőség
Elégedettségi pontszám, válaszidő
Nehéz, de szükséges
Tipp: Mielőtt egy pilóta elindulna, "hogyan fogjuk felismerni a sikert?" Írjon számszerű választ a kérdésre, és mérje meg az aktuális állapotot (alapállapotot). Bármilyen „javítási” állítás, amelyet alapállapot nélkül fogalmaznak meg, vitára bocsátható.
Egyszerű ROI számítás
Az alapképlet: ROI = (nettó haszon − teljes költség) / teljes költség. De az igazi fegyelem a tételek becsületes számolása.
A költségoldal (amit a legtöbb szervezet alul számol): licencelési/használati díj, integráció költsége, adat-előkészítés, képzés, változáskezelés, folyamatos karbantartás és emberi felügyelet. Az AI „rejtett költsége” gyakran az integráció és a felügyelet.
A haszon oldala (amit a legtöbb szervezet eltúloz): amikor az időmegtakarítást valódi pénzre váltja, kérdezze meg, hogy a megspórolt idő valóban értékké válik-e. Napi 10 percet megspórolni 100 embernek csak akkor éri meg, ha ezt az időt értelmes munkával töltjük.
Egy példa: A számlafeldolgozó eszköz ára 300 000 TL évente (licenc + integráció + felügyelet), a haszon 12 000 számla × 15 perc megtakarítás × munkaerőköltség = 720 000 TL. ROI = (720 000 - 300 000) / 300 000 = 140%. De "Tényleg megspórolták a 15 percet?" A kérdés tompíthatja a hasznot; Ezért kritikus a pilot mérés.
Lépésről lépésre: érték bizonyítása
1. Mérje meg az alapvonalat. Rögzítse az aktuális állapotot számmal, mielőtt megpróbálná.
2. Állítson be egyértelmű sikermutatót. Válasszon egy vagy két mérőszámot, amelyek az üzleti eredményhez kapcsolódnak.
3. Őszintén adja össze az összes költségtételt. Ne feledkezzünk meg a rejtett költségekről (integráció, felügyelet, karbantartás).
4. Mérje meg a tényleges hasznot a kísérletben. A mérésre hagyatkozzon, ne a találgatásokra; erősebb, ha van kontrollcsoport.
5. Döntse el: méretezés, javítás vagy leállítás. Ha a bizonyíték elegendő, nagyítsa ki; Ha nem, zárja le őszintén.
három mini tok
1. eset – Pilot alapvonal nélkül. Az egyik telefonközpont „nagyon sikeresnek” minősítette az AI-asszisztenst, de nem mérte meg az átlagos híváshosszt az indulás előtt. A méretezési döntésben a pénzügyi igazgató megkérdezi, hogy „mennyit javult?” kérdezte; senki sem tudott válaszolni. A projekt 3 hónapra leállt, visszamenőleges mérés: a javulás mindössze 4%, a vártnál jóval alacsonyabb. Ha lenne alapállapot, ez korán látható lenne.
2. eset – Rejtett költség. Az egyik cég egy mesterséges intelligencia eszköz licencét számította ki (200 000 dollár évente), de nem számolta az integrációt (350 000 dollár) és az állandó emberi megfigyelést (2 fő teljes munkaidőben). A „nyereségesnek” gondolt projekt veszteségesen működött, amikor a valós költségeket hozzáadtuk. Miután minden elemet megszámoltunk, a hatókör leszűkült, és a költségek csökkentek a felügyeleti automatizálás révén.
3. eset – Bizonyíték a kontrollcsoporttal. Egy e-kereskedelmi vállalat a felhasználók felének (tesztcsoport) nyitotta meg mesterséges intelligencia termékajánlását, de a felének (kontrollcsoport) nem. 6 hét alatt a kosár mennyisége 7%-kal volt magasabb a tesztcsoportban. Ezzel véget ért az „AI vagy évszakok” vita; A kontrollcsoportnak köszönhetően az érték egyértelműen bizonyított és elérhetővé vált az egész országban.
Négy másolható sablon
1) Értékhipotézis és mérőszám:
Az Ön szerepe: üzleti értékelemző. Állítson fel egy értékhipotézist ehhez a mesterségesintelligencia-kezdeményezéshez: milyen mérőszámot várunk el, milyen kiindulási értéktől, mennyivel? Írja meg azt is, hogyan és milyen gyakorisággal történik a mérőszám mérése. Kezdeményezés: [szöveg]
2) Teljes költség bontásban:
Sorolja fel a következő AI kezdeményezés pontos költségtételeit: licenc/használat, integráció, adat-előkészítés, képzés, változáskezelés, karbantartás, emberi felügyelet. Ügyeljen arra, hogy kiemelje a gyakran elfelejtett rejtett költségeket. Kezdeményezés: [szöveg]
3) ROI számítási keret:
Állítson be egy ROI-számítást a következő haszon- és költségadatokkal: nettó haszon, összköltség és ROI-százalék. Kérdezze meg azt a feltevést, hogy a haszon „valóban pénzben forog”, és mutasson be két optimista/pesszimista forgatókönyvet. Adatok: [előny és költség]
4) Méretezési döntés tájékoztató:
A következő kísérleti eredményeket alakítsa át döntési tájékoztatóvá a testület számára: alapállapot, mért haszon, összköltség, ROI, főbb kockázatok és ajánlás (skálázás/javítás/leállítás). Mondja el őszintén, hogy a bizonyíték erős vagy gyenge. Eredmények: [szöveg]
Gyenge felszólítás / Erős felszólítás
Gyenge: „Számítsa ki ennek az AI-projektnek a ROI-ját.”
Eredmény: Optimista, megkérdőjelezhetetlen probléma hiányzó tollal; megbízhatatlan a döntéshez.
Erős: "ROI kiszámítása egy számlafeldolgozási automatizáláshoz. Előny: 12 000 számla évente, 15 perc megtakarítás számlánként, munkaóra 250 TL. Költség: éves licenc 200 000 TL, egyszeri integráció 350 000 TL, folyamatos, 1 fős optimista felügyelet, csak két személy felügyelete. Az időmegtakarítás 70%-a valódi értékké válik, írja meg, melyik mellett döntsek."
Eredmény: Őszinte, feltevéseken megkérdőjelezhető, forgatókönyvezett és döntésképes elemzés.
Gyakori hibák
- Nem mérünk alapvonalat. Nem bizonyítható, ha azt mondjuk, hogy "meggyógyultunk" anélkül, hogy tudnánk, mi történt korábban.
- A rejtett költségek megkerülése. Az integráció, a felügyelet és a karbantartás általában nagyobb, mint az engedélyezés.
- Túlbecsülje a hasznot. Nem minden megspórolt idő válik értékké; Használjon reális konverziós arányt.
- Nem hoz létre kontrollcsoportot. Kontrollcsoport nélkül továbbra sem világos, hogy a javulás a mesterséges intelligencia vagy más hatás eredménye.
- Egyáltalán nem méri a puha hasznot. Ha a tapasztalatot és a minőséget kihagyjuk, mert nehéz mérni, akkor az érték nagy része láthatatlan marad.
Figyelem: A mesterséges intelligencia fel tud építeni egy ROI keretrendszert, de a menedzser felelős a beírt számok és feltételezések valósághűségéért. A túlzott haszon feltételezéssel előállított, jó megjelenésű ROI félrevezeti a befektetési bizottságot és aláássa a bizalmat. Mindig ellenőrizze a számok forrását.
Összefoglalva
A mesterséges intelligencia induló vállalkozásai gyakran nem a technika miatt halnak meg, hanem azért, mert nem bizonyítják értéküket. Minden kezdeményezésnek rendelkeznie kell legalább egy, az üzleti eredményhez kötött mérőszámmal, az alapértékhez képest. A ROI kiszámításakor őszintén számoljon minden rejtett költséget (integráció, felügyelet, karbantartás), és ne vigye túlzásba a hasznot; Kérdés, hogy a megspórolt idő valóban értékké válik-e. Ha lehetséges, kontrollcsoporttal bizonyítson. Ha a bizonyíték erős, lépj túl, ha gyenge, állj meg őszintén. A következő részben azt fogjuk látni, hogyan kezeljük azokat a kockázatokat, amelyeket minden vállalkozás az értékével együtt hordoz.
Pályázati feladat
Válasszon egy AI használati esetet. Mielőtt elkezdené, írja le a mérendő alapértéket és a sikermutatót. 2. Távolítsa el az összes költségtételt (beleértve a rejtetteket is) a sablonnal. Hozzon létre két ROI-forgatókönyvet, egy optimista és egy pesszimista forgatókönyvet a 3. sablonnal. Végül: „Ez a bizonyíték meggyőz a skálázásról?” Válaszolj a kérdésre őszintén.
ellenőrző lista
- [ ] Meghatároztam a beavatkozás előtti alapvonalat.
- [ ] Legalább egy, az üzleti eredményhez kötődő mérőszámot azonosítottam.
- [ ] Összeadtam az összes költségtételt (beleértve a rejtetteket is).
- [ ] A haszon feltételezését reális konverziós aránnyal mérsékeltem.
- [ ] Két forgatókönyvet számoltam ki, optimista és pesszimista.
- [ ] Lehetőség szerint kontrollcsoportot terveztem.
- [ ] Őszintén értékeltem a döntéshez szükséges bizonyítékok erejét.