Bölüm 8 / 11

Peýdalylygy barlamak derňewi we tapyndylaryň sintezi

Girdeji:

  • Ulanyş synag synaglaryny we syn belliklerini emeli intellekt bilen tapyndylara, agramlara we maslahatlara öwürmek ukyby
  • Netijeleri agyrlyga görä tertipleşdirmek we ileri tutulýan tablisany öndürmek ukyby
  • Emeli intellektiň hakyky synlaýyş subutnamalary bilen galdyrýan ýa-da ulaldýan netijelerini düzedip bilmek

Peýdalylygy barlamak, hakyky ulanyjylara anyk tabşyryklar bermek we olara gözegçilik etmek bilen dizaýnyň nirede işleýändigini we nirede ýapyşýandygyny synlamagyň usulydyr. Synagyň özi aňsat; Asyl kynçylyk şundan ybarat: ýazga alnan sagatlary, gözegçilik bellikleriniň sahypalaryny we dargadylan ekran suratlaryny aýdyň, ileri tutulýan netijelere öwürmek. Bu sintez el bilen birnäçe gün dowam edýär we toparlar köplenç gutarylmaýar. Emeli intellekt bu kynçylygy açýar: ýazgylary we bellikleri tapyndylara, agramyna we maslahatyna öwürmek. Anöne syn etmegiň hakykatdanam bir mesele ýa-da näderejede möhümdigini çözmek adam kararydyr.

Syn etmegiň, tapmagyň we teklipiň arasyndaky tapawut

Sintezde üç gatlagy bölmek möhümdir:

  • Syn: Näme boldy, teswir ýok. "Gatnaşan 3," dowam etmek "düwmesini 40 sekunt gözledi."
  • Tapmak: Gözegçiliklerden ýüze çykýan nagyş. "Ulanyjylar esasy çäräni tapmakda kynçylyk çekýärler."
  • Teklip: Näme etmeli. "Esasy düwmäni wizual taýdan tapawutlandyrýar."

AI bu üç gatlagy çalt öndürýär, ýöne köplenç bir synlamadan tapylan netijäni tapmak bilen synlamagy bulaşdyrýar. Siziň işiňiz, her tapyndyda ýeterlik synlamanyň bardygyny (näçe gatnaşyjy, näçe gezek) barlamakdyr.

Maslahat: Emeli intellekt "her tapyndydan aşakda, ony goldaýan synlamalary goşuň we näçe gatnaşyja gatnaşdy" diýiň. Şeýlelik bilen, çişirilen netijeleri derrew bir gözegçilikden tapawutlandyryp bilersiňiz.

Agyrlyk: ilki näme düzetmeli?

Tapyndylaryň hemmesi deň däl. Çynlakaý bir meseläniň gyssagly çözülmelidigini we üç faktor bilen kesgitlenýändigini görkezýär:

  1. Täsir: Mesele ulanyjynyň tabşyrygy ýerine ýetirmegine päsgel berýärmi ýa-da diňe bizar edýärmi?
  2. Quygylyk: Näçe ulanyjy we näçe gezek?
  3. Iş täsiri: Bu mesele öwrülişik, girdeji ýa-da ynam nä derejede täsir edýär?

Adaty bir masştab: Tankytly (missiýa düýbünden päsgel berýär), (okary (agyr kynçylyk), Orta (haýallaýar), Pes (kosmetika). AI başlangyç reýtingi teklip edip biler, ýöne gutarnykly agram karary - esasanam iş täsiri - toparyň kontekstini bilmegini talap edýär.

tapmak

Täsir

ýygylygy

ähmiýeti

Teklip

Esasy düwmäni tapyp bolmaýar

Bu meselä päsgel berýär

4/6 gatnaşyjy

tankydy

Aýyrmak düwmesi

Roralňyşlyk habary belli däl

haýallaýar

3/6

beýik

Habary düşündiriň

Nyşan düşnüksiz

azajyk ikirjiňlenmek

2/6

orta

Bellik goşuň

Reňk äheňi halanmady

kosmetika

1/6

pes

soňrak goýuň

üç sany kiçi halat

1-nji waka - 5 sagat ýazgy, ýarym günde netijeler. Bir topar 6 ulanyjy synagynyň belliklerini (jemi 5 sagat) AI-e berdi. Model 14 netijäni teklip etdi; Topar synlamalaryň sanyna görä hersini barlady, 9-a çenli gysgaltdy we ähmiýetine görä ýerleşdirdi. El bilen 2 gün gerek boljak sintez ýarym güne çenli azaldyldy.

2-nji waka - çişirilen tapyndy. "Ulanyjylar nawigasiýa düşünenoklar" AI möhüm tapyndyda ýazdy. Topar goldaýan synlamalara seredenlerinde, munuň ýekeje gatnaşyjynyň ýekeje pursatyna esaslanandygyny gördüler. Tapyndy "ortaça" peseldi we has köp maglumat soraldy. Sapak: ýekeje syn möhüm netijä gelmeýär.

3-nji waka - criticalitirilen möhüm mesele. Model gaýtalanýan, ýöne ownuk ýaly görünýän meseläni (awtomatik aýlamak däl) “pes” hasaplady. Dizaýner synlamalara seredende, munuň 5 gatnaşyjyda meseläniň taşlanmagyna sebäp bolandygyny we "ýokary" derejä ýetendigine düşündi. Sapak: AI-iň ähmiýetine baha beriş synlaýyş subutnamalary bilen düzedilýär.

San we hil maglumatlary bilelikde okamak

Peýdalylygy barlamak esasan hil taýdan (synlamaga esaslanýar), ýöne mukdar (san) signallary hem bar: meseläni tamamlamagyň tizligi, işiň dowamlylygy, ýalňyşlyklaryň sany, kanagatlanma baly. Iň güýçli sintez bu ikisini birleşdirýär: “Gatnaşanlaryň diňe 33% -i töleg tabşyrygyny (mukdar taýdan) ýerine ýetirdi we ýerine ýetirip bilmedikleriň hemmesi ýük daşama ädimine (hil taýdan) ýapyşdy." Emeli intellekt bu iki maglumatlary aýratyn berende birleşdirmäge kömek edýär; ýöne sanlaryň takyklygyny we nusganyň ululygyny tassyklaýarsyňyz. Göterimler barada gürleşmek kiçi nusgalarda ýalňyş bolup biler (meselem, 5 ulanyjy); "5 ulanyjydan 3" diýmek, "60%" diýmekden has dogruçyl. Modelden mutlak sanlarda gürlemegini soraň.

Maslahat: AI-e "göterim ýerine" näçe ulanyjy "diýip ýazyň diýiň. Ownuk nusgalarda göterim hakykatdan has takyklygy görkezýär.

Göçürip boljak teklipler

Siziň roluňyz: ulanyş analitigi. Aşakdaky anonim synag belliklerinden netijeleri çyzyň. Her tapyndy üçin: 1) aýdyň jümle, 2) synlary goldaýan we näçe gatnaşyjy muny gördi, 3) täsir (blokirlemek / haýallamak / kosmetika). Bir synanyň esasynda tapylan netijeleri "WEAK EVIDENCE" diýip belläň. Bellikler: <<text>>

Tapyndylaryň sanawyny ähmiýet boýunça tertipläň. Kriteriýalar: täsir (meseläniň päsgelçiligi?), Frequencyygylygy (näçe gatnaşyjy?), Iş täsiri. Her tapyşy tankydy / ýokary / orta / pes belläň we esas ýazyň. Işewürligiň täsirini bilmeýän bolsaňyz, "topar baha bermeli" diýiň. Tapyndylar: <<list>>

Her tapyndy üçin anyk, hereketli dizaýn maslahatyny ýazyň. Teklip: näme üýtgär + näme üçin bu meseläni çözýär + haýsy ekrana täsir edýär. Düşnüksiz ("has gowy ediň") maslahatlaryndan gaça duruň. Tapyndylar: <<list>>

Gyzyklanýan taraplaryň görkezilmegi üçin bu netijeler hasabatyny jemläň: iň möhüm 3 netijäni, subutnamany (näçe ulanyjy) we maslahat berilýän çäräni öz içine alýan gysga ýerine ýetiriji gysgaça mazmuny ýazyň. Çişirmek; belliklerden san alyň. Hasabat: <<text>>

Gowşak haýyş / Güýçli haýyş

Gowşak: "Bu synag ballaryndan netije çykaryň."

Netije: Hiç hili subutnamasyz, ähmiýeti ýok garyşyk sanaw we bir synlamany tapyş hökmünde ýalňyşdyrmak.

Güýçli: "Belliklerden bir netije çykaryň; her tapyndyda, goldaýan synlamalary we näçe gatnaşyjynyň görlendigini goşuň; bir synlamaga esaslanýan birini" gowşak subutnama "hökmünde belläň, soňra effekt-ýygylyk-iş effektine görä ähmiýetine görä tertipläň."

Netije: Subutnamalara esaslanýan, ileri tutulýan, goralýan netijeler.

Tapawut: güýçli isleg subutnamalaryň sanyny görkezýär + gowşak haýyş + ähmiýet ölçegi.

Adaty ýalňyşlyklar

  • Syn etmegi tapmak bilen bulaşdyrmak. Whateke-täk “näme boldy” umumy netijä öwürmek.
  • Bir syndan möhüm netijeleri çykarmak. Frequygylyk barlanýança hiç hili agram berilmez.
  • Emeli intellektiň işine täsiri çözmek. Girdejiniň / öwrülişiň täsiri konteksti talap edýär; Ol öz toparynda.
  • Ileri tutmaň. Tapyndylaryň tertipsiz sanawy topary ysmaz edýär; Hemme zady birbada düzedip bolmaýar.
  • Teklipleri düşnüksiz goýmak. “Has gowy et” ulanyp bolmaýar; Näme, näme üçin we nirede aýdyň bolmaly.

Gysgaça

Ulanyş synagynyň ähmiýeti ýazgylary we bellikleri aýdyň, ileri tutulýan netijelere öwürmekde gelýär. Emeli intellekt bu sintezi ep-esli çaltlaşdyrýar: synlamalary netijelere jemleýär, teklipleri taýýarlaýar, ähmiýet tertibini teklip edýär. Eachöne her tapyndyda geçirilen gözegçilikleriň sanyny barlamak, ýekeje synlamalara esaslanan çişirilen netijeleri ýok etmek we kontekst bilen işewürligiň täsirini kesgitlemek adam işi. Subutnamalara esaslanýan, belli bir ýygylyga eýe bolan we ähmiýeti boýunça düzülen netijeler hasabaty gyzyklanýan taraplar üçin çalt we goragly bolar.

Programma meselesi

  1. Ulanyş synagyndan bellikleri anonimleşdiriň (hakyky ýa-da toslama).
  2. Netijeleri birinji haýyşda aýyryň; Her biriniň aşagyndaky gözegçilikleriň sanyny barlaň.
  3. Izolýasiýa netijeleri "gowşak subutnama" bellendi we goşmaça maglumatlaryň zerurdygyny kesgitläň.
  4. Ikinji haýyş bilen, netijeleri ähmiýetine görä tertipläň; Topar hökmünde işewürlige baha beriň.
  5. Üçünji haýyş bilen, her tapyndy üçin anyk teklipleri ýazyň we ileri tutulýan tablisany dörediň.

gözegçilik sanawy

  • [] Syn etmegi, tapyndylary we teklipleri aýratyn gatlak hökmünde sakladym.
  • [] Her tapyndyda näçe gatnaşyjynyň görkezilendigini barladym.
  • [] Bir synlamaga esaslanan netijeleri gowşak subutnama hökmünde belledim.
  • [] Agyrlyk derejesini täsir ýygylygy-iş täsiri bilen kesgitledim.
  • [] Topar bilen işewürlige täsir etmek kararyna baha berdi.
  • [] Teklipleri anyk ýazdym (näme / näme üçin / nirede).