Girdeji:
- MLOps tapgyrlaryna düşünmek (goýbermek, ýerleşdirmek, gözegçilik etmek, gaýtadan taýýarlamak, yzyna gaýtarmak) we model drift we gözegçilik edilýän ýerleşdirmäni meýilleşdirmek;
- Model adalatlylygy, aç-açanlyk we jogapkärçilik ýörelgelerini ulanmak we statistiki takyklygy ahlak taýdan kabul etmekden tapawutlandyrmak
- Şahsy maglumatlary KVKK / GDPR ýörelgeleri bilen goramak we ýokary täsirli kararlarda adama soňky jogapkärçiligi bermek
Bir modeli taýýarlamak we ýokary bal almak ahyrzaman däl, orta. Asyl gymmaty model önümçilige girizilende we ygtybarly işlenende, wagtyň geçmegi bilen ýaramazlaşmazdan gözegçilik edilende we ähli amal etiki we kanuny çäklerde amala aşyrylýar. Bu ýapylyş bölümi üç temany öz içine alýar: MLOps (göni ýaýlymda gezmek, modellere gözegçilik etmek we goldamak), etika (adalatlylyk, aç-açanlyk, kemçiliksizlik) we şahsy durmuşyň eldegrilmesizligi (şahsy maglumatlary goramak). AI bu ugurlarda kod, gözegçilik sanawlary we meýilnamalary öndürýär; Emma adamlar bir modeliň göni ýaýlymda, kimiň täsir etjekdigini we haýsy maglumatlary ulanyp boljakdygyny çözýärler. Bu kararlar tehniki däl, jogapkärçilik kararlary.
MLOps: model önüm ýaly ýaşaýar
MLOps (Maşyn öwreniş amallary - önümçilikde maşyn öwreniş modellerini işletmek, gözegçilik etmek we täzelemek praktikasy) DevOps-yň programma üpjünçiligini işläp düzmekde maglumat ylymyna uýgunlaşmagydyr. Esasy ideýa: model bir gezek öwredilen we ýatdan çykarylan faýl däl-de, hemişe tehniki hyzmaty talap edýän janly önüm. Esasy tapgyrlar:
1. Wersiýa: Kod (Git), maglumatlar we model bilelikde wersiýa edilýär; Haýsy modeliň haýsy maglumatlar we kod bilen öndürilendigi ýazylýar.
2. Gurnama: Model API ýa-da partiýa işi hökmünde göni görkezilýär. Adatça ilki kiçi tomaşaçylara berilýär (kölege / kanar paýlanyşy).
3. Gözegçilik: Modeliň işleýşi we giriş maglumatlary yzygiderli gözegçilik edilýär.
4. Täzeden taýýarlamak: öndürijilik peselende, model täzelenen maglumatlar bilen täzeden taýýarlanýar.
Nusga çalşygy: sessiz ýoýulmak
Önümçilikdäki iň uly howp model driftdir (model drift / data drift). Dünýä üýtgeýär; Modeliňizi (müşderiniň özüni alyp barşy, bahalary, möwsümi, kanunçylygy) öwreden şertleriňiz wagtyň geçmegi bilen üýtgeýär we model könelip başlaýar. Mysal üçin, pandemiýadan öň taýýarlanan isleg modeli pandemiýa wagtynda düýbünden nädogry. Drift iki görnüşde ýüze çykýar: maglumat drift (giriş maglumatlarynyň paýlanyşy) we düşünje drift (giriş we maksat üýtgemeleriniň arasyndaky baglanyşyk). Bulary ele almagyň usuly gözegçilik: giriş paýlanyşyny, çaklama paýlanyşyny we hakyky mümkinçilige garanyňda öndürijiligi yzygiderli yzarlaň.
Üns beriň: Önümçilige girizilen model öz-özünden ýaramazlaşar; "Eger" däl-de, "haçan" däl. Gözegçiligi ýola goýmazdan modelleri ýerleşdirmek, motoryny hiç wagt dolandyrmazdan awtoulag sürmek ýalydyr; Bir gün ol ýerde ýuwaşlyk bilen oturýar, duýmaýarsyňyz.
MLOps elementi
Maksat
Üns berilmedik bolsa
Wersiýa
Öndürilýän zady bilmek
Köpeldilmeýän, yzarlanmaýan
Gözegçilik
Süýşmegi ir görmek
Model sessiz-üýnsüz bozulýar
gaýtadan taýýarlamak
täzelenmeli
Çaklamalar köne bolýar
Yza gaýdyp gelmek
erbet modeline dolan
Nädogry model göni ýaýlymda galýar
Resminamalar
aýdyňlygy, dolanyşygy
Maglumat bir adama ýapyşýar
Etika: nusgawy kararlar adamlara täsir edýär
Maglumatlaryň modelleri adamlaryň durmuşyna täsir edýän kararlarda has köp ulanylýar: karz, işe almak, ätiýaçlandyryş, adalat. Bu güýç bilen jogapkärçilik gelýär. Esasy etiki töwekgelçilikler:
Ikitaraplaýyn we diskriminasiýa: Model taryhy maglumatlardaky adalatsyzlygy öwrenip we dowam etdirip biler. Geçmişde belli bir topara az karz berlen bolsa, model munuň "düzgün" bolandygyny çaklaýar we diskriminasiýany awtomatlaşdyrýar. Şonuň üçin adalatlylygyň derňewi - modeliň dürli toparlara (jyns, ýaş, sebit) meňzeş hereket edýändigini ýa-da ýokdugyny barlamak zerurdyr.
Aç-açanlyk we düşündiriş: Bir modeliň näme üçin adamy ret edendigini düşündirip bilmeli. "Gara guty şeýle diýdi" etiki we köplenç kanuny taýdan kabul ederliksiz. Şonuň üçin düşündiriş gurallary (aýratynlyk ähmiýeti, SHAP bahalary) gymmatlydyr.
Jogapkärçilik: Model nädogry karar berse kim jogapkär? Jogap mydama model däl-de adam / edara. Adamyň gözegçiligi (adam-in-the-loop - iň soňky karary tassyklaýan adam) ýokary täsirli kararlarda saklanmalydyr.
Üns beriň: Model statistik taýdan "dogry" bolup biler, ýöne ahlak taýdan kabul ederliksiz. Bir topara yzygiderli zyýan berýän ýokary takyk model gowy model däl. Dogruçyllyk adalatyň ornuny tutmaýar.
Gizlinlik: şahsy maglumatlar seresaplylyk bilen goralýar
Maglumat ylmynyň çig maly köplenç şahsy maglumatlar bolup, bu maglumatlar kanun bilen goralýar: Türkiýedäki KVKK, Europeewropadaky GDPR. Esasy ýörelgeler: maksat çäklendirmesi (maglumatlar ýygnalan maksatdan başga maksatlar üçin ulanylmaýar), maglumatlary minimuma eltmek (zerur maglumatlardan has köp maglumat ýygnalmaýar / saklanmaýar), anonimleşdirmek (maglumat kesgitlenýär) we howpsuzlyk (maglumatlar şifrlenýär we giriş çäklendirilýär). AI gurallary bilen işleýän wagtyňyz möhüm düzgün: hiç haçan hakyky şahsy maglumatlary köpçülige açyk AI guralyna goýmaň. Derňew üçin köplenç diagramma we anonim / sintetiki nusga ýeterlikdir.
Maglumat howpsuzlygy nukdaýnazaryndan goşmaça ünsi: maglumat goragy we kanuny derňew maksatlary üçin diňe ygtyýaryňyz bolan maglumatlara we ulgamlara maglumat ylym gurallaryny we usullaryny ulanyň. Başga biriniň maglumatlaryna rugsatsyz girmek, şahsyýetleri täzeden tanamak (näbelli maglumatlardan şahsyýeti çykarmak) ýa-da birugsat profil etmek bikanun we ahlaksyz.
üç sany kiçi halat
1-nji hadysa - Gözlenmedik ýykylmak. Elektron söwda kompaniýasy maslahat beriş modeli bilen göni ýaýlymda işledi we yzarlamany gurmady. 4 aýdan soň önümleriň katalogy gaty üýtgedi; model köne önümleri maslahat bermegi dowam etdirdi we öwrüliş tizligi ýuwaşlyk bilen 30% peseldi. Birnäçe aý bäri hiç kim üns bermedi. Sapak: gözegçilik etmezden ýerleşdirmek kör bolýar.
2-nji waka - Gizlin diskriminasiýa. Işe kabul ediş barlagy modeli, taryhy maglumatlardaky jyns deňsizligi we zenan dalaşgärleriň yzygiderli kemsidilmegi barada öwrendi. Adalat derňewi ýoklugy sebäpli üns berilmedi; Gözegçilikde ýüze çykaryldy we edara çynlakaý abraý / hukuk töwekgelçiligi bilen ýüzbe-ýüz boldy. Sapak: täsirli täsirli modellerde toparlaýyn adalatlylygy gözegçilik etmek möhümdir.
3-nji waka - Gizlinligi bozmak. Bir analitik hakyky müşderi e-poçtalaryny we satyn alyş taryhyny öz içine alýan bir faýly köpçülige açyk AI guralyna ýükledi we "segmentleri jemläň" diýdi. Şahsy maglumatlar okuw jaýyndan çykdy; KVKK prosesi başlandy. Dogry ýol şahsyýet meýdanlaryny aýyrmak we diňe näbelli häsiýetleri paýlaşmakdy. Sapak: hakyky şahsy maglumatlar açyk gurala girmeýär.
Göçürip boljak dört şablon
1) ýerleşdirişden öňki gözegçilik sanawy:
Siziň roluňyz: MLOps geňeşçisi. Önümçilige bir model goýmazdan ozal barlamaly zatlarymy sanaň: wersiýalaşdyrmak, gözegçilik ölçegleri, yzyna gaýdyp gelmek meýilnamasy, öndürijilik çäkleri, maglumatlary üýtgetmek duýduryşy, jogapkär adam. Her element üçin bir sözlemli "näme üçin möhüm" düşündiriş goşuň. Men karar bererin.
2) Model çalşygy yzarlamagyň dizaýny:
Önümçilikde klassifikasiýa modeli üçin drift gözegçilik meýilnamasyny teklip ediň: (1) haýsy giriş paýlanyşyna gözegçilik etmeli, (2) çaklamany paýlamak üçin haýsy duýduryş, (3) hakyky netije gelende öndürijiligi nädip deňeşdirmeli, (4) haýsy bosagada gaýtadan taýýarlanmalydygyny. Şeýle hem kod skeletini beriň.
3) Adalatlylyga gözegçilik:
Dürli toparlar üçin (meselem, ýaş zolagy, sebit) modelimiň öndürijiligini deňeşdirýän kod ýazyň: ýatlamak / takyklyk we her topar üçin oňyn karar derejesi. Toparlaryň arasynda düýpli tapawut bar bolsa duýduryş beriň. Sebäp / syýasy düşündiriş bermek; Tapawutlary maňa görkeziň we men karara serederin.
4) Gizlinligi öňünden barlamak:
AI guralyna maglumat bermezden ozal barlaň: aşakdaky sütün sanawynda şahsy / şahsyýet maglumatlary (ady, e-poçta, şahsyýetnama, telefon, salgy, IP) barmy? Şeýle bolsa, haýsysynyň aýrylmalydygyny ýa-da anonim edilmelidigini sanaň. Sütünler: [sanaw]. Maksady: diňe anonim shemany paýlaşmak.
Gowşak haýyş / Güýçli haýyş
Gowşak haýyş:
Meniň modelim taýýar, göni ýaýlymda.
Gurnamak ýekeje ädim däl; Gözegçilik etmezden göni ýaýlymda gitmek, adalatlylyk we şahsy durmuşyň eldegrilmesizligi gözegçilik betbagtçylyk üçin sessiz çakylykdyr.
Güýçli haýyş:
Siziň roluňyz: jogapkär MLOps geňeşçisi. Meniň modelim taýýarlandy, göni efirde gitmezden ozal doly taýýarlyk isleýärin. Dörediň: (1) ýerleşdirişden öňki gözegçilik sanawy, (2) drift gözegçilik meýilnamasy, (3) toparlaýyn adalatlylygy barlamak kody, (4) gizlinlik barlagy (şahsy maglumatlar barmy). Şeýle hem ýokary täsirli kararlarda adam razyçylygyny nädip goramalydygyny teklip ediň. Iň soňky kararlar meniňki.
Bu ýerde paýlamak, gözegçilik, adalatlylyk we şahsy durmuşyň eldegrilmesizligi ýeke-täk jogapkärçilikli iş hökmünde kabul edilýär.
Adaty ýalňyşlyklar
- Gözegçiligi gurmazdan bir model ýerleşdirmek. Model ýuwaşlyk bilen süýşýär we ýoýulýar; Üns bermek üçin birnäçe aý gerek bolup biler.
- Adalat barlagyndan aýlanyp geçmek. Fokary wepalylyk modeli bir topara yzygiderli zyýan berip biler.
- Düşündirilmedik gara guty karary bermek. Impactokary täsirli kararlar düşündirilmeli; "Model şeýle diýdi" ýeterlik däl.
- AI guralyny açmak üçin hakyky şahsy maglumatlary bermek. KVKK / GDPR bozulmagy; Diagramma we anonim mysal ýeterlikdir.
- Karary modele tabşyrmak. Jogapkärçilik hemişe adamda; Adamlara ýokary täsir edilýär.
Maslahat: Her model bilen göni efirde gitmezden ozal bir ses bilen bir sorag beriň: "Bu model ertir ýuwaşlyk bilen bozulsa ýa-da bir topara adalatsyz jeza berse, men ony nädip görüp bilerin?" Bu soraga anyk jogabyňyz ýok bolsa, model entek önümçilige taýyn däl.
Gysgaça
Modeliň işi ýokary bal bilen däl-de, önümçilikde ygtybarly we jogapkärçilikli işlemek bilen tamamlanýar. MLOps göni efirde gitmek, sürüşe gözegçilik etmek, täzeden taýýarlamak we modeli yzyna öwürmek; Gözegçiliksiz ýerleşdirmek sessiz çökmekdir. Etika modeliň adalatlylygyny, aç-açanlygyny we jogapkärçiligini talap edýär; statistiki takyklyk etiki kabul edilmegiň ornuny tutmaýar. Gizlinlik, şahsy maglumatlary KVKK / GDPR ýörelgeleri bilen goramak we hakyky maglumatlary açyk gurallardan uzaklaşdyrmak diýmekdir. Bu kararlaryň hemmesi tehniki däl, jogapkärçilik kararlary we hemişe adama degişlidir.
Programma meselesi
Özüňiz guran (ýa-da gipotetiki) modeliňizi önümçilige goýup, dört sanawy doldurjak bolýan ýaly pikir ediň: (1) deslapky gözegçilik sanawy, (2) yzarlajak ölçeg ölçegleri, (3) toparlaýyn adalatlylygy gözegçilik meýilnamasy, (4) gizlinlik gözegçiligi. Soňra "Ertir sessiz-üýnsüz döwülse we yzyna gaýtarylsa nädip bilerin?" Diýen soraga anyk jogap ýazyň.
gözegçilik sanawy
- [] Gözegçilik (süýşmek duýduryşy) we yzyna gaýdyp gelmek meýilnamasy bilen modeli ýerleşdirýärinmi?
- [] Dürli toparlar üçin adalatlylygy / öndürijilik boşlugyny barladymmy?
- [] Highokary täsirli kararlar boýunça adam-düşünjäni sakladymmy?
- [] Şahsy maglumatlary KVKK / GDPR ýörelgeleri bilen goradym we açyk gurallardan uzaklaşdyrdymmy?
- [] Men esasy jogapkärçiligi nusga däl-de, adama ýükledimmi?
Modul synagy
1. Maglumat alymy emeli intellektden: "Bu maglumatlarda tötänleýin tokaý näderejede takyk?" asla modeli öwretmän we göni "89%" jogabyny prezentasiýa goýýar. Bu çemeleşmede esasy ýalňyşlyk näme?
- A) Emeli intellektlere maglumat we modeller bermezden ölçeglere garaşmak; Öndürýän sanynyň galpdygyny we hakyky metrikany diňe okuw we synag arkaly tapyp boljakdygyny äsgermezlik etmek
- B) tötänleýin tokaýyň ýerine logistik regressiýany ulanmaly
- C) Takyklyk derejesi elmydama 90% -den ýokary bolmaly.
- D) Tanyşdyryşda ölçegleri girizmek düýbünden gadagan
Düşündiriş: Emeli intellekt modele we maglumatlara girmezden ölçeg öndürip bilmez; Berýän sany galýusinasiýa (toslanan). Ölçeg, maglumatlar alymynyň öz hasaplamasy bilen, diňe model hakykatdanam tälim alnandan we synagdan geçirilenden soň alynýar. Barlanylmadyk çykyş gol çekilmedik hasabat ýalydyr.
2. "Hasabyň ýapylmagynyň sebäbi" sütüni, çaklama çaklamasy üçin maglumat ýygnalanda goşulýar; Bu sütün diňe müşderi gideninden soň doldurylýar. Model synag toplumynda 97% berýär, ýöne önümçilikde işlemeýär. Bu ýagdaýyň ady we sebäbi näme?
- A) artykmaçlyk; Model gaty çylşyrymly
- B) Maglumatlaryň syzmagy; Pred Çaklama wagtynda elýeterli bolmaz, ýöne aýratynlyk hökmünde nyşanyň netijesi
- C) Okuwyň ýeterlik däldigi; Model gaty ýönekeý
- D) Saýlaw taraplary; kiçi nusga ölçegi
Düşündiriş: Bu maglumatlaryň nusgawy syzmagy: 'ýapylmagynyň sebäbi' nyşanyň netijesidir we çaklama wagtynda henizem boş. Model geljekki bilimleri bilen hile döredýär, synag toplumynda gaty gowy görünýär, ýöne sütün boş bolany üçin önümçilikde çökýär. Her sütüne 'çaklama wagtynda mende barmy' diýen sorag berilmelidir.
3. Analitik girdeji sütünindäki ýiten bahalary ortaça doldurýar; emma ýitirim bolanlar aslynda hiç wagt girdeji yglan etmedik pes girdejili segmente degişlidir (yzygiderli ýitirim). Näme üçin bu doldurmak nädogry?
- A) Ortaça ortaça ortaça uludyr, şonuň üçin nädogry
- B) ingitirilen gymmatlyklar hiç haçan doldurylmaly däldir, hemişe pozulmalydyr
- C) yzygiderli boşlugy doldurmak, bu topara emeli wekilçilik etmek arkaly maglumatlary ýoýýar; Doldurmak 'näme üçin boş?' Diýen soragy bermän ýerine ýetirildi. ✔
- D) Ortaça hasaplamak, gaty haýal bolany üçin öndürijilik meselesini döredýär
Düşündiriş: defetmezçiligiň sebäbi çözgüdi kesgitleýär. Haçan-da yzygiderli ýitirim (belli bir toparda jemlenen boşluk) ortaça doldurylanda, bu topar emeli usulda “ortaça girdeji” bolýar we maglumatlar ýoýulýar. Doldurmazdan ozal 'näme üçin boş' diýen sorag berilmeli; yzygiderli / ähmiýetli ýiten ortaça doldurylmaly däldir.
4. Topar 'mahabat çykdajylary' bilen 'satuw' arasynda 0.78 arabaglanyşyk tapýar we býudjeti iki esse köpeldýär; Şeýle-de bolsa, ikisine-de sebäp bolýan zat möwsümleýin kampaniýalar. Statistikada haýsy ýörelge bu ýalňyşlygy düşündirýär?
- A) Korrelýasiýa sebäp däl; Gizlenen üçünji üýtgeýji iki üýtgeýjä täsir edip biler
- B) 0.78-iň korrelýasiýasy gaty pes bolansoň, gatnaşyklara üns berilmeli däldir
- C) Korrelýasiýa mydama sebäbini subut edýär, topar ony dogry aldy
- D) Mahabat bilen satuwyň arasyndaky baglanyşygy matematiki hasaplap bolmaz.
Düşündiriş: Korrelýasiýa sebäp däl. Iki üýtgeýji bilelikde hereket edip biler, sebäbi gizlin üçünji üýtgeýji (bu ýerde möwsümleýin kampaniýalar) ikisine-de täsir edýär. Biri beýlekisine sebäp bolýar diýen netijäni diňe synag we meýdan bilimleri arkaly kesgitläp bolýar; Diňe korrelýasiýalaryň sany sebäbiň subutnamasy däl.
5. Galplygy ýüze çykarmak modeli 99.2% takyklygy görkezýär we topar belleýär; Şeýle-de bolsa, maglumatlardaky galp geleşik derejesi bary-ýogy 0.8%, modeliň yzyna gaýtarylmagy 6%. Bu tablisada näme görkezilýär?
- A) Model ajaýyp, sebäbi takyklygy 99% -den ýokary
- B) Takyklyk deňagramsyz maglumatlar bilen ýalňyşdyr; Model ähli galplyklary diýen ýaly sypdyrýar (pes ýatlamak), degişli ölçege be seretmeli
- C) Modeliň yzyna çagyrylmagy ýokary bolany üçin hiç hili mesele ýok
- D) Galp nyrh pes bolany üçin model gurmagyň zerurlygy ýokdy
Düşündiriş: Deňagramsyz maglumatlarda 'Takyklyk' ýalňyşdyr. Model her geleşigi diýen ýaly “arassa” diýip atlandyranda, ýokary takyklyk alýar, sebäbi galplar gaty az, ýöne esasy maksady bolan galplary tutup bilmeýär (6% ýatlaň). Şonuň üçin deňagramsyz meselelerde ünsi takyklyga däl-de, işiň maksadyna laýyk gelýän bulaşyklyk matrisasyna we ýatlamak / takyklyk ýaly ölçeglere gönükdirilýär.
6. Talaby çaklamak taslamasynda wagta bagly maglumatlar tötänleýin okuw / synaga bölünýär. Model 93% takyklygy berýär, ýöne önümçilikde çökýär. Dogry bölünişik nähili bolmaly?
- A) Synag toplumyny ulaltmak, meselem. bölmek 50% / 50%
- B) Has çylşyrymly modeli ulanmak
- C) Bölümi doly aýyryň we ähli maglumatlar bilen türgenleşiň
- D) Hronologiki bölünişik: köne döwür bilen türgenleşik we täze döwür bilen synag, şeýlelik bilen modeliň geljegi görmeginiň öňüni alar ✔
Düşündiriş: Wagtlaýyn seriýa maglumatlarynda tötänleýin bölünişik edilse, model geljegi görýär we okuwda geçmişi çaklaýar; syzmakdyr we hakykatda ýok bolan üstünlik döredýär. Dogry çemeleşme hronologiki bölünişikdir: köne döwür bilen türgenleşik we täze döwür bilen synag, önümçiligiň hakyky ýagdaýyna öýkünmek (geçmişden geljege çaklamak).
7. Ölçeg (StandardScaler) parametrleri aýratynlyk in engineeringenerçiliginde haýsy maglumatlary hasaplamaly we olary nädip ulanmaly?
- A) Has takyk bolmagy üçin ähli maglumatlardan (okuw + bilelikde synag) hasaplanmalydyr
- B) Her hatar üçin, şol hataryň öz bahasyndan aýratyn hasaplamaly
- C) Diňe synag maglumatlaryndan hasaplanmaly
- D) Diňe okuw maglumatlaryndan hasaplanmaly, soň synag maglumatlaryna şol bir parametrler ulanylmaly; bolmasa syzar ✔
Düşündiriş: masştablamak, kodlamak we padding ýaly ähli üýtgeşmeleriň parametrleri (ortaça, standart gyşarmak we ş.m.) diňe okuw maglumatlaryndan öwrenilmeli, soň synag maglumatlarynda hem edil şonuň ýaly ulanylmaly. Synag maglumatlaryny göz öňünde tutmak, synag maglumatlarynyň okuwlara päsgel bermegine, ýagny syzmagyna sebäp bolýar we modeliňkiden has gowy görünýär. Turbageçirijini ulanmak muny üpjün edýär.
8. Model, okuw toplumynda 98% takyklyk we synag toplumynda 72% takyklyk berýär. Bu alamat nämäni görkezýär we näme edilmeli?
- A) Okuwyň ýeterlik däldigi; model has çylşyrymly edilmelidir
- B) Maglumatlaryň syzmagy; synag toplumy üýtgedilmelidir
- C) artykmaç; modeli ýönekeýleşdirmeli, kadalaşdyrmak we kross-tassyklama ulanylmaly ✔
- D) adaty ýagdaý; Her niçigem bolsa bilim derejesi has ýokary, seresaplylyk gerek däl
Düşündiriş: Okuwda gaty ýokary bal we synagda ep-esli pes bal artykmaçlygyň nusgawy alamatydyr: model hakyky nusga däl-de, okuw maglumatlarynyň sesini ýatda saklady. Çözgütler modeli ýönekeýleşdirmegi, has köp maglumatlary, kadalaşdyrmagy we döwleti kross-tassyklama bilen barlamagy öz içine alýar. Diňe bilim balyna bil baglamak bu ýalňyşlygy gizleýär.
9. Dolandyryş prezentasiýasynda, satuwyň 1000-den 1020-e çenli artýan ştrih diagrammanyň y oky 980-den başlap, ösüşiň ägirt uly görünmegi üçin başlaýar. Hakyky ösüş 2%. Näme üçin bu etiki mesele?
- A) Kesilen y oky kiçijik bir tapawudy wizual ulaldýar we tomaşaçyny azdyrýar; Adalatlylyk üçin deňeşdirme setirlerinde ok 0 from-dan başlamaly
- B) Bar çyzgylary satuw maglumatlary üçin hiç wagt ulanylyp bilinmez
- C) Mesele ýok; Diagrammany täsirli etmek elmydama gowy
- D) Y oky elmydama maglumatlaryň iň uly bahasyndan başlamaly
Düşündiriş: Deňeşdirme maksatly çyzgylarda, y oky, adatça, 0-dan başlamaly. Oky kesmek we 980-den başlamak, kiçijik 2% tapawudy görnüp duran ýaly edýär we tomaşaçyny ýalňyşdyrýar. Maglumat hünärmeniniň ahlak jogapkärçiligi, maglumatlara aşa baha bermeýän ýa-da baha bermeýän dogruçyl grafikleri çekmekdir.
10. Analitik, önüm tablisasy bilen sargytlara goşulandan soň umumy dolanyşygy 3 gezek tapýar; Setirleriň sany 240 müňden 690 müňe çenli artdy. Bu sessiz ýalňyşlygyň öňüni almak üçin näme edilmelidi?
- A) Jemi dolanyşygy 3-e bölüň
- B) JOIN-iň ýerine elmydama aýratyn talaplary ulanyň
- C) Önüm tablisasyny düýbünden ýok etmek
- D) Birleşenden / JOIN-den soň hatar sanyny barlamak we olaryň dogry açar arkaly birikdirilendigini barlamak; Göçürmäni ir tutmak ✔
Düşündiriş: Önüm tablisasynda her önüm üçin birnäçe hatar (dürli reňk, mysal üçin) bar bolsa, nädogry düwmäniň üsti bilen JOIN her tertibi köpelder we jemi jemlär. Kod ýalňyşsyz işleýär, ýöne netije nädogry. Munuň öňüni almagyň ýoly, her birleşenden / JOIN-den soň hatar sanyny barlamak we dogry düwme bilen birleşmekdir.
11. Işe almagyň barlag modeli, taryhy maglumatlardaky jyns deňsizligi we köp sanly zenan dalaşgärleriň arasynda yzygiderli öwrenilýär, ýöne umumy takyklygy ýokary. Bu näme many berýär?
- A) Mesele ýok, sebäbi modeliň takyklygy ýokary
- B) Statistik takyklyk ahlak taýdan kabul edilmegiň ornuny tutmaýar; model geçmişdäki diskriminasiýa barada öwrendi, toparlaýyn adalatlylygy barlamak zerur ✔
- C) Modeliň takyklygyny hasam artdyrmak meseläni çözýär
- D) Adalatlylyk maglumat ylmynyň çäginden daşda
Düşündiriş: Bir model statistik taýdan dogry bolsa-da, ahlak taýdan kabul ederliksiz bolup biler. Model öňki maglumatlardaky adalatsyzlygy öwrenýär we diskriminasiýany awtomatlaşdyrýar. Integrityokary dogruçyllyk adalatyň ornuny tutmaýar; Impactokary täsirli modellerde dürli toparlar üçin öndürijilik / karar tapawudyny ölçän adalatlylyga gözegçilik etmek möhümdir we iň esasy jogapkärçilik adamda.
12. Işgär, hakyky müşderi e-poçtalaryny we satyn alyş taryhyny öz içine alýan bir faýly köpçülige açyk AI guralyna ýükleýär we “segmentleri jemläň” diýýär. Näme üçin bu çynlakaý ýalňyşlyk we dogry ýol näme?
- A) Mesele ýok; AI gurallary hiç wagt maglumatlary saklamaýarlar
- B) erroralňyşlyk faýlyň gaty uly bolmagy; azaldylmalydy
- C) Açyk gurallara hakyky şahsy maglumatlary bermek KVKK / GDPR-iň bozulmagydyr; şahsyýet meýdanlary aýrylmalydy we diňe näbelli shema / emläk paýlaşylmalydy
- D) Diňe Excel-iň ýerine CSV ulanylmalydy
Düşündiriş: Hakyky şahsy maglumatlar (e-poçta, at we ş.m.) köpçülige açyk emeli intellekt guralyna berlende, KVKK / GDPR çäginde şahsy durmuşyň eldegrilmesizligi ýüze çykar; maglumatlar guramadan çykýar. Derňew üçin köplenç diagramma we anonim / sintetiki nusga ýeterlikdir. Dogry ýol, şahsyýet meýdanlaryny aýyrmak we diňe näbelli häsiýetleri paýlaşmakdyr.
13. Teklip modeli önümçilige girizilýär, ýöne yzarlamak kesgitlenmeýär; 4 aýdan soň önümleriň katalogy üýtgese, model köne önümleri maslahat bermegi dowam etdirýär we öwrüliş tizligi 30% peselýär. Bu hadysanyň ady näme?
- A) artykmaçlyk; Model okuw toplumyny ýatda saklaýar
- B) Model drift; Dünýä üýtgänsoň, model ümsüm, könelýär, sebäbi gözegçilik gurulmaýar ✔
- C) Saýlaw taraplary; ikitaraplaýyn görnüş
- D) Maglumatlary minimuma eltmek
Düşündiriş: Bu model drift (model / maglumat drift): dünýä üýtgese (katalog, özüni alyp barş, möwsüm) modeliň çalşylmagy we model sessiz-üýnsüz bozulmagy. Önümçilige girizilen model öz-özünden ýaramazlaşýar; Bu 'haçan' meselesi. Gözegçiliksiz ýerleşdirmek (giriş we öndürijiligi yzarlamak) zaýalanmagy ýüze çykarmaga mümkinçilik bermeýär.
14. trainingekeje okuw / synag bölünişiginde 88% takyklygy alýan modeliň 88%, 71%, 83%, 64%, 79% ballary bar. Bu nämäni görkezýär we näme üçin kross-tassyklama möhüm?
- A) Model durnukly; 88% hakyky öndürijilik
- B) Kesgitlemek hökman däl; Bir bölüm ýeterlik
- C) Ballaryň uly üýtgemegi, modeliň durnuksyzdygyny görkezýär; kross-tassyklama esaslary, ýekeje bagtly bin däl-de, köp sanly gaplaryň ortaça paýlanyşy we paýlanyşy
- D) Iň ýokary bal barada hasabat bermek iň gowusy (88%)
Düşündiriş: Bir bölüm bagtly ýa-da şowsuz bolup biler; 88% -i diňe aňsat bölünişigiň netijesi. Çekişme maglumatlary ortaça (şu ýerde ~ 77%) ýerine ýetirip, ballaryň üýtgewsizligini görkezip, maglumatlary birnäçe gezek bölýär. Bu ýerde ýokary üýtgewsizlik modeliň durnuksyzdygyny görkezýär; Bir bölüme bil baglamak ýalňyşdyr.