Girdeji:
- Uly logiki galyndylary maskalaşdyrmak we AI-e süzmek we wagt tertibi döretmek arkaly jemlemek ukyby
- AI tarapyndan döredilen wagt gatnaşyklaryna sebäp däl-de, gipotezalar hökmünde baha berip bilmek
- Kök sebäp gipotezasyny ölçeg we kod bilen tassyklamak we postmortem eskizini taýýarlamak ukyby
Haçan-da bir programma üpjünçiligi önümçilikde (janly gurşawda) işleýän bolsa, näme edýändigini size diňe yzlar, ölçegler we gündelikler (programma işleýän wagt belgili ýazgy setirleri) aýdýar. Öçürilen wagtynda müňlerçe, käte millionlarça log setirlerinden manyly signal çykarmak, wakalara jogap bermegiň iň stresli we wagt taýdan möhüm pursadydyr. Bu ýerde, AI gizlinlik we tassyklama çäklerine hormat goýýançaňyz, köp teksti jemläp, nagyşlary çykaryp we gipotezalary döredip, kömekçi bolup biler.
Bu bölümde, AI-ni synlamagyň çäginde - daşarky netijelerine seredip ulgamyň içki ýagdaýyna düşünmek ukybyny ulanmagy öwrenýäris: gündelik seslerden many çykarmak, näsazlygyň wagtyny kesgitlemek, gaýtalanýan nagyşlary tapmak we postmortem taýýarlamak. Öňe tankydy duýduryş: çig önümçilik gündeliginde köplenç şahsy maglumatlar we syrlar bar; olary tötänleýin AI guralyna dakmak çynlakaý düzgün bozmakdyr.
Näme üçin surnallar kyn, AI näme üçin peýdaly?
Üç sebäbe görä surnallar kyn: göwrüm (gaty köp), ses (köp setirler ähmiýetsiz) we bulaşyklyk (bir waka dürli hyzmatlaryň gündeligine ýaýrady). Ynsan gözi bu üýşmekde halys bolýar we möhüm setiri sypdyrýar.
AI tekstiň uly böleklerini jemlemäge, gaýtalanýan nagyşlary sanamaga we “ýalňyşlyklaryň döremezinden ozal näme üýtgedi?” Diýip soramaga ökde. Wagt ýaly gatnaşyklary ýola goýmakda güýçlidir, Şeýle-de bolsa, iki çäk bar. Birinjisi kontekst penjiresidir: bir modele gabat getirip boljak surnallaryň mukdary çäklidir, şonuň üçin ilki bilen süzmeli we nusga almaly. Ikinjiden, tassyklama: “düýp sebäbi şu” diýýän AI gipoteza; Ölçegler we kodlar bilen tassyklamazdan karar bermäň.
Üns beriň: Çig önümçilik surnallarynda IP adresi, e-poçta, bellik, sessiýa ID we käwagt açyk syr bolup biler. AI-e iýmitlenmezden ozal olary maskalaň ýa-da diňe kärhana tarapyndan tassyklanan, maglumat bilen üpjün edilen gurallary ulanyň. Bu mowzugy 10-njy bölümde çuňlaşdyrýarys.
Stepdimme-ädim: Logurnaldan kök sebäbine
- Wagt penjiresini daralt. Çäräniň başlan minutlaryny kesgitläň; Bütin gün däl-de, şol penjiräni gözden geçiriň.
- Sesi süzüň. Belli gaýtalanýan, zyýansyz setirleri otlamak; Erroralňyşlyga (RAL .YŞLYK), duýduryş (DUNDURYŞ) we ilkinji gyşarma pursatyna üns beriň.
- Maska duýgur maglumatlary. AI-e bermezden ozal şahsy maglumatlary we syrlary arassalaň.
- Gysgaça mazmuny we wagt tertibini dörediň. AI-den wakany hronologiýada jemlemegini soraň (“ilki bu, soň bolsa”).
- Gipotezany ölçeg we kod bilen tassyklaň. AI tarapyndan görkezilen sebäp; Mümkin bolsa, dolandyryş paneli, degişli kod we ýerleşdiriş möhleti bilen tassyklaň.
- Öwrenilenleri ýazmaça ýazyň. Postmortem eskizini düzüň we öňüni alyş çärelerini sanaň.
Üç kiçi waka
Mysal 1 - 40,000 setir 5 minutda jemlenendir. Töleg hyzmaty, 12 minutlyk aralyk ýalňyşlygy habar berdi. Topar degişli 20 minutlyk maskaly gündeligiň penjiresini (takmynan 40,000 setir, nusga aldy) AI-e iýmitlendirdi we wagt çyzgysyny döretdi. Model, ýalňyşlygyň ýarylmagy garaşlylyk hyzmatynyň jogap wagtynyň 200 ms-den 8 sekunt artan pursatyna gabat gelendigini görkezdi. Topar muny dolandyryş panelinde tassyklady we sebäbini 10 minudyň içinde gysgaltdy.
2-nji waka - lealňyş korrelýasiýa. Başga bir hadysada, AI ýalňyşlyklaryň kron (meýilleşdirilen iş) bilen "şol bir wagtyň özünde" bolup geçýändigini aýdyp, günäkärledi. Topar ölçegleri barlanda, kronyň hakykatdanam wakadan öň gutarandygyny gördüler; Korrelýasiýa tötänlikdi. Asyl sebäbi ýadyň syzmagydy. Sapak: AI tarapyndan kesgitlenen wagt arabaglanyşygy subutnama däl-de, açykdyr.
3-nji waka - Postmortem çaltlaşdy. Iş kesilenden soň, topar (maskaly) habar ýazgysyny we waka kanalyndan AI-a çenli iýmitlendirdi we postmortem eskizini taýýarlady: gysgaça mazmun, täsir, wagt çyzgysy, düýp sebäp, hereketler. Adam redaktory faktlary düzedip, hereketleriň eýelerini belledi. Adatça 2 sagat dowam edýän resminama has yzygiderli gurluş bilen takmynan 40 minutda tamamlandy.
Göçürip boljak dört şablon
Gysgaça mazmun we wagt tertibi (maskaly gündelik bilen):
Aşakda maskaly önümçilik gündeliginiň hadysasy penjiresi.1) Wakany hronologiki tertibe salyň (ilkinji gyşarmagyň pursatyny belläň) .2) Iň ýygy-ýygydan gaýtalanýan ýalňyşlyk / duýduryş görnüşlerini sanap we toparlaň.3) "Öň näme üýtgedi?" Sorag üçin dalaşgär wakalaryny sanaň. Bu çaklamalar; "Barlanylmaly" diýip belläň. {surnallar}}
Patternalňyş nagyşlary çykarmak:
Bu gündelik setirlerde gaýtalanýan säwlik nagyşlaryny tapyň. Her bir nagyş üçin: nusga çyzygy (maskaly), çak edilýän çeşme we mümkin many. Aýry-aýry "üns" sanawynda seýrek, ýöne möhüm ýalňyşlyklary ýygnaň. {{Surnallar}}
Düzülen talap / süzgüç öndürmek:
{{Gural guraly: grep / jq / Kibana KQL / CloudWatch Insights} For üçin aşakdaky şerte laýyk gelýän talap ýazyň: {{meselem. Soňky 15 minutda 5xx ýalňyşlyk, X} ulanyjyny hasaba almazdan, soragy düşündiriň; Domen atlaryny düzmeýändigiňize göz ýetiriň, anyk däldigiňizi soraň.
Postmortem eskiz:
Aşakdaky (maskaly) hadysanyň wagtyndan postmortem eskizini ýazyň: Gysgaça mazmun / täsir (dowamlylygy, ulanyjy täsir etdi) / Wagt görkezijisi / Kök sebäp / Gowy giden / Hereketler (eýesi meýdançasyny hersi üçin boş goýuň). Aýyplaýjy dil ulanmaň; Hakyky we işeňňir boluň. {{Wagt görkezijisi}}
Gowşak haýyş / Güýçli haýyş
Gowşak: "Bu ýazgylara serediň, näme boldy?" (Şahsy maglumatlar bilen, bütin günüň çig kitaby, nyşana alynmadyk.)
Güýçli: "Aşakda 14: 02–14: 20-den maskaly önümçilik gündeligi (5xx süzülýär). Bu penjirede säwligiň dörän pursatyny tapyň, iň ýygy ýalňyş görnüşini hasaplaň we partlamadan 60 sekunt öň ýüze çykan gyşarmalary sanaň; hemmesini 'barlanmaly gipoteza' diýip belläň."
Güýçli wersiýa; Wagt penjiresini daraldýar, gündeligi süzýär we maskalaýar, anyk sorag berýär we çykyşyň gipotezadygyny ilkibaşdan kesgitleýär.
Gözleg
AI güýçli
Çäklendirmek / barlamak
Uly gündelik gysgaça mazmuny
Hawa, çalt
Synag ýitgileri bolup biler
Wagt gatnaşyklaryny ýola goýmak
yşarat edýär
Korrelýasiýa ≠ sebäp
Talap / süzgüç döretmek
gowy garalama
Domen atlary hakykymy?
Postmortem eskiz
Gurluşy we dili
Kazyýetler adam tarapyndan tassyklandy
Korrelýasiýa sebäp däl
Logurnal derňewinde iň köp ýaýran ýalňyşlyk "şol bir wagtyň özünde bolup geçdi, şonuň üçin" ýalňyşlyk. AI bu duzaga adamlara garanyňda aňsat, aňsat bolmasa düşýär; sebäbi tekstdäki bir wagtyň özünde güýçli signaldyr öýdýär. Bir hadysanyň hakykatdanam başga birine alyp barýandygyny aýdyp bilmek; wagty, mehanizmi we mümkin bolsa gaýtalanmagy talap edilýär. AI-iň döredýän her bir sebäbini öňe sürmek üçin “muny başga haýsy subutnamalar tassyklaýar?” Diýip soraýarys. Sorag bilen synap görüň.
Maslahat: AI-e gireniňizde, mümkin boldugyça tekst zyňylmagynyň ýerine, ilki bilen talap / süzgüç çap ediň we ulagyňyzda işlediň; Şeýlelik bilen, ikiňizem duýgur maglumatlary azaldýarsyňyz we modeliň kontekst penjiresini hakykatdanam möhüm hatarlara bölýärsiňiz.
Adaty ýalňyşlyklar
- Çig, gözegçiliksiz gündeligi ýelmemek. Şahsy maglumatlaryň we syrlaryň aýan edilmegi; şahsy durmuşyň çynlakaý bozulmagy.
- Bütin güni birbada bermek. Kontekst penjiresinden geçýär, signal ses bilen gark bolýar.
- Sebäpler üçin ýalňyş baglanyşyk. AI tarapyndan döredilen wagt gatnaşyklary subutnama däl-de, bir maglumat.
- Domen ady bilen soraga bil baglamak. Model, gündelik meýdan adyny teklip edip biler; shematik bilen barlaň.
- Postmortemi barlamazdan neşir etmek. Faktlar we täsir sanlary adam tarapyndan tassyklanmalydyr.
Gysgaça
AI gündelik derňewinde ses we ses çykarmak üçin güýçli guraldyr: uly ýazgylary jemlemek, möhletleri kesgitlemek, nagyşlary çykarmak we postmortem eskizlerini taýýarlamak. Threeöne üç çäkleri ýadyňyzdan çykarmaň: duýgur maglumatlary maskalamazdan eksport etmäň, kontekst penjiresine laýyk filtrläň we nusga alyň we her sebäp sebäbini ölçeg we kod bilen barlaň. Korrelýasiýa sebäp däl; AI düşündiriş berýär, karary subutnama bilen kabul edýärsiňiz.
Programma meselesi
Bir hadysadan ýa-da synag gurşawynyň gündeliginden 15–20 minutlyk penjire saýlaň. Ilki bilen şahsy maglumatlary we syrlary maskalaň (ýa-da sintetiki gündeligi öndüriň). Soňra “gündeligiň gysgaça mazmuny we wagt tertibi” şablony bilen AI-den hronologiýa we iň ýygy ýalňyşlyk görnüşlerini çykaryň. AI-iň öňe süren ölçeg ýa-da kod bölegi bilen öňe sürlen düýp sebäbini barlamaga synanyşyň: gipoteza saklandymy ýa-da ýalňyş baglanyşykmy? Tapyndylaryňyzy bir sözlemde ýazyň.
gözegçilik sanawy
- [] Gündeligi AI-e bermezden ozal şahsy maglumatlary we syrlary maskalaýaryn.
- [] Derňewi dar wagt penjiresine we süzgüçine çenli azaldýaryn.
- [] AI tarapyndan döredilen wagt gatnaşyklaryny sebäp däl-de, gipotezalar hökmünde görýärin.
- [] Esasy sebäp talaplaryny ölçeg we kod bilen barlaýaryn.
- [] Döredýän talaplarymyň / süzgüçleriň domen atlarynyň hakykydygyny tassyklaýaryn.
- [] Postmortem eskizindäki faktlary we sanlary adamzat tassyklaýaryn.