Riba:
- Ikon fahimtar yanayin rayuwar wani abin da ya faru (ganewa, rarrabewa, ragewa, ƙuduri, bayan mutuwa), ma'auni na MTTD/MTTR da ƙa'idar 'raguwa farko, bincika daga baya'
- Ikon amfani da AI don ƙunsar hasashe a lokacin abin da ya faru da kuma samar da zane-zane mara lahani, yana tabbatar da kowane tushen tushen tare da bayanai.
- Ikon yin amfani da horon rubutu a cikin yaren da ba ya zargi ga mutuwa da raba bayanan taron ta hanyar rufe shi.
Kowane tsarin yana rushewa a ƙarshe. Bambancin shine yadda ƙungiyoyi masu kyau suka shirya don wannan taron da babu makawa da kuma yadda suke koyo. Lamarin wani lamari ne da ba zato ba tsammani wanda ke katsewa ko barazanar tarwatsa sabis ɗin: hadarin sabis, lokutan amsawa, asarar bayanai. Gudanar da abin da ya faru yana nufin ganowa, ragewa, warware abin da ya faru da wuri-wuri, sannan koyo daga gare ta. Wannan shine horon da ke jagorantar ƙwararrun DevOps da SRE (Injiniya Dogaro da Yanar Gizo) dare da rana.
Ma'auni masu mahimmanci guda biyu suna auna ingancin taron: MTTD (Ma'anar Lokacin Ganewa) da MTTR (Ma'anar Lokacin Faruwa). Manufar ita ce ta rage duka biyun. AI yana ƙara manyan dabi'u biyu a nan: da sauri taƙaita rajistan ayyukan da awo a lokacin taron don taƙaita yiwuwar tushen dalilin, da sauri zayyana bayanan bayan mutuwa (rahoton binciken bayan taron) bayan taron. Amma yanke shawara game da al'amuran al'amuran - wanne sabis don kashewa, sake dawowa, abin da za ku ce ga abokin ciniki - naku ne.
Zagayowar rayuwa na wani lamari
- Ganewa: Ƙararrawa tana yin sauti ko ƙarar abokin ciniki ta zo. Da wuri mafi kyau.
- Triage: Yaya tsanani yake? Menene yankin? An sanya matakan tsanani-yawanci SEV1 (mafi mahimmanci, tsarin duka) zuwa SEV4 (ƙananan).
- Haɗa ƙungiyar amsawar ku. A cikin al'amura masu mahimmanci, kwamandan abin da ya faru yana ɗaukar haɗin kai.
- Ragewa: Dakatar da zub da jini da farko - yawanci jujjuyawa ko rufe tuta. Za ku sami tushen dalilin daga baya.
- Shawara: Aiwatar da gyara na dindindin.
- Koyi (bayan mutuwa): Me ya faru, me ya sa ya faru, ta yaya za mu hana shi sake faruwa?
Tip: Daya daga cikin kurakurai mafi tsada a lokacin da lamarin ya faru shine jinkirta dakatar da zubar jini saboda "bari mu fara gano ainihin tushen dalilin." Doka: na farko ragewa (madowa/mayar da sabis), sannan tambaya. Komawa zuwa sanannen siga mai kyau shine galibi mafi saurin ragewa.
Al'adar bayan mutuwa mara laifi
Kashin baya na ƙungiyoyin lafiya al'ada ce ta mutuwa mara laifi: makasudin ba "wane ne ya yi shi ba," amma "wane tsari da tsari ya yarda da wannan kuskure?" shine tambaya. Mutane suna boye kuskure idan sun san za a hukunta su; An maimaita kuskuren ɓoye. Bayan mutuwa ba rahoton zargi ba ne, amma takaddar koyo.
Kyakkyawan bayan mutuwa ya haɗa da: taƙaitawa, tasiri (masu amfani nawa, tsawon lokaci, nawa kuɗi), tsarin lokaci, tushen (s), abin da ya tafi da kyau/mummuna, da abubuwan aiki - ma'auni masu mahimmanci, kowanne tare da mai shi da kwanan wata.
Tsanaki: Lokacin rubuta bayanan mutuwa tare da AI, tabbatar da kawar da harshen zargi (wato "mutum X yayi kuskure"). Hakanan rufe ID na abokin ciniki, IPs na ciki, da asirin lokacin ciyar da bayanan taron zuwa AI - ana raba mutuwar bayan mutuwa ko'ina.
Tushen bincike: 5 Me yasa da AI
Dabarar gargajiya ita ce "5 Me yasa": tambaya "me yasa?" ga matsala. Ta yin tambayoyi akai-akai, kuna samun daga alamar zahiri zuwa ainihin tushen. "Sabis ɗin ya rushe. Me yasa? Daga ƙwaƙwalwar ajiya. Me ya sa? Akwai raguwa. Me yasa? Sabuntawar ɗakin karatu ... " AI yana da sauri don gina wannan sarkar kuma yana ba da shawarar rassan rassan - amma dole ne ku tabbatar da kowane "me yasa" tare da bayanan ku; AI kuma na iya gina sarkar ma'ana amma kuskure.
Tebur mai tsanani
Mataki
Tasiri
misali
shiga tsakani
SEV1
Gabaɗayan tsarin / asarar kasuwanci mai mahimmanci
Biyan kuɗi ya ragu gaba ɗaya
Nan take, dukan tawagar, kwamanda
SEV2
Babban rashin aiki
An kasa shiga shiga
Mai sauri, kiran-kira + tallafi
SEV3
Tasirin sashi / iyaka
An jinkirta rahoto
a lokutan aiki
SEV4
ƙananan / kayan kwalliya
typo
talakawa aiki jerin gwano
uku mini lokuta
Case 1 — MTTR daga mintuna 45 zuwa mintuna 8. Sabis na biyan kuɗi ya yi karo. Injiniyan da ke bakin aiki ya ba da rajistan ayyukan rufe fuska da bayanan turawa na ƙarshe ga AI kuma ya tambayi "Mene ne mafi kusantar faɗa a cikin mintuna 20 na ƙarshe?" Ya tambaya. AI ta nuna cewa rugujewar ta fara ne a daidai lokacin da aka tura na ƙarshe. Nan take injiniyan ya mayar da wannan sigar; Sabis ɗin ya dawo cikin mintuna 8. Tushen sanadin (bug pool pool a cikin sabon sigar) an bincika cikin dacewa.
Case na 2- zayyana bayan mutuwa a cikin mintuna 20. Bayan SEV2, ƙungiyar ta gaji kuma ba ta da ƙarfin rubuta rahoto; galibi ana jinkirin rahoton na makonni. A wannan lokacin, sun ba da jadawalin lokaci da bayanin abin da ya faru ga AI kuma sun samar da zanen bayan mutuwa mara laifi. AI ya ƙirƙiri tsari mai kyau don tasiri, lokaci da abubuwan aiki; Tawagar ta cika ta da hujjoji kuma ta buga shi cikin mintuna 20. Darasi bai rasa ba.
Case 3 - kuskure tushen dalilin kama. A cikin wani yanayi, AI ta ce "tushen abubuwan da ke haifar da yawaitar bayanai" kuma yana da ma'ana. Amma injiniyan ya tabbatar da ma'auni: nauyin bayanai ya kasance al'ada a lokacin da abin ya faru. Ainihin dalilin shine matsalar DNS na waje. Hasashen farko na AI ya kasance ruwa amma ba daidai ba; Tabbatarwa tare da bayanai ya hana buga rahoton tare da ƙarewar da ba daidai ba.
Samfura huɗu masu kwafi
1) Ragewar gaggawa a lokacin da abin ya faru:
Muna fuskantar taron samarwa. Alamomin rufe fuska: [ALAMOMIN]. Canje-canje na ƙarshe: [ KYAUTA / CANJI ]. Ka ba ni: (1) 3 mafi kusantar tushen haifar da hasashe a cikin tsari mai yiwuwa, (2) umarni / metric wanda zai tabbatar da kowane a cikin minti 1, (3) mafi sauri mafi sauri matakan rage SAFE (misali rollback) Magana mai mahimmanci; Faɗi cewa dole ne in tabbatar da kowace hasashe.
2) Zane-zane mara laifi:
Rubuta zane mara laifi daga bayanan abin da ya faru a kasa. Sassan: Takaitawa, Tasiri (mai amfani/tsawon lokaci/farashi), Timeline, Tushen (s), Abin da ya tafi da kyau, Abin da ya yi muni, Abubuwan Ayyuka (kowanne tare da mai shi + filin kwanan wata). Mayar da hankali kan suna, tsari da tsarin. Bayanan kula: [MASKED]
3) 5 Me yasa bincike:
Gina sarkar "5 Whys", farawa da alama mai zuwa: [ALAMOMIN].Nuna idan akwai reshe fiye da ɗaya a kowane mataki. Kusa da kowane "me yasa" rubuta shaida (log/metric) wanda zan duba don tabbatar da ita. A ƙarshe, yi alama kan matakan da ba a tabbatar da su ba tukuna.
4) Ƙirƙirar abubuwa masu aiki:
Dangane da tushen wannan dalili, ba da shawarar abubuwan da za a iya aiwatarwa waɗanda za su hana aukuwar aukuwa iri ɗaya sake faruwa. Rarraba kowane abu ta hanyar: (a) rigakafi, ganowa ko raguwa, (b) ƙwaƙƙwaran ƙima, (c) tasiri. Tsara ta mafi girman tasiri/matsayin ƙoƙari. Tushen dalili: [X]
Rauni mai ƙarfi / Ƙarfi mai ƙarfi
Rauni: "Sabis ɗin ya fado, me zan yi?"
Sakamako: babu mahallin; AI na iya ba da shawarwari na gaba ɗaya waɗanda ba su dace da shari'ar ku ba, har ma suna iya fito da tabbataccen dalili.
Ƙarfafa: "Sabis ɗin biyan kuɗi na samarwa yana ba da 5xx na minti 5. Ƙarshen ƙaddamarwa na ƙarshe shine 6 mintuna da suka wuce. Ba da 3 mafi kusantar tushen tushen hasashe a cikin tsari na yiwuwar, gaya wa umarnin da zai tabbatar da kowannensu, kuma ya ba da shawara mafi sauri mafi aminci. Kada ku kasance takamaiman, bayyana cewa ina buƙatar tabbatarwa. "
Bambanci: gaggawa na biyu yana ba da alamar, lokaci, da canji na ƙarshe; yana buƙatar hasashe + tabbaci + raguwa kuma yana kiyaye AI mara kyau.
Kuskuren gama gari
- Neman ainihin tushen dalilin kafin ragewa. Yana jinkirta dakatar da zubar jini kuma yana ƙara MTTR.
- Buga hasashen farko na AI ba tare da tabbatar da shi ba. Ruwa amma tushen karya yana haifar da zubewa cikin rahoton.
- Harshen zargi. Rubutun bayan mutuwa ba tare da suna ba yana haɓaka ɓoyewa da maimaita kuskure.
- Rahoton da ya dace ba tare da bullet point ba. Ba za a taɓa aiwatar da shawarwari ba tare da mai shi da kwanan wata ba.
- Raba bayanan taron ba tare da rufe shi ba. Postmortem yana zuwa ga ɗimbin masu sauraro; bayanan sirri/na sirri sun zube.
- Ba shirya hanyar juyawa a gaba ba. Idan juyawa baya aiki, raguwa yana raguwa.
a takaice
Gudanar da abin da ya faru game da ganowa da sauri, ragewa, warwarewa da koyo daga abubuwan da ba makawa; MTTD da MTTR sune ma'auni masu mahimmanci. Ƙa'idar zinariya ita ce "raguwa da farko, bincika daga baya" kuma komawa zuwa sanannen siga mai kyau shine sau da yawa mafi sauri ragewa. AI yana da kima wajen taƙaita rajistan ayyukan a lokacin taron, taƙaita hasashe, da kuma samar da zane-zane marasa aibu bayan taron - amma alhakinku ne don inganta kowane tushen tushen hasashe tare da bayanai, kawar da harshen zargi, da kuma rufe bayanan taron.
Aikin aikace-aikace
Yi la'akari da abin da ya gabata (ko almara). (1) Samun AI don haifar da hasashe da matakan tabbatarwa tare da samfurin "hanzarin yanayin kan-ganin"; Ka lura da wace hasashe za a iya tabbatar da bayanan. (2) Zana rahoto ta amfani da samfurin "ba mai laifi ba bayan mutuwa" kuma cika shi da gaskiya. (3) Gano aƙalla abubuwa biyu masu aiki kuma sanya mai shi da kwanan wata ga kowane.
jerin abubuwan dubawa
- [ ] A lokacin da abin ya faru, na fara tunanin ragewa (juyawa / rufewa) kuma na bar tushen tushen har sai daga baya.
- [] Na tabbatar da kowane tushen tushen hasashe na AI tare da log/metric.
- [ ] Na rubuta shi a cikin harshen da ba ya zargi bayan mutuwa, yana mai da hankali kan tsari da tsarin.
- [ ] Na sanya kowane abu mai aiki da mai shi da kwanan wata.
- [ ] Na rufe sirrin da bayanan sirri daga bayanan taron da na ba AI.
- [ ] Na sanya matakin tsanani daidai gwargwadon tasirin.