Vöktun á afkastagetu og afköstum: lestur mælikvarða og áætlanagerð til framtíðar

Hagnaður:

• Geta til að túlka mælikvarða rétt með gervigreindarstuðningi með því að nota hundraðshluta (p95/p99) og grunnlínu í stað meðaltals
• Geta til að aðgreina árstíðarsveiflu frá þróun og framleiða afkastagetu sem bjartsýnis-svartsýnissvið frekar en eina tölu
• Skilningur á því að auðlindafjárfesting og viðvörunarþröskuldsákvarðanir eru mannlegar, ásamt afgreiðslutíma auðlinda og viðskiptasamhengi.

Vöktun á getu og afköstum: Að lesa mælikvarða með gervigreind og skipuleggja framtíðina

Þú getur ekki séð heilsu kerfis með eigin augum; Þú skilur það í gegnum mælikvarða. Mæling er tímaháð tölugildi mælanlegra eiginleika kerfis: CPU notkun, minnisnotkun, laust pláss á diski, netleynd, beiðnir á sekúndu. Frammistöðuvöktun safnar þessum mælingum stöðugt og svarar spurningunni "er kerfið í lagi núna?" Afkastagetuáætlun gengur einu skrefi lengra: Það svarar spurningunni "á þessum hraða, hvenær verð ég ófullnægjandi, hvenær ætti ég að kaupa nýjar auðlindir?" Hér er gervigreind mjög hæfur aðstoðarmaður við að túlka hauga af mæligildum, merkja frávik, lesa þróunina og búa til framtíðarvörpun. En einn fyrirvari ríkir umfram allt: gervigreind dregur út mynstur úr sögulegum gögnum; Þú ert sá sem tekur ákvarðanir um auðlindafjárfestingu, stigstærð og viðvörunarþröskuld með samhengi.

Í þessari einingu eru eftirlitshugtök eins og grunnlína (venjuleg hegðunarlína), frávik (frávik frá eðlilegu), hundraðshluti (percentile); Metrísk túlkun með gervigreind; þróun og vaxtarspá; og þú munt læra að stilla réttan viðvörunarþröskuld.

Meðaltal lygar: hvers vegna hundraðshluti?

Algengustu mistökin við mælingar eru að mæla allt með meðaltali. Segjum að viðbragðstími þinn sé 200 ms að meðaltali. Hljómar vel. En 5% notenda gætu verið að bíða í 8 sekúndur; Meðaltalið leynir þessu. Þess vegna nota fagmenn hundraðshluti: p95 = "95% beiðna eru undir þessu tímabili." Ef p95 viðbragðstíminn er 8 sekúndur, er einn af hverjum tuttugu notendum að upplifa hræðilega reynslu - meðaltalið sýnir það aldrei. Þegar þú gefur gervigreindinni mælikvarða skaltu vera ljóst hvaða tölfræði þú vilt: "túlkaðu p50, p95 og p99 fyrir mér, ekki meðaltalið." Þessi eina venja sýnir falin vandamál.

Ábending: Horfðu á hundraðshluta fyrir hverja mælikvarða sem varðar notendaupplifun (viðbragðstími, leynd); p95/p99 í stað meðaltals kemur þér í hinn raunverulega þjáða minnihlutahóp. Í auðlindamælingum (CPU, minni), skoðaðu bæði hámarksgildi og viðvarandi gildi.

Það er ekkert frávik án grunnlínu

Áður en þú getur sagt hvort mælikvarði sé „óeðlilegt“ þarftu að vita „eðlilegt“. Grunnlína er dæmigerð hegðunarsvið kerfisins á heilbrigðum dögum: "þessi þjónusta virka daga hádegi CPU er venjulega 40–60%". Án grunnlínu geturðu ekki vitað hvort 70% gildi er skelfilegt eða eðlilegt. Þú getur stillt grunnlínu með því að gefa söguleg heilbrigð gögn til gervigreindar og segja "dragið út eðlilegt svið og daglegt/vikulegt mynstur þessa mælikvarða". Síðan túlkar þú nýju gögnin í samræmi við þessa grunnlínu: "hvar er þetta gildi í eðlilegu?" Frávik er verulegt og viðvarandi frávik frá grunnlínu - eitt skyndilegt stökk er oft hávaði.

Skref fyrir skref: getuvörpun

1. Safnaðu hreinni og fullnægjandi sögu. Þróun krefst að minnsta kosti nokkurra vikna af gögnum, helst mánaðarlega. Spá sem gerð er með litlum gögnum er ágiskun, ekki spá.
2. Aðskilin árstíðabundin. Umferð dregst saman um helgina, eykst í lok mánaðarins og springur út í átakinu. Segðu gervigreindinni þessar lotur svo það rugli ekki vexti saman við árstíðabundnar sveiflur.
3. Taktu trendið af. "Hversu mörg GB að meðaltali hefur þessi diskur stækkað á viku á síðustu 8 vikum?" AI reiknar út vaxtarhraða.
4. Biddu um vörpun, fjarlægðu það. "Á þessum hraða, hvenær verður diskurinn 90% fullur?" — en biðjið um bjartsýn/svartsýnan tíma, ekki eina stefnumót. Framtíðin er óráðin; oddatala er röng nákvæmni.
5. Ákvarða ákvörðunarþröskuldinn með fólki. Ef vörpunin segir „Það verður klárað á 6 vikum“, íhugar þú innkaupatímann (kaup, samþykki) og ákveður hvort grípa eigi til aðgerða í dag.
6. Stilltu vekjarann ​​rétt. Mjög viðkvæm viðvörun framleiðir hávaða og þreytu viðvörunar; of laus viðvörun mun missa af atburðinum. Fáðu ráðleggingar um þröskuld frá gervigreindinni, en ákvarðaðu lokaþröskuldinn með þínu eigin áhættuþoli.

þrjú smámál

Mál 1 - Meðaltal falið, bls. 99 sýnd. Eitt lið hélt að API þeirra væri "180 ms að meðaltali, bara fínt." Þegar ég færði tölfræðina í gervigreindina og bað um hundraðshlutatúlkun, kom í ljós að p99 var 6.400 ms - ein af hverjum hundrað beiðnum var hægari en 6 sekúndur. Orsökin var hæg gagnagrunnsfyrirspurn. Þó meðaltalið virtist heilbrigt, varð minnihlutinn fyrir hræðilegri reynslu.

Tilfelli 2 - Varað við vörpun með 3 vikna fyrirvara. Kerfisstjóri gaf gervigreindargögn um umráðadiskinn. Gervigreind dró ályktun um vikulega vöxt ~7 GB og spáði því að á núverandi hraða myndi 90% nást innan 19 daga, með bjartsýni-svartsýnisbilinu 16–23 daga. Þar sem það tók 10 daga að útvega nýja diska pantaði teymið strax og kom í veg fyrir stöðvunina áður en það átti sér stað.

Tilfelli 3 - Til baka frá fölsku fráviki. Vöktunarviðvörun fór af stað á hverju sunnudagskvöldi sem sagði að örgjörvinn væri að fara upp í 95%. Áður en hann skelfdi lét verkfræðingurinn AI hækka grunnlínuna: þetta stökk var fyrirhugað varaverk sem gerðist á sama tíma í hverri viku, svo það var hluti af norminu. Það var ekki frávik; grunnlínu vantaði. Viðvörunarþröskuldurinn hefur verið leiðréttur fyrir það tímabil og óþarfa næturvökun eru horfin.

Fjögur afritanleg sniðmát

1) Metrísk túlkun (hlutfallshlutfall):

Hér að neðan eru mælingar fyrir [þjónustu] viðbragðstíma (grímur). Athugaðu við mig p50, p95 og p99, ekki meðaltalið. Hver þýðir munurinn á p99 og p50, hvaða vandamál notendaupplifunar gefur það til kynna? Ekki bæta við tilbúnum gildum, túlkaðu bara gögnin sem ég gef þér. Gögn: [mælingar]

2) Grunnlínu frádráttur:

Hér að neðan eru heilbrigð [mæling] gögn fyrir síðustu 4 vikur. Dragðu út (1) venjulegt svið (2) daglegt og vikulegt mynstur (t.d. næturlægsta, hádegishá) þessa mælikvarða. Þá mun ég gefa eitt nýtt gildi; flokkaðu það sem "eðlilegt/varúð/óeðlilegt" miðað við þessa grunnlínu. Gögn: [söguleg mæligildi]

3) Afkastagetu vörpun (með svið):

Hér að neðan eru síðustu 8 vikur af umráðagögnum [tilfanga]. (1) Reiknaðu vikulega meðalvöxt, (2) tilgreindu árstíðabundin áhrif, (3) áætlaðu tímann til að ná 90% þröskuldinum á núverandi hraða, með BJÁTTSTÆÐU og SVÖLLUN sviðum. Gefðu upp eina dagsetningu, gefðu upp bil og skrifaðu niður forsendur þínar. Gögn: [tímaröð]

4) Tilmæli um viðvörunarþröskuld:

Grunnlínan mín fyrir [mæling] er [svið]. Markmið mitt er að lágmarka falskar viðvaranir án þess að missa af raunverulegum vandamálum. Gefðu mér tilmæli um (1) viðvörun og (2) mikilvægan þröskuld, rökstyðjið hvert og metið hættuna á þreytu viðvörunar. Ég mun ákveða lokaþröskuldinn.

Veik kvaðning / Sterk kvaðning

Veik kvaðning:

Er netþjónninn minn hægur?

Það er ekkert samhengi, engin mælikvarði og engin grunnlína. Gervigreindin þekkir hvorki skilgreininguna á „hægt“ né hefur eðlilegt gildi til að bera það saman við. Svarið er tóm ágiskun.

Öflug tilvitnun:

Hlutverk þitt: sérfræðingur í getuskipulagningu. Hér að neðan eru síðustu 14 dagar af p95 viðbragðstíma og beiðnir/sekúndu gögn um API (gríma). Grunnlínan mín er 250-400 ms fyrir p95. Segðu mér (1) merktu við dagana sem fóru út fyrir grunnlínu á síðustu 14 dögum, (2) segðu mér hvort sýnilegt samband sé á milli viðbragðstíma og álags beiðna (sem tilgáta), (3) spáðu fyrir um hvert p95 fer eftir 30 daga ef þessi þróun heldur áfram. Gögn: [tímaröð]

Metrísk gerð

röng mæling

nákvæm mæling

viðbragðstíma

Bara meðaltal

p50, p95, p99

Örgjörvi/minni

augnabliks gildi

Hámark + viðvarandi + grunnlína

diskur vöxtur

Umráð í dag

Vikuleg þróun + vörpun

Frávik

stakt hopp

Stöðugt frávik frá grunnlínu

viðvörun

Handahófskennt einn þröskuldur

Rökstudd viðvörun + mikilvægur þröskuldur

Algeng mistök

• Mælir allt með meðaltali. Meðaltalið felur slæma reynslu fárra; Sjá prósentustig.
• Leita að frávikum án grunnlínu. Þú getur ekki sagt að gildi sé óeðlilegt án þess að vita hvað er eðlilegt; Þú býrð til falska viðvörun.
• Að misskilja árstíðarsveiflu fyrir trend. Að líta á herferðarhámarkið sem varanlegan vöxt og taka óþarfa úrræði kostar peninga.
• Að treysta á oddatöluvörpun. „Nákvæmlega 19 dagar“ er fölsk nákvæmni; Notaðu bjartsýnis-svartsýnissviðið.
• Gleymdi innkaupatíma. Liðið sem tekur ekki tillit til vörpunarþröskulds og kauptíma saman verður lent í trufluninni.

Varúð: Stefnuspá gervigreindar gerir ráð fyrir að fortíðin haldi áfram inn í framtíðina. Ný vörukynning, flutningur viðskiptavina eða byggingarbreyting truflar þessa forsendu. Það er þitt hlutverk að leiðrétta vörpunina með samhengi þínu.

Í stuttu máli

Frammistöðueftirlit svarar spurningunni "er það gott núna?" og getuáætlun svarar spurningunni "hvenær er það ekki nóg?" Gervigreind er öflugur samstarfsaðili við að túlka mælikvarða, koma á grunnlínum, flagga frávikum og spá fyrir um þróun. En meðaltalið lýgur - notaðu hundraðshluta; Án grunnlínu er ekkert frávik - komdu eðlilegu fyrst; aðskilja árstíðabundið frá þróun; og taktu vörpunina sem svið, ekki eina tölu. Auðlindafjárfesting og viðvörunarþröskuldsákvarðanir eru mannlegar, ásamt afgreiðslutíma auðlinda og viðskiptasamhengi.

Umsóknarverkefni

Taktu síðustu vikurnar af gögnum fyrir tilföng (diskur, minni, viðbragðstími) úr eigin kerfum og hyldu viðkvæm svæði. Dragðu venjulegt svið og mynstur frá með "Baseline frádráttur" sniðmátinu hér að ofan. Láttu síðan „Getuvörpun“ sniðmátið spá fyrir um hvenær þú nærð þröskuldi, með bjartsýni-svartsýnissviði. Láttu líka svartímamælinguna þína túlka með því að nota „prósentíla“ sniðmátið og athugaðu hvort það sé eitthvað sem meðaltalið er að fela. Skrifaðu niður niðurstöður þínar og aðgerðirnar sem þú munt grípa til í 5 atriðum.

gátlisti

• [ ] Horfði ég á p95/p99 í stað meðaltals í svartímamælingum?
• [ ] Hef ég fundið grunnlínu úr heilbrigðum gögnum áður en ég leita að frávikum?
• [ ] Hef ég greint árstíðabundnar sveiflur frá varanlegum þróun?
• [ ] Tók ég vörpunina sem bjartsýnis-svartsýnisbil frekar en eina dagsetningu?
• [ ] Hef ég metið innkaupatímann ásamt vörpunarþröskuldinum?
• [ ] Stillti ég viðvörunarþröskuldinn út frá eigin áhættuþoli en ekki AI ráðleggingum?