பதிவு பகுப்பாய்வு மற்றும் கவனிப்பு

ஆதாயங்கள்:

• பெரிய லாக் டம்ப்களை மறைத்து வடிகட்டுவதன் மூலம் அவற்றை AIக்கு சுருக்கி, காலவரிசையை உருவாக்கும் திறன்
• AI ஆல் நிறுவப்பட்ட நேர உறவுகளை கருதுகோள்களாக மதிப்பிட முடியும், காரணமல்ல
• மூல காரணக் கருதுகோளை அளவீடுகள் மற்றும் குறியீடுடன் சரிபார்த்து, பிரேத பரிசோதனை ஓவியத்தைத் தயாரிக்கும் திறன்

ஒரு மென்பொருள் தயாரிப்பில் (நேரடி சூழல்) இயங்கும் போது, தடயங்கள், அளவீடுகள் மற்றும் பதிவுகள் (அது இயங்கும் போது பயன்பாடு உருவாக்கிய நேர முத்திரை பதிவு வரிகள்) மட்டுமே அது என்ன செய்கிறது என்பதை உங்களுக்குத் தெரிவிக்கும். செயலிழப்பின் போது ஆயிரக்கணக்கான, சில சமயங்களில் மில்லியன் கணக்கான பதிவுக் கோடுகளிலிருந்து அர்த்தமுள்ள சமிக்ஞையை இழுப்பது ஒரு சம்பவத்தின் பதிலின் மிகவும் அழுத்தமான மற்றும் நேர நெருக்கடியான தருணமாகும். தனியுரிமை மற்றும் சரிபார்ப்பு வரம்புகளை நீங்கள் மதிக்கும் வரை - இங்கே, AI ஒரு உதவியாளராக இருக்கலாம், பாரிய உரைகளைச் சுருக்கி, வடிவங்களைப் பிரித்தெடுத்தல் மற்றும் கருதுகோள்களை உருவாக்குகிறது.

இந்த யூனிட்டில், AI ஐப் பயன்படுத்தக் கற்றுக்கொள்கிறோம் - ஒரு அமைப்பின் வெளிப்புற வெளியீடுகளைப் பார்த்து அதன் உள் நிலையைப் புரிந்துகொள்ளும் திறன்: பதிவு இரைச்சலில் இருந்து பொருளைப் பிரித்தெடுத்தல், ஒரு பிழையின் காலவரிசையை நிறுவுதல், மீண்டும் மீண்டும் வரும் வடிவங்களைக் கண்டறிதல் மற்றும் போஸ்ட்மார்ட்டம் வரைதல். முன் எச்சரிக்கை: மூல உற்பத்தி பதிவுகள் பெரும்பாலும் தனிப்பட்ட தரவு மற்றும் இரகசியங்களைக் கொண்டிருக்கும்; அவற்றை ஒரு AI கருவியில் தற்செயலாக ஒட்டுவது கடுமையான மீறலாகும்.

பதிவுகள் ஏன் கடினமாக இருக்கின்றன, ஏன் AI பயனுள்ளதாக இருக்கிறது?

பதிவுகள் மூன்று காரணங்களுக்காக கடினமாக உள்ளன: ஒலி (அதிகமானவை உள்ளன), சத்தம் (பல வரிகள் பொருத்தமற்றவை), மற்றும் ஒழுங்கீனம் (ஒரு நிகழ்வு வெவ்வேறு சேவைகளின் பதிவுகள் முழுவதும் சிதறிக்கிடக்கிறது). இந்தக் குவியலில் மனிதக் கண் சோர்வடைந்து முக்கியமான வரியைத் தவறவிடுகிறது.

AI பெரிய அளவிலான உரைகளைத் தொகுத்து, திரும்பத் திரும்ப வரும் வடிவங்களை எண்ணி, "அந்த பிழைகள் வெடிப்பதற்கு சற்று முன்பு என்ன மாறிவிட்டது?" இருப்பினும், இரண்டு வரம்புகள் உள்ளன போன்ற நேர உறவுகளை நிறுவுவதில் இது சக்தி வாய்ந்தது. முதலாவது சூழல் சாளரம்: ஒரு மாதிரியில் நீங்கள் பொருத்தக்கூடிய பதிவுகளின் அளவு குறைவாக உள்ளது, எனவே நீங்கள் முதலில் வடிகட்டவும் மாதிரி செய்யவும் வேண்டும். இரண்டாவதாக, சரிபார்ப்பு: AI சொல்வது "இங்கே மூல காரணம்" என்பது ஒரு கருதுகோள்; அளவீடுகள் மற்றும் குறியீட்டைக் கொண்டு உறுதிப்படுத்தாமல் ஒரு முடிவை எடுக்க வேண்டாம்.

எச்சரிக்கை: மூல தயாரிப்பு பதிவுகளில் ஐபி முகவரி, மின்னஞ்சல், டோக்கன், அமர்வு ஐடி மற்றும் சில நேரங்களில் வெளிப்படையான ரகசியம் இருக்கலாம். AIக்கு உணவளிக்கும் முன் அவற்றை மறைக்கவும் அல்லது நிறுவனத்தால் அங்கீகரிக்கப்பட்ட, தரவு-பாதுகாக்கப்பட்ட கருவிகளை மட்டுமே பயன்படுத்தவும். இந்த தலைப்பை நாங்கள் அலகு 10 இல் ஆழப்படுத்துகிறோம்.

படிப்படியாக: பதிவிலிருந்து மூல காரணம் வரை

1. நேர சாளரத்தை சுருக்கவும். நிகழ்வு தொடங்கிய நிமிடங்களைத் தீர்மானிக்கவும்; அந்தச் சாளரத்தை நாள் முழுவதும் அல்லாமல் ஆராயுங்கள்.
2. சத்தத்தை வடிகட்டவும். மீண்டும் மீண்டும் வரும், பாதிப்பில்லாத கோடுகளை களையெடுக்கவும்; பிழை (ERROR), எச்சரிக்கை (எச்சரிக்கை) மற்றும் முதல் விலகல் தருணத்தில் கவனம் செலுத்துங்கள்.
3. முகமூடி முக்கிய தரவு. தனிப்பட்ட தரவு மற்றும் ரகசியங்களை AIக்கு வழங்குவதற்கு முன் அவற்றை சுத்தம் செய்யவும்.
4. சுருக்கம் மற்றும் காலவரிசையை உருவாக்கவும். நிகழ்வை ஒரு காலவரிசையில் (“முதலில் இது, பிறகு அது”) சுருக்கமாகக் கூற AIயிடம் கேளுங்கள்.
5. அளவீடுகள் மற்றும் குறியீட்டுடன் கருதுகோளைச் சரிபார்க்கவும். AI சுட்டிக்காட்டிய காரணம்; டேஷ்போர்டு, தொடர்புடைய குறியீடு மற்றும் வரிசைப்படுத்தல் காலக்கெடு, பொருந்தினால் உறுதிப்படுத்தவும்.
6. கற்றதை எழுத்தில் வையுங்கள். போஸ்ட்மார்ட்டம் ஸ்கெட்ச் செய்து, தடுப்பு நடவடிக்கைகளைப் பட்டியலிடவும்.

மூன்று சிறிய வழக்குகள்

வழக்கு 1 - 5 நிமிடங்களில் 40,000 வரிகள் சுருக்கப்பட்டுள்ளன. ஒரு கட்டணச் சேவை 12 நிமிடங்களுக்கு இடைப்பட்ட பிழையைப் புகாரளித்தது. குழுவானது முகமூடி செய்யப்பட்ட பதிவுகளின் தொடர்புடைய 20 நிமிட சாளரத்தை (தோராயமாக 40,000 வரிகள், மாதிரி) AI க்கு அளித்தது மற்றும் ஒரு காலவரிசையை உருவாக்கியது. சார்பு சேவையின் மறுமொழி நேரம் 200 ms இலிருந்து 8 வினாடிகளாக அதிகரித்த தருணத்துடன் பிழை வெடித்தது என்பதை மாதிரி காட்டுகிறது. குழு இதை டாஷ்போர்டில் உறுதிப்படுத்தியது மற்றும் 10 நிமிடங்களில் காரணத்தைக் குறைத்தது.

வழக்கு 2 - தவறான தொடர்பு. மற்றொரு சம்பவத்தில், கிரான் (திட்டமிடப்பட்ட பணி) ஓட்டத்தின் போது "அதே நேரத்தில்" பிழைகள் நடக்கின்றன என்று AI குற்றம் சாட்டியது. குழு அளவீடுகளைச் சரிபார்த்தபோது, ​​நிகழ்விற்கு முன்பே கிரான் முடிந்துவிட்டதைக் கண்டார்கள்; தொடர்பு தற்செயலாக இருந்தது. உண்மையான காரணம் நினைவாற்றல் கசிவு. பாடம்: AI ஆல் நிறுவப்பட்ட நேர தொடர்பு ஒரு துப்பு, ஆதாரம் அல்ல.

வழக்கு 3 - பிரேத பரிசோதனை துரிதப்படுத்தப்பட்டது. ஒரு செயலிழப்புக்குப் பிறகு, குழு (முகமூடி) செய்தி டிரான்ஸ்கிரிப்ட் மற்றும் டைம்லைனை நிகழ்வு சேனலில் இருந்து AI க்கு அளித்தது மற்றும் அது ஒரு போஸ்ட்மார்ட்டம் ஸ்கெட்ச்சை உருவாக்கியது: சுருக்கம், தாக்கம், காலவரிசை, மூல காரணம், செயல்கள். மனித ஆசிரியர் உண்மைகளை சரிசெய்து செயல் உரிமையாளர்களை நியமித்தார். வழக்கமாக 2 மணிநேரம் எடுக்கும் ஆவணம், மிகவும் சீரான அமைப்புடன் சுமார் 40 நிமிடங்களில் முடிக்கப்பட்டது.

நான்கு நகலெடுக்கக்கூடிய டெம்ப்ளேட்கள்

பதிவுச் சுருக்கம் மற்றும் காலவரிசை (முகமூடிப் பதிவோடு):

முகமூடி செய்யப்பட்ட தயாரிப்பு பதிவின் நிகழ்வு சாளரம் கீழே உள்ளது.1) நிகழ்வை ஒரு காலவரிசை காலவரிசையில் ஊற்றவும் (முதல் விலகலின் தருணத்தைக் குறிக்கவும்).2) அடிக்கடி நிகழும் பிழை/எச்சரிக்கை வகைகளை எண்ணி தொகுக்கவும்.3) "சற்றுமுன் என்ன மாறிவிட்டது?" கேள்விக்கான வேட்பாளர் நிகழ்வுகளை பட்டியலிடுங்கள். இவை கருதுகோள்கள்; "சரிபார்க்கப்பட வேண்டும்" எனக் குறிக்கவும். {{பதிவுகள்}}

பிழை வடிவ பிரித்தெடுத்தல்:

இந்த பதிவு வரிகளில் தொடர்ச்சியான பிழை வடிவங்களைக் கண்டறியவும். ஒவ்வொரு வடிவத்திற்கும்: மாதிரி வரி (முகமூடி), மதிப்பிடப்பட்ட ஆதாரம் மற்றும் சாத்தியமான பொருள். அரிதான ஆனால் முக்கியமான ஒற்றைப் பிழைகளை தனி "கவனம்" பட்டியலில் சேகரிக்கவும்.{{பதிவுகள்}}

கட்டமைக்கப்பட்ட வினவல்/வடிகட்டி உருவாக்கம்:

{{log tool: grep/jq/Kibana KQL/CloudWatch Insights}}க்கு, பின்வரும் நிபந்தனையைப் பூர்த்தி செய்யும் வினவலை எழுதவும்: {{எ.கா. கடந்த 15 நிமிடத்தில் 5xx பிழைகள், பயனர் X}} தவிர்த்து. வினவலை விளக்கவும்; நீங்கள் டொமைன் பெயர்களை உருவாக்கவில்லை என்பதை உறுதிப்படுத்திக் கொள்ளுங்கள், உங்களுக்கு உறுதியாக தெரியவில்லை என்றால் கேளுங்கள்.

பிரேத பரிசோதனை ஓவியம்:

பின்வரும் (முகமூடி) நிகழ்வு காலவரிசையில் இருந்து பிரேத பரிசோதனை ஓவியத்தை எழுதவும்: சுருக்கம் / தாக்கம் (காலம், பயனர் பாதிக்கப்பட்டது) / காலவரிசை / மூல காரணம் / நன்றாக நடந்தது / செயல்கள் (ஒவ்வொருவருக்கும் உரிமையாளர் புலத்தை காலியாக விடவும்). குற்றஞ்சாட்டும் மொழியைப் பயன்படுத்த வேண்டாம்; உண்மையாகவும் செயலில் ஈடுபடவும்.{{timeline}}

பலவீனமான வரியில் / வலுவான வரியில்

பலவீனம்: "இந்த பதிவுகளைப் பாருங்கள், என்ன தவறு?" (தனிப்பட்ட தரவுகளுடன், முழு நாளின் மூலப் பதிவு, இலக்கற்றது.)

வலிமையானது: "கீழே 14:02–14:20 இலிருந்து (5xxs வரை வடிகட்டப்பட்ட) முகமூடி செய்யப்பட்ட தயாரிப்பு பதிவு உள்ளது. இந்தச் சாளரத்தில், பிழை வெடித்த தருணத்தைக் கண்டறிந்து, அடிக்கடி ஏற்படும் பிழை வகையை எண்ணி, வெடிப்பதற்கு முன் உடனடியாக 60 வினாடிகளில் தோன்றிய விலகல்களை பட்டியலிடவும்; அவை அனைத்தையும் 'கருதுகோள்' எனக் குறிக்கவும்."

சக்திவாய்ந்த பதிப்பு; இது நேர சாளரத்தை சுருக்கி, பதிவை வடிகட்டி மற்றும் மறைக்கிறது, தெளிவான கேள்வியைக் கேட்கிறது மற்றும் வெளியீடு ஒரு கருதுகோள் என்பதை ஆரம்பத்தில் இருந்தே நிறுவுகிறது.

தேடுதல்

AI வலிமையானது

வரம்பு / சரிபார்ப்பு

பெரிய பதிவு சுருக்கம்

ஆம், வேகமாக

மாதிரி இழப்பு இருக்கலாம்

நேர உறவை நிறுவுதல்

குறிப்புகளை உருவாக்குகிறது

தொடர்பு ≠ காரணம்

வினவல்/வடிகட்டி உருவாக்கம்

நல்ல வரைவு

டொமைன் பெயர்கள் உண்மையானதா?

போஸ்ட்மார்ட்டம் ஸ்கெட்ச்

அமைப்பு மற்றும் மொழி

வழக்குகள் மனிதர்களால் உறுதிப்படுத்தப்பட்டுள்ளன

தொடர்பு என்பது காரணமல்ல

பதிவு பகுப்பாய்வில் மிகவும் பொதுவான ஆபத்து "அது ஒரே நேரத்தில் நடந்தது, அதனால் தான்" தவறானது. AI இந்த வலையில் மனிதர்களை விட எளிதாகவும் இல்லையென்றாலும் எளிதில் விழுகிறது; ஏனெனில் உரையில் ஒரே நேரத்தில் இருப்பது ஒரு வலுவான சமிக்ஞை என்று அது நினைக்கிறது. ஒரு நிகழ்வு உண்மையில் மற்றொரு நிகழ்வுக்கு வழிவகுக்கிறது என்று சொல்ல முடியும்; நேரம், பொறிமுறை மற்றும், முடிந்தால், மீண்டும் மீண்டும் தேவை. AI நிறுவும் ஒவ்வொரு காரணத்திற்காகவும், "இதை உறுதிப்படுத்தும் வேறு என்ன சான்றுகள்?" என்ற கேள்வியுடன் சோதிக்கவும்.

உதவிக்குறிப்பு: AI இல் உள்நுழையும்போது, ​​டெக்ஸ்ட் டம்ப்பிற்குப் பதிலாக, முடிந்தால், முதலில் வினவல்/வடிகட்டியை அச்சிட்டு உங்கள் வாகனத்தில் இயக்கவும்; இந்த வழியில் நீங்கள் இருவரும் முக்கியமான தரவைக் குறைத்து, மாதிரியின் சூழல் சாளரத்தை மிகவும் முக்கியமான வரிசைகளாகப் பிரிக்கலாம்.

பொதுவான தவறுகள்

• அசல், முகமூடி இல்லாத பதிவை ஒட்டுதல். தனிப்பட்ட தரவு மற்றும் இரகசியங்களை வெளிப்படுத்துதல்; தனியுரிமையின் கடுமையான மீறல்.
• நாள் முழுவதும் ஒரே நேரத்தில் கொடுப்பது. இது சூழல் சாளரத்தை மீறுகிறது, சமிக்ஞை சத்தத்தில் மூழ்கியது.
• காரணத்திற்கான தவறான தொடர்பு. AI ஆல் நிறுவப்பட்ட நேர உறவு ஒரு துப்பு, ஆதாரம் அல்ல.
• உருவாக்கப்பட்ட டொமைன் பெயரைக் கொண்ட வினவலை நம்புதல். மாதிரி இல்லாத ஒரு பதிவு புலப் பெயரை பரிந்துரைக்கலாம்; திட்டத்துடன் சரிபார்க்கவும்.
• போஸ்ட்மார்ட்டத்தை சரிபார்க்காமல் வெளியிடுவது. உண்மைகள் மற்றும் தாக்க புள்ளிவிவரங்கள் மனிதனால் உறுதிப்படுத்தப்பட வேண்டும்.

சுருக்கமாக

AI என்பது பதிவுப் பகுப்பாய்வில் வால்யூம் மற்றும் இரைச்சலை முறியடிக்கும் ஒரு சக்திவாய்ந்த கருவியாகும்: பெரிய டிரான்ஸ்கிரிப்டுகளைச் சுருக்கி, காலக்கெடுவை நிறுவுதல், வடிவங்களைப் பிரித்தெடுத்தல் மற்றும் போஸ்ட்மார்ட்டம் ஓவியங்களைத் தயாரித்தல். ஆனால் மூன்று வரம்புகளை நினைவில் கொள்ளுங்கள்: உணர்திறன் தரவை மறைக்காமல் ஏற்றுமதி செய்யாதீர்கள், சூழல் சாளரத்திற்கு ஏற்றவாறு வடிகட்டவும் மற்றும் மாதிரி செய்யவும், மேலும் ஒவ்வொரு காரண உரிமைகோரலையும் அளவீடுகள் மற்றும் குறியீட்டுடன் சரிபார்க்கவும். தொடர்பு என்பது காரணமல்ல; AI துப்பு கொடுக்கிறது, நீங்கள் ஆதாரத்துடன் முடிவெடுக்கிறீர்கள்.

விண்ணப்ப பணி

உங்களிடம் உள்ள நிகழ்வு அல்லது சோதனை சூழல் பதிவிலிருந்து 15-20 நிமிட சாளரத்தைத் தேர்ந்தெடுக்கவும். முதலில் தனிப்பட்ட தரவு மற்றும் இரகசியங்களை மறைக்கவும் (அல்லது ஒரு செயற்கை பதிவை உருவாக்கவும்). "பதிவு சுருக்கம் மற்றும் காலவரிசை" டெம்ப்ளேட்டைக் கொண்டு AI இலிருந்து ஒரு காலவரிசை மற்றும் அடிக்கடி ஏற்படும் பிழை வகைகளைப் பிரித்தெடுக்கவும். உங்களிடம் உள்ள மெட்ரிக் அல்லது குறியீட்டின் துண்டுடன் AI முன்வைத்த மூல காரணக் கருதுகோளைச் சரிபார்க்க முயற்சிக்கவும்: கருதுகோள் நிலைத்துள்ளதா அல்லது தவறான தொடர்பு உள்ளதா? உங்கள் கண்டுபிடிப்பை ஒரு வாக்கியத்தில் எழுதுங்கள்.

சரிபார்ப்பு பட்டியல்

• AIக்கு பதிவை வழங்குவதற்கு முன் தனிப்பட்ட தரவு மற்றும் ரகசியங்களை மறைக்கிறேன்.
• [ ] நான் பகுப்பாய்வை குறுகிய நேர சாளரமாக குறைத்து வடிகட்டுகிறேன்.
• [ ] AI ஆல் நிறுவப்பட்ட நேர உறவுகளை நான் கருதுகோள்களாகப் பார்க்கிறேன், காரணம் அல்ல.
• [ ] மூல காரண உரிமைகோரலை அளவீடுகள் மற்றும் குறியீடு மூலம் சரிபார்க்கிறேன்.
• [ ] நான் உருவாக்கும் வினவல்கள்/வடிப்பான்களின் டொமைன் பெயர்கள் உண்மையானவை என்பதை உறுதிப்படுத்துகிறேன்.
• போஸ்ட்மார்ட்டம் ஸ்கெட்ச்சில் உள்ள உண்மைகள் மற்றும் புள்ளிவிவரங்களை நான் மனிதநேயத்துடன் சான்றளிக்கிறேன்.