प्रयोज्यता परीक्षण विश्लेषण और निष्कर्षों का संश्लेषण

लाभ:

• कृत्रिम बुद्धि के साथ प्रयोज्य परीक्षण रिकॉर्ड और अवलोकन नोट्स को निष्कर्षों, वजन और सिफारिशों में परिवर्तित करने की क्षमता
• गंभीरता के अनुसार निष्कर्षों को रैंक करने और प्राथमिकता तालिका तैयार करने की क्षमता
• कृत्रिम बुद्धिमत्ता द्वारा छोड़े गए या बढ़ा-चढ़ाकर बताए गए निष्कर्षों को वास्तविक अवलोकन साक्ष्य के साथ सही करने की क्षमता

प्रयोज्यता परीक्षण वास्तविक उपयोगकर्ताओं को विशिष्ट कार्य देकर और उनकी निगरानी करके यह देखने की एक विधि है कि डिज़ाइन कहाँ काम करता है और कहाँ अटक जाता है। परीक्षण स्वयं आसान है; वास्तविक चुनौती इसके बाद है: रिकॉर्डिंग के घंटों, अवलोकन नोट्स के पृष्ठों और बिखरे हुए स्क्रीनशॉट को स्पष्ट, प्राथमिकता वाले निष्कर्षों में बदलना। इस संश्लेषण में कई दिन लग जाते हैं और टीमें अक्सर इसे अधूरा छोड़ देती हैं। कृत्रिम बुद्धिमत्ता इस बाधा को खोलती है: रिकॉर्ड और नोट्स को निष्कर्ष, वजन और अनुशंसा में बदलना। लेकिन यह तय करना मानवीय निर्णय है कि क्या कोई अवलोकन वास्तव में एक समस्या है और यह कितना महत्वपूर्ण है।

अवलोकन, खोज और सुझाव के बीच अंतर

संश्लेषण में तीन परतों को अलग करना महत्वपूर्ण है:

• अवलोकन: क्या हुआ, कोई टिप्पणी नहीं। "प्रतिभागी 3 ने 40 सेकंड तक 'जारी रखें' बटन खोजा।"
• ढूँढना: अवलोकनों से उभरने वाला पैटर्न। "उपयोगकर्ताओं को प्राथमिक कार्रवाई ढूंढने में परेशानी हो रही है।"
• सिफ़ारिश: क्या करें. "प्राथमिक बटन को दृश्यमान रूप से अलग दिखाता है।"

एआई इन तीन परतों को तेजी से तैयार करता है, लेकिन अक्सर अवलोकन को खोजने में भ्रमित कर देता है या एक ही अवलोकन से पूरी खोज का अनुमान लगा लेता है। आपका काम यह सत्यापित करना है कि प्रत्येक खोज के पीछे पर्याप्त अवलोकन (कितने प्रतिभागी, कितनी बार) हैं।

युक्ति: कृत्रिम बुद्धिमत्ता से कहें "प्रत्येक खोज के नीचे, वे अवलोकन जोड़ें जो इसका समर्थन करते हैं और कितने प्रतिभागियों में इसे देखा गया था।" इस तरह आप तुरंत एक ही अवलोकन से बढ़े हुए निष्कर्षों को अलग कर सकते हैं।

गंभीरता: पहले क्या ठीक करें?

सभी निष्कर्ष समान नहीं हैं. गंभीरता इंगित करती है कि किसी समस्या को कितनी तत्काल ठीक करने की आवश्यकता है और यह तीन कारकों द्वारा निर्धारित होती है:

1. प्रभाव: क्या समस्या उपयोगकर्ता को कार्य पूरा करने से रोकती है या बस उन्हें परेशान करती है?
2. आवृत्ति: कितने उपयोगकर्ता और कितनी बार?
3. व्यावसायिक प्रभाव: यह समस्या रूपांतरण, राजस्व या विश्वास पर कितना प्रभाव डालती है?

एक विशिष्ट पैमाना: क्रिटिकल (पूरी तरह से मिशन में बाधा डालता है), उच्च (गंभीर कठिनाई), मध्यम (धीमा), निम्न (कॉस्मेटिक)। एआई प्रारंभिक रैंकिंग का सुझाव दे सकता है, लेकिन अंतिम भार निर्णय - विशेष रूप से व्यावसायिक प्रभाव - के लिए टीम के संदर्भ के ज्ञान की आवश्यकता होती है।

ढूँढना

प्रभाव

आवृत्ति

महत्व

सुझाव

प्राथमिक बटन नहीं मिल सका

इससे कार्य में बाधा आती है

4/6 प्रतिभागी

आलोचनात्मक

हाइलाइट बटन

त्रुटि संदेश अस्पष्ट है

धीमा हो रहा है

3/6

उच्च

संदेश स्पष्ट करें

चिह्न का अर्थ अस्पष्ट

थोड़ी झिझक

2/6

मध्यम

टैग जोड़ें

कलर टोन पसंद नहीं आया

सौंदर्य प्रसाधन

1/6

कम

इसे बाद के लिए छोड़ दें

तीन मिनी मामले

केस 1 - 5 घंटे की रिकॉर्डिंग, आधे दिन में निष्कर्ष। एक टीम ने एआई को 6 उपयोगकर्ता परीक्षणों (कुल 5 घंटे) के नोट्स खिलाए। मॉडल ने 14 निष्कर्ष सुझाये; टीम ने प्रत्येक को अवलोकनों की संख्या के आधार पर जांचा, इसे 9 तक सीमित कर दिया और उन्हें महत्व के क्रम में स्थान दिया। संश्लेषण, जिसमें मैन्युअल रूप से 2 दिन लगते, को घटाकर आधा दिन कर दिया गया।

केस 2 - बढ़ा-चढ़ाकर की गई खोज पकड़ी गई। एआई ने एक महत्वपूर्ण निष्कर्ष में लिखा, "उपयोगकर्ता नेविगेशन को नहीं समझते हैं।" जब टीम ने सहायक टिप्पणियों को देखा, तो उन्होंने पाया कि यह एक ही प्रतिभागी के एक क्षण पर आधारित था। खोज को "मध्यम" तक डाउनग्रेड कर दिया गया और अधिक डेटा का अनुरोध किया गया। सबक: एक अकेला अवलोकन कोई आलोचनात्मक निष्कर्ष नहीं निकालता।

केस 3 - महत्वपूर्ण मुद्दा छूट गया। मॉडल ने एक आवर्ती लेकिन प्रतीत होने वाली छोटी समस्या (फ़ॉर्म ऑटो-स्क्रॉलिंग नहीं) को "कम" के रूप में गिना। जब डिजाइनर ने अवलोकनों को देखा, तो उन्हें एहसास हुआ कि इसके कारण 5 प्रतिभागियों ने कार्य छोड़ दिया और इसे "उच्च" पर सेट कर दिया। पाठ: एआई के महत्व का अनुमान अवलोकन संबंधी साक्ष्य द्वारा सही किया जाता है।

मात्रात्मक और गुणात्मक डेटा को एक साथ पढ़ना

प्रयोज्यता परीक्षण अधिकतर गुणात्मक (अवलोकन-आधारित) होता है, लेकिन इसमें मात्रात्मक (संख्यात्मक) संकेत भी होते हैं: कार्य पूरा होने की दर, कार्य की अवधि, त्रुटियों की संख्या, संतुष्टि स्कोर। सबसे शक्तिशाली संश्लेषण दोनों को जोड़ता है: "केवल 33% प्रतिभागियों ने चेकआउट कार्य (मात्रात्मक) पूरा किया, और जो पूरा करने में विफल रहे वे शिपिंग चरण (गुणात्मक) पर अटक गए।" जब आप इन्हें अलग-अलग देते हैं तो कृत्रिम बुद्धिमत्ता इन दोनों डेटा को संयोजित करने में मदद करती है; लेकिन आप संख्याओं और नमूना आकार की सटीकता की पुष्टि करते हैं। छोटे नमूनों (जैसे 5 उपयोगकर्ताओं) में प्रतिशत के बारे में बात करना भ्रामक हो सकता है; "60%" कहने की तुलना में "5 में से 3 उपयोगकर्ता" कहना अधिक ईमानदार है। मॉडल को पूर्ण संख्या में बोलने के लिए कहें।

युक्ति: एआई से कहें कि "प्रतिशत के बजाय 'कितने उपयोगकर्ता' लिखें।" छोटे नमूनों में, प्रतिशत वास्तव में जितना है उससे अधिक सटीकता का आभास देता है।

प्रतिलिपि योग्य संकेत

आपकी भूमिका: प्रयोज्य विश्लेषक। निम्नलिखित अज्ञात परीक्षण नोट्स से निष्कर्ष निकालें। प्रत्येक निष्कर्ष के लिए: 1) स्पष्ट कथन, 2) सहायक अवलोकन और कितने प्रतिभागियों ने इसे देखा, 3) प्रभाव (अवरुद्ध/धीमा/कॉस्मेटिक)। एकल अवलोकन के आधार पर निष्कर्षों को "कमजोर साक्ष्य" के रूप में चिह्नित करें। टिप्पणियाँ: <<पाठ>>

निष्कर्षों की इस सूची को महत्व के आधार पर क्रमबद्ध करें। मानदंड: प्रभाव (कार्य बाधा?), आवृत्ति (कितने प्रतिभागी?), व्यावसायिक प्रभाव। प्रत्येक निष्कर्ष को गंभीर/उच्च/मध्यम/निम्न निर्दिष्ट करें और एक तर्क लिखें। यदि आप व्यावसायिक प्रभाव के बारे में अनिश्चित हैं, तो कहें "टीम को मूल्यांकन करना चाहिए।" निष्कर्ष: <<सूची>>

प्रत्येक खोज के लिए एक ठोस, कार्रवाई योग्य डिज़ाइन अनुशंसा लिखें। सिफ़ारिश: क्या बदलेगा + यह समस्या का समाधान क्यों करता है + यह किस स्क्रीन को प्रभावित करता है। अस्पष्ट ("बेहतर करें") अनुशंसाओं से बचें। निष्कर्ष: <<सूची>>

हितधारक प्रस्तुति के लिए इस निष्कर्ष रिपोर्ट को सारांशित करें: एक संक्षिप्त कार्यकारी सारांश लिखें जिसमें 3 सबसे महत्वपूर्ण निष्कर्ष, साक्ष्य (कितने उपयोगकर्ता), और अनुशंसित कार्रवाई शामिल है। अतिशयोक्ति; नोट्स से नंबर लें। रिपोर्ट: <<पाठ>>

कमजोर संकेत/मजबूत संकेत

कमज़ोर: "इन परीक्षण अंकों से निष्कर्ष निकालें।"

परिणाम: एक मिश्रित सूची जिसमें कोई सबूत नहीं है, कोई महत्व का क्रम नहीं है, और एक ही अवलोकन को गलती से निष्कर्ष मान लिया गया है।

मजबूत: "नोट्स से एक निष्कर्ष निकालें; प्रत्येक निष्कर्ष के तहत, सहायक अवलोकन जोड़ें और कितने प्रतिभागियों में इसे देखा गया था; एक अवलोकन के आधार पर 'कमजोर साक्ष्य' के रूप में चिह्नित करें; फिर इसे प्रभाव-आवृत्ति-कार्य प्रभाव के अनुसार महत्व के क्रम में रैंक करें।"

परिणाम: साक्ष्य-आधारित, प्राथमिकता वाले, बचाव योग्य निष्कर्ष।

अंतर: मजबूत संकेत साक्ष्य की संख्या + कमजोर संकेत + महत्व मानदंड।

सामान्य गलतियाँ

• खोजने के साथ अवलोकन को भ्रमित करना। एकल "क्या हुआ" को समग्र निष्कर्ष में बदलना।
• एक ही अवलोकन से महत्वपूर्ण निष्कर्ष निकालना। आवृत्ति सत्यापित होने तक कोई भार नहीं दिया जाएगा।
• कृत्रिम बुद्धिमत्ता पर व्यावसायिक प्रभाव का निर्णय लेना। राजस्व/रूपांतरण प्रभाव के लिए संदर्भ की आवश्यकता होती है; वह उनकी टीम में हैं.
• प्राथमिकता मत दो. निष्कर्षों की अव्यवस्थित सूची टीम को पंगु बना देती है; सब कुछ एक बार में ठीक नहीं किया जा सकता.
• सुझाव अस्पष्ट छोड़ना. "बेहतर करो" लागू नहीं है; क्या, क्यों और कहाँ स्पष्ट होना चाहिए।

सारांश

प्रयोज्यता परीक्षण का महत्व रिकॉर्डिंग और नोट्स को स्पष्ट, प्राथमिकता वाले निष्कर्षों में बदलने में आता है। कृत्रिम बुद्धिमत्ता इस संश्लेषण को बहुत तेज करती है: टिप्पणियों को निष्कर्षों में एकत्रित करती है, सिफ़ारिशों का मसौदा तैयार करती है, महत्व के क्रम का सुझाव देती है। लेकिन प्रत्येक खोज के पीछे टिप्पणियों की संख्या को सत्यापित करना, एकल टिप्पणियों के आधार पर बढ़े हुए निष्कर्षों को छांटना और संदर्भ के साथ व्यावसायिक प्रभाव को महत्व देना मानवीय कार्य है। एक निष्कर्ष रिपोर्ट जो सबूतों पर आधारित है, एक निश्चित आवृत्ति है, और महत्व के क्रम में व्यवस्थित है, हितधारकों के लिए त्वरित और रक्षात्मक दोनों होगी।

आवेदन कार्य

1. प्रयोज्यता परीक्षण (वास्तविक या काल्पनिक) से नोट्स को अज्ञात करें।
2. पहले संकेत पर निष्कर्ष निकालें; प्रत्येक के अंतर्गत प्रेक्षणों की संख्या की जाँच करें।
3. निष्कर्षों को "कमजोर सबूत" के रूप में चिह्नित करें और तय करें कि अतिरिक्त डेटा की आवश्यकता है या नहीं।
4. दूसरे संकेत के साथ, महत्व के क्रम में निष्कर्षों को रैंक करें; एक टीम के रूप में व्यावसायिक प्रभाव का आकलन करें।
5. तीसरे संकेत के साथ, प्रत्येक खोज के लिए ठोस सुझाव लिखें और एक प्राथमिकता तालिका बनाएं।

चेकलिस्ट

• [ ] मैंने अवलोकन, निष्कर्ष और सुझाव को अलग-अलग परतों के रूप में रखा।
• [ ] मैंने सत्यापित किया कि कितने प्रतिभागियों ने प्रत्येक निष्कर्ष दिखाया।
• [ ] मैंने एकल अवलोकन पर आधारित निष्कर्षों को कमजोर साक्ष्य के रूप में चिह्नित किया।
• [ ] मैंने प्रभाव-आवृत्ति-कार्य प्रभाव द्वारा गंभीरता का स्तर निर्धारित किया।
• [ ] टीम के साथ व्यावसायिक प्रभाव निर्णय का मूल्यांकन किया।
• [ ] मैंने सुझावों को ठोस रूप से लिखा (क्या/क्यों/कहाँ)।