లాభాలు:
- కృత్రిమ మేధస్సుతో వినియోగ పరీక్ష రికార్డులు మరియు పరిశీలన గమనికలను కనుగొన్నవి, బరువులు మరియు సిఫార్సులుగా మార్చగల సామర్థ్యం
- తీవ్రత ప్రకారం ఫలితాలను ర్యాంక్ చేయగల సామర్థ్యం మరియు ప్రాధాన్యత పట్టికను రూపొందించడం
- కృత్రిమ మేధస్సు వాస్తవ పరిశీలన సాక్ష్యంతో విస్మరించిన లేదా అతిశయోక్తి చేసే ఫలితాలను సరిదిద్దగల సామర్థ్యం
యూజబిలిటీ టెస్టింగ్ అనేది నిజమైన వినియోగదారులకు నిర్దిష్ట టాస్క్లను ఇవ్వడం మరియు వాటిని పర్యవేక్షించడం ద్వారా డిజైన్ ఎక్కడ పనిచేస్తుందో మరియు ఎక్కడ చిక్కుకుపోయిందో పరిశీలించే పద్ధతి. పరీక్ష కూడా సులభం; అసలైన సవాలు తదనంతర పరిణామాల్లో ఉంది: గంటల రికార్డింగ్, పరిశీలన గమనికల పేజీలు మరియు చెల్లాచెదురుగా ఉన్న స్క్రీన్షాట్లను స్పష్టమైన, ప్రాధాన్యత కలిగిన అన్వేషణలుగా మార్చడం. ఈ సంశ్లేషణ చేతితో రోజులు పడుతుంది మరియు బృందాలు తరచుగా అసంపూర్తిగా వదిలివేస్తాయి. ఆర్టిఫిషియల్ ఇంటెలిజెన్స్ ఈ అడ్డంకిని తెరుస్తుంది: రికార్డులు మరియు గమనికలను కనుగొనడం, బరువు మరియు సిఫార్సుగా మార్చడం. కానీ ఒక పరిశీలన నిజంగా సమస్య కాదా మరియు అది ఎంత ముఖ్యమైనదో నిర్ణయించడం మానవ తీర్పు.
పరిశీలన, కనుగొనడం మరియు సూచనల మధ్య వ్యత్యాసం
సంశ్లేషణలో మూడు పొరలను వేరు చేయడం చాలా ముఖ్యం:
- పరిశీలన: ఏమి జరిగింది, వ్యాఖ్య లేదు. "పార్టిసిపెంట్ 3 'కొనసాగించు' బటన్ కోసం 40 సెకన్ల పాటు శోధించారు."
- కనుగొనడం: పరిశీలనల నుండి ఉద్భవిస్తున్న నమూనా. "ప్రాథమిక చర్యను కనుగొనడంలో వినియోగదారులు సమస్యను ఎదుర్కొంటున్నారు."
- సిఫార్సు: ఏమి చేయాలి. "ప్రాధమిక బటన్ దృశ్యమానంగా కనిపించేలా చేస్తుంది."
AI త్వరగా ఈ మూడు పొరలను ఉత్పత్తి చేస్తుంది, కానీ తరచుగా ఒకే పరిశీలన నుండి మొత్తం అన్వేషణను కనుగొనడం లేదా ఊహించడం ద్వారా పరిశీలనను గందరగోళానికి గురి చేస్తుంది. ప్రతి అన్వేషణ వెనుక తగినంత పరిశీలనలు (ఎంత మంది పాల్గొనేవారు, ఎన్ని సార్లు) ఉన్నారని ధృవీకరించడం మీ పని.
చిట్కా: కృత్రిమ మేధస్సు "ప్రతి అన్వేషణ క్రింద, దానికి మద్దతు ఇచ్చే పరిశీలనలను మరియు అది ఎంత మంది పాల్గొనేవారిలో కనిపించింది" అని చెప్పండి. ఈ విధంగా మీరు ఒకే పరిశీలన నుండి పెంచిన ఫలితాలను తక్షణమే వేరు చేయవచ్చు.
తీవ్రత: మొదట ఏమి పరిష్కరించాలి?
అన్ని అన్వేషణలు సమానంగా ఉండవు. సమస్యను ఎంత అత్యవసరంగా పరిష్కరించాలో తీవ్రత సూచిస్తుంది మరియు మూడు కారకాల ద్వారా నిర్ణయించబడుతుంది:
- ప్రభావం: సమస్య వినియోగదారుని పనిని పూర్తి చేయకుండా నిరోధిస్తుంది లేదా వారిని బాధపెడుతుందా?
- ఫ్రీక్వెన్సీ: ఎంత మంది వినియోగదారులు మరియు ఎంత తరచుగా?
- వ్యాపార ప్రభావం: ఈ సమస్య మార్పిడి, రాబడి లేదా నమ్మకాన్ని ఎంతవరకు ప్రభావితం చేస్తుంది?
ఒక సాధారణ స్కేల్: క్రిటికల్ (మిషన్ను పూర్తిగా అడ్డుకుంటుంది), అధిక (తీవ్రమైన ఇబ్బంది), మధ్యస్థం (నెమ్మదిస్తుంది), తక్కువ (కాస్మెటిక్). AI ప్రారంభ ర్యాంకింగ్ను సూచించవచ్చు, కానీ తుది వెయిటింగ్ నిర్ణయానికి — ప్రత్యేకంగా వ్యాపార ప్రభావం — సందర్భం గురించి బృందం యొక్క జ్ఞానం అవసరం.
కనుగొనడం
ప్రభావం
ఫ్రీక్వెన్సీ
ప్రాముఖ్యత
సూచన
ప్రాథమిక బటన్ కనుగొనబడలేదు
ఇది పనిలో జోక్యం చేసుకుంటుంది
4/6 పాల్గొనేవారు
క్లిష్టమైన
హైలైట్ బటన్
ఎర్రర్ మెసేజ్ అస్పష్టంగా ఉంది
నెమ్మదించడం
3/6
అధిక
సందేశాన్ని స్పష్టం చేయండి
చిహ్నం అర్థం అస్పష్టంగా ఉంది
కొంచెం సంకోచం
2/6
మధ్యస్థ
ట్యాగ్ జోడించండి
కలర్ టోన్ నచ్చలేదు
సౌందర్య సాధనాలు
1/6
తక్కువ
దానిని తరువాత వదిలివేయండి
మూడు చిన్న కేసులు
కేసు 1 — 5 గంటల రికార్డింగ్, సగం రోజులో కనుగొన్నది. ఒక బృందం 6 వినియోగదారు పరీక్షల గమనికలను (మొత్తం 5 గంటలు) AIకి అందించింది. మోడల్ 14 ఫలితాలను సూచించింది; బృందం పరిశీలనల సంఖ్యతో ప్రతి ఒక్కటి తనిఖీ చేసి, దానిని 9కి కుదించి, ప్రాముఖ్యత క్రమంలో వాటిని ర్యాంక్ చేసింది. మానవీయంగా 2 రోజులు పట్టే సంశ్లేషణ, సగం రోజుకు తగ్గించబడింది.
కేస్ 2 - పెంచబడిన అన్వేషణ క్యాచ్ చేయబడింది. "వినియోగదారులు నావిగేషన్ అర్థం చేసుకోలేరు," AI ఒక క్లిష్టమైన అన్వేషణలో రాసింది. బృందం సహాయక పరిశీలనలను చూసినప్పుడు, ఇది ఒకే పార్టిసిపెంట్ నుండి ఒకే క్షణంపై ఆధారపడి ఉందని వారు కనుగొన్నారు. అన్వేషణ "మోడరేట్"కి డౌన్గ్రేడ్ చేయబడింది మరియు మరింత డేటా అభ్యర్థించబడింది. పాఠం: ఒకే పరిశీలన క్లిష్టమైన అన్వేషణను చేయదు.
కేసు 3 - క్లిష్టమైన సమస్య తప్పింది. మోడల్ పునరావృతమయ్యే కానీ చిన్నగా అనిపించే సమస్యను (ఫారమ్ ఆటో-స్క్రోలింగ్ కాదు) "తక్కువ"గా పరిగణించింది. డిజైనర్ పరిశీలనలను చూసినప్పుడు, ఇది 5 మంది పాల్గొనేవారిలో పనిని వదిలివేయడానికి కారణమైందని అతను గ్రహించాడు మరియు దానిని "అధిక"కి సెట్ చేశాడు. పాఠం: AI యొక్క ప్రాముఖ్యత అంచనా పరిశీలనా ఆధారాల ద్వారా సరిదిద్దబడింది.
పరిమాణాత్మక మరియు గుణాత్మక డేటాను కలిసి చదవడం
వినియోగ పరీక్ష చాలావరకు గుణాత్మకమైనది (పరిశీలన-ఆధారితం), కానీ పరిమాణాత్మక (సంఖ్యాపరమైన) సంకేతాలు కూడా ఉన్నాయి: పనిని పూర్తి చేసే రేటు, పని వ్యవధి, లోపాల సంఖ్య, సంతృప్తి స్కోర్. అత్యంత శక్తివంతమైన సంశ్లేషణ ఈ రెండింటినీ మిళితం చేస్తుంది: "పాల్గొనేవారిలో కేవలం 33% మంది మాత్రమే చెక్అవుట్ టాస్క్ను పూర్తి చేసారు (పరిమాణాత్మకం), మరియు పూర్తి చేయడంలో విఫలమైన వారందరూ షిప్పింగ్ స్టెప్ (నాణ్యత) వద్ద చిక్కుకున్నారు." కృత్రిమ మేధస్సు మీరు విడివిడిగా ఇచ్చినప్పుడు ఈ రెండు డేటాను కలపడంలో సహాయపడుతుంది; కానీ మీరు సంఖ్యల ఖచ్చితత్వాన్ని మరియు నమూనా పరిమాణాన్ని నిర్ధారిస్తారు. శాతాల గురించి మాట్లాడటం చిన్న నమూనాలలో తప్పుదారి పట్టించవచ్చు (ఉదా. 5 వినియోగదారులు); "60%" అని చెప్పడం కంటే "5 లో 3 మంది వినియోగదారులు" అని చెప్పడం చాలా నిజాయితీగా ఉంటుంది. సంపూర్ణ సంఖ్యలో మాట్లాడమని మోడల్ని అడగండి.
చిట్కా: "శాతానికి బదులుగా 'ఎంత మంది వినియోగదారులు' అని వ్రాయండి" అని AI చెప్పండి. చిన్న నమూనాలలో, శాతం వాస్తవం కంటే ఎక్కువ ఖచ్చితత్వం యొక్క ముద్రను ఇస్తుంది.
కాపీ చేయదగిన ప్రాంప్ట్లు
మీ పాత్ర: వినియోగ విశ్లేషకుడు. కింది అనామక పరీక్ష గమనికల నుండి ఫలితాలను గీయండి. ప్రతి అన్వేషణ కోసం: 1) స్పష్టమైన ప్రకటన, 2) సహాయక పరిశీలనలు మరియు ఎంత మంది పాల్గొనేవారు దీనిని చూశారు, 3) ప్రభావం (నిరోధించడం/నెమ్మది చేయడం/సౌందర్యం). ఒకే పరిశీలన ఆధారంగా కనుగొన్న వాటిని "బలహీనమైన సాక్ష్యం"గా గుర్తించండి. గమనికలు: <<text>>
ఈ ఫలితాల జాబితాను ప్రాముఖ్యత ఆధారంగా క్రమబద్ధీకరించండి. ప్రమాణాలు: ప్రభావం (పని అవరోధం?), ఫ్రీక్వెన్సీ (ఎంత మంది పాల్గొనేవారు?), వ్యాపార ప్రభావం. ప్రతి కనుగొనడంలో క్రిటికల్/హై/మీడియం/తక్కువ వాటిని కేటాయించి, హేతుబద్ధతను వ్రాయండి. వ్యాపార ప్రభావం గురించి మీకు ఖచ్చితంగా తెలియకుంటే, "బృందం తప్పనిసరిగా మూల్యాంకనం చేయాలి" అని చెప్పండి. అన్వేషణలు: <<జాబితా>>
ప్రతి అన్వేషణకు నిర్దిష్టమైన, చర్య తీసుకోదగిన డిజైన్ సిఫార్సును వ్రాయండి. సిఫార్సు: ఏమి మారుతుంది + ఇది సమస్యను ఎందుకు పరిష్కరిస్తుంది + ఇది ఏ స్క్రీన్ను ప్రభావితం చేస్తుంది. అస్పష్టమైన ("మెరుగైనది") సిఫార్సులను నివారించండి. అన్వేషణలు: <<జాబితా>>
వాటాదారుల ప్రదర్శన కోసం ఈ పరిశోధనల నివేదికను సంగ్రహించండి: 3 అత్యంత క్లిష్టమైన ఫలితాలు, సాక్ష్యం (ఎంత మంది వినియోగదారులు) మరియు సిఫార్సు చేసిన చర్యతో కూడిన సంక్షిప్త కార్యనిర్వాహక సారాంశాన్ని వ్రాయండి. అతిశయోక్తి; గమనికల నుండి సంఖ్యలను తీసుకోండి. నివేదించండి: <<text>>
బలహీనమైన ప్రాంప్ట్ / బలమైన ప్రాంప్ట్
బలహీనమైనది: "ఈ పరీక్ష స్కోర్ల నుండి తీర్మానాలు చేయండి."
ఫలితం: సాక్ష్యం లేని మిశ్రమ జాబితా, ప్రాముఖ్యత యొక్క క్రమం లేదు మరియు ఒకే పరిశీలనను అన్వేషణగా తప్పుగా భావించడం.
బలమైనది: "గమనికల నుండి ఒక అన్వేషణను గీయండి; ప్రతి అన్వేషణ క్రింద, సహాయక పరిశీలనలను జోడించండి మరియు ఎంత మంది పాల్గొనేవారిలో అది కనిపించింది; ఒకే పరిశీలన ఆధారంగా 'బలహీనమైన సాక్ష్యం'గా గుర్తించండి; ఆపై ప్రభావం-ఫ్రీక్వెన్సీ-పని ప్రభావం ప్రకారం ప్రాముఖ్యత క్రమంలో ర్యాంక్ చేయండి."
ఫలితం: సాక్ష్యం-ఆధారిత, ప్రాధాన్యతా, సమర్థించదగిన ఫలితాలు.
తేడా: బలమైన ప్రాంప్ట్ సాక్ష్యాల సంఖ్యను ప్రాంప్ట్ చేస్తుంది + బలహీనమైన ప్రాంప్ట్ + ప్రాముఖ్యత ప్రమాణం.
సాధారణ తప్పులు
- కనుగొనడంలో గందరగోళ పరిశీలన. "ఏమి జరిగింది" అనే ఒక్కదాన్ని మొత్తం ముగింపుగా మార్చడం.
- ఒకే పరిశీలన నుండి క్లిష్టమైన పరిశోధనలు చేయడం. ఫ్రీక్వెన్సీ ధృవీకరించబడే వరకు బరువు ఇవ్వబడదు.
- కృత్రిమ మేధస్సుపై వ్యాపార ప్రభావాన్ని నిర్ణయించడం. రాబడి/మార్పిడి ప్రభావానికి సందర్భం అవసరం; అతను తన జట్టులో ఉన్నాడు.
- ప్రాధాన్యత ఇవ్వవద్దు. అస్తవ్యస్తమైన అన్వేషణల జాబితా జట్టును స్తంభింపజేస్తుంది; అన్నింటినీ ఒకేసారి సరిదిద్దలేము.
- సూచనలను అస్పష్టంగా వదిలివేయడం. "మెరుగైన పని" వర్తించదు; ఏది, ఎందుకు మరియు ఎక్కడ స్పష్టంగా ఉండాలి.
సారాంశంలో
రికార్డింగ్లు మరియు గమనికలను స్పష్టమైన, ప్రాధాన్యత కలిగిన అన్వేషణలుగా మార్చడంలో వినియోగ పరీక్ష విలువ వస్తుంది. ఆర్టిఫిషియల్ ఇంటెలిజెన్స్ ఈ సంశ్లేషణను బాగా వేగవంతం చేస్తుంది: పరిశీలనలను కనుగొన్నవి, డ్రాఫ్ట్ సిఫార్సులు, ప్రాముఖ్యత క్రమాన్ని సూచిస్తాయి. కానీ ప్రతి అన్వేషణ వెనుక ఉన్న పరిశీలనల సంఖ్యను ధృవీకరించడం, ఒకే పరిశీలనల ఆధారంగా పెంచిన ఫలితాలను కలుపుకోవడం మరియు సందర్భంతో వ్యాపార ప్రభావాన్ని అంచనా వేయడం మానవ పని. సాక్ష్యాలపై ఆధారపడిన, నిర్దిష్ట ఫ్రీక్వెన్సీని కలిగి ఉన్న మరియు ప్రాముఖ్యత క్రమంలో అమర్చబడిన పరిశోధనల నివేదిక వేగంగా మరియు వాటాదారులకు రక్షణగా ఉంటుంది.
అప్లికేషన్ టాస్క్
- వినియోగ పరీక్ష (నిజమైన లేదా కల్పితం) నుండి గమనికలను అనామకీకరించండి.
- మొదటి ప్రాంప్ట్లో కనుగొన్న వాటిని తీసివేయండి; ప్రతి కింద పరిశీలనల సంఖ్యను తనిఖీ చేయండి.
- "బలహీనమైన సాక్ష్యం"గా గుర్తించబడిన ఫలితాలను వేరుచేసి, అదనపు డేటా అవసరమా కాదా అని నిర్ణయించుకోండి.
- రెండవ ప్రాంప్ట్తో, కనుగొన్న వాటిని ప్రాముఖ్యత క్రమంలో ర్యాంక్ చేయండి; జట్టుగా వ్యాపార ప్రభావాన్ని అంచనా వేయండి.
- మూడవ ప్రాంప్ట్తో, ప్రతి అన్వేషణకు నిర్దిష్ట సూచనలను వ్రాయండి మరియు ప్రాధాన్యత పట్టికను సృష్టించండి.
చెక్లిస్ట్
- [ ] నేను పరిశీలన, అన్వేషణలు మరియు సూచనలను ప్రత్యేక పొరలుగా ఉంచాను.
- [ ] ప్రతి అన్వేషణను ఎంత మంది పాల్గొనేవారు చూపించారో నేను ధృవీకరించాను.
- [ ] నేను ఒకే పరిశీలన ఆధారంగా కనుగొన్న వాటిని బలహీన సాక్ష్యంగా గుర్తించాను.
- [ ] నేను ఇంపాక్ట్-ఫ్రీక్వెన్సీ-జాబ్ ప్రభావం ద్వారా తీవ్రత స్థాయిని నిర్ణయించాను.
- [ ] బృందంతో వ్యాపార ప్రభావ నిర్ణయాన్ని విశ్లేషించారు.
- [ ] నేను సూచనలను నిర్దిష్టంగా వ్రాసాను (ఏమి/ఎందుకు/ఎక్కడ).