Добивки:
- Способност да се претворат записите од тестот за употребливост и белешките за набљудување во наоди, тежини и препораки со вештачка интелигенција
- Способност да се рангираат наодите според сериозноста и да се изготви табела за приоритизација
- Способност да се коригираат наодите што вештачката интелигенција ги испушта или преувеличува со вистински докази за набљудување
Тестирањето на употребливост е метод за набљудување каде функционира дизајнот и каде се заглавува со давање конкретни задачи на вистинските корисници и нивно следење. Самиот тест е лесен; Вистинскиот предизвик е последователно: претворање на часови на снимање, страници со белешки за набљудување и расфрлани слики од екранот во јасни, приоритетни наоди. Оваа синтеза трае со денови и тимовите често ја оставаат недовршена. Вештачката интелигенција го отвора ова тесно грло: претворање на записите и белешките во наоди, тежина и препораки. Но, човечкото расудување е да одлучи дали набљудувањето е навистина проблем и колку е тоа важно.
Разлика помеѓу набљудување, наоѓање и сугестија
Критично е да се одделат три слоја во синтезата:
- Набљудување: Што се случи, без коментар. „Учесникот 3 го бараше копчето „продолжи“ 40 секунди“.
- Наоѓање: Моделот што произлегува од набљудувањата. „Корисниците имаат проблем да го најдат примарното дејство.
- Препорака: Што да се прави. „Го прави примарното копче визуелно да се истакнува“.
Вештачката интелигенција брзо ги произведува овие три слоја, но честопати го меша набљудувањето со пронаоѓањето или заклучува цел наод од едно набљудување. Ваша задача е да потврдите дека има доволно набљудувања (колку учесници, колку пати) зад секој наод.
Совет: Вештачката интелигенција нека каже „под секое откритие, додајте набљудувања што го поддржуваат и во колку учесници е забележана“. На овој начин можете веднаш да ги разликувате надуените наоди од едно набљудување.
Сериозност: што да се поправи прво?
Не сите наоди се еднакви. Сериозноста покажува колку итно треба да се поправи проблемот и се одредува од три фактори:
- Влијание: Дали проблемот го спречува корисникот да ја заврши задачата или само го нервира?
- Фреквенција: Колку корисници и колку често?
- Деловно влијание: колку ова прашање влијае на конверзијата, приходите или довербата?
Типична скала: Критична (целосно ја попречува мисијата), висока (тешка тешкотија), средна (забавува), ниска (козметичка). Вештачката интелигенција може да предложи првично рангирање, но конечната одлука за пондерирање - особено деловното влијание - бара знаење на тимот за контекстот.
наоѓање
Влијание
фреквенција
важност
Предлог
Примарното копче не може да се најде
Се меша со задачата
4/6 учесници
критички
Копче за означување
Пораката за грешка е нејасна
забавување
3/6
високо
Појасни ја пораката
Икона што значи нејасна
мало двоумење
2/6
средно
Додадете ознака
Тонот на бојата не се допадна
козметика
1/6
низок
оставете го за подоцна
три мини футроли
Случај 1 — 5 часа снимање, наоди за половина ден. Еден тим ги нахранил белешките од 6 кориснички тестови (вкупно 5 часа) на вештачката интелигенција. Моделот предложи 14 наоди; Тимот го провери секое од нив според бројот на набљудувања, го намали на 9 и ги рангираше по важност. Синтезата, која би траела 2 дена рачно, е намалена на половина ден.
Случај 2 - Фатен надуен наод. „Корисниците не ја разбираат навигацијата“, напиша вештачката интелигенција во критичкиот наод. Кога тимот ги погледнал придружните набљудувања, открил дека тие се засноваат на еден момент од еден учесник. Наодот беше намален на „умерен“ и беа побарани повеќе податоци. Поука: едно набљудување не дава критички наод.
Случај 3 - Пропуштено критично прашање. Моделот смета дека се повторува, но навидум помал проблем (образецот не се лизга автоматски) како „низок“. Кога дизајнерот ги погледнал набљудувањата, сфатил дека тоа предизвикало напуштање на задачата кај 5 учесници и го поставил на „високо“. Поука: Проценката на важноста на ВИ се коригира со набљудувачки докази.
Заедно читање квантитативни и квалитативни податоци
Тестирањето на употребливост е претежно квалитативно (засновано на набљудување), но има и квантитативни (нумерички) сигнали: стапка на завршување на задачата, времетраење на задачата, број на грешки, резултат на задоволство. Најмоќната синтеза ги комбинира двете: „Само 33% од учесниците ја завршија задачата за наплата (квантитативно), а сите што не успеаја да ја завршат заглавија на чекорот за испорака (квалитативно). Вештачката интелигенција помага да се комбинираат овие два податоци кога ги давате одделно; но ја потврдувате точноста на бројките и големината на примерокот. Зборувањето за проценти може да биде погрешно во мали примероци (на пр. 5 корисници); Да се каже „3 од 5 корисници“ е поискрено отколку да се каже „60%“. Побарајте од моделот да зборува во апсолутни бројки.
Совет: Вештачката интелигенција нека каже „напиши како „колку корисници“ наместо процент“. Во мали примероци, процентот дава впечаток на поголема прецизност отколку што всушност е.
Информации за копирање
Вашата улога: аналитичар за употребливост. Нацртајте наоди од следните анонимизирани белешки за тестот. За секој наод: 1) јасна изјава, 2) поддржувачки набљудувања и колку учесници го виделе, 3) ефект (блокирање/забавување/козметички). Означете ги наодите врз основа на едно набљудување како „СЛАБ ДОКАЗ“. Забелешки: <<текст>>
Подредете ја оваа листа на наоди по важност. Критериуми: влијание (спреченост во задачата?), фреквенција (колку учесници?), деловно влијание. Доделете го секој наод Критичен/Висок/Среден/Низок и напишете образложение. Ако не сте сигурни за влијанието на бизнисот, кажете „тимот мора да оцени“. Наоди: <<листа>>
Напишете конкретна, активна препорака за дизајн за секој наод. Препорака: што ќе се промени + зошто ова го решава проблемот + на кој екран влијае. Избегнувајте нејасни („направи подобро“) препораки. Наоди: <<листа>>
Сумирајте го овој извештај за наодите за презентација на засегнатите страни: напишете кратко извршно резиме кое ги вклучува 3-те најкритични наоди, докази (колку корисници) и препорачана акција. Претерување; земајте броеви од белешки.Извештај: <<текст>>
Слаб промпт / Силен промпт
Слабо: „Извлечете заклучоци од овие резултати од тестовите“.
Резултат: Мешана листа без докази, без редослед на важност и погрешно едно набљудување како наод.
Силен: „Нацртајте наод од белешките; под секој наод, додајте придружни набљудувања и во колку учесници е забележано; означете го оној заснован на едно набљудување како „слаб доказ“; потоа рангирајте го по важност според ефектот-фреквенцијата-работниот ефект“.
Резултат: засновани на докази, приоритетни, одбранливи наоди.
Разлика: силен промпт поттикнува број на докази + слаб промпт + критериум за важност.
Вообичаени грешки
- Збунувачки набљудување со наоѓање. Претворање на едно единствено „што се случило“ во севкупен заклучок.
- Донесување критички наоди од едно набљудување. Нема да се даде тежина додека не се потврди фреквенцијата.
- Одлучување за деловното влијание врз вештачката интелигенција. Влијанието на приходите/конверзијата бара контекст; Тој е во неговиот тим.
- Не ставајте приоритет. Неорганизираната листа на наоди го парализира тимот; Не може сè да се поправи одеднаш.
- Оставајќи ги предлозите нејасни. „Направи подобро“ е неприменливо; Што, зошто и каде треба да биде јасно.
Сумирано
Вредноста на тестирањето на употребливост доаѓа во претворањето на снимките и белешките во јасни, приоритетни наоди. Вештачката интелигенција во голема мера ја забрзува оваа синтеза: ги собира набљудувањата во наоди, подготвува препораки, сугерира редослед на важност. Но, човечка работа е да се потврди бројот на набљудувања зад секое откритие, да се елиминираат надуените наоди врз основа на единечни набљудувања и да се мери влијанието на бизнисот во контекст. Извештајот за наодите кој се заснова на докази, има одредена фреквенција и е подреден по важност ќе биде и брз и одбранлив за засегнатите страни.
Задача за апликација
- Анонимизирајте белешки од тест за употребливост (вистински или измислен).
- Отстранете ги наодите при првото известување; Проверете го бројот на набљудувања под секое.
- Изолирајте ги наодите означени како „слаби докази“ и одлучете дали се потребни дополнителни податоци.
- Со вториот промпт, рангирајте ги наодите по важност; Проценете го влијанието на бизнисот како тим.
- Со третото барање, напишете конкретни предлози за секој наод и креирајте табела за приоритизација.
листа за проверка
- [ ] Ги задржав набљудувањата, наодите и предлозите како посебни слоеви.
- [ ] Потврдив колку учесници го покажаа секој наод.
- [ ] Ги означив наодите врз основа на едно набљудување како слаб доказ.
- [ ] Го одредив нивото на сериозност според влијанието-фреквенцијата-влијание на работата.
- [ ] Ја оцени одлуката за деловното влијание со тимот.
- [ ] Конкретно ги напишав предлозите (што/зошто/каде).