Пайдалар:
- Колдонуучулук тест жазууларын жана байкоо жазууларын жасалма интеллект менен жыйынтыктарга, салмактарга жана сунуштарга айландыруу мүмкүнчүлүгү
- Жыйынтыктарды олуттуулугуна жараша разряддоо жана артыкчылыктуу таблицаны түзүү мүмкүнчүлүгү
- Жасалма интеллект калтырган же апыртып жиберген жыйынтыктарды реалдуу байкоо далилдери менен оңдоо мүмкүнчүлүгү
Колдонуу мүмкүнчүлүгүн тестирлөө - бул чыныгы колдонуучуларга конкреттүү тапшырмаларды берүү жана аларды көзөмөлдөө аркылуу дизайндын кайда иштээрин жана кайда тыгылып калганын байкоо ыкмасы. Тесттин өзү оңой; Чыныгы кыйынчылык андан кийин болот: жазуу сааттарын, байкоо жазууларынын барактарын жана чачыранды скриншотторду ачык, артыкчылыктуу жыйынтыктарга айландыруу. Бул синтез кол менен бир нече күн талап кылынат жана командалар көбүнчө аны бүтпөй калтырышат. Жасалма интеллект бул кыйынчылыкты ачат: жазууларды жана ноталарды жыйынтыкка, салмакка жана сунушка айлантуу. Бирок байкоонун чындап эле көйгөй экендигин жана анын канчалык маанилүү экенин адамдын чечими менен чечет.
Байкоо, табуу жана сунуштун ортосундагы айырма
Синтезде үч катмарды бөлүү маанилүү:
- Байкоо: Эмне болду, комментарий жок. "3-катышуучу "улантуу" баскычын 40 секунд издеди."
- Табуу: байкоолордон келип чыккан үлгү. "Колдонуучулар негизги аракетти таба албай кыйналып жатышат."
- Сунуш: Эмне кылуу керек. "Негизги баскычты визуалдык түрдө өзгөчө кылат."
AI бул үч катмарды тез чыгарат, бирок көп учурда байкоону табуу менен чаташтырат же бир байкоодон бүтүндөй жыйынтык чыгарат. Сиздин милдетиңиз ар бир табылганын артында жетиштүү байкоолор (канча катышуучу, канча жолу) бар экенин текшерүү.
Кеңеш: Жасалма интеллект "ар бир табылганын астына аны тастыктаган байкоолорду жана ал канча катышуучудан көрүлгөнүн кошуңуз" деп айтсын. Мына ушундай жол менен сиз дароо эле бир байкоодон көбөйтүлгөн жыйынтыктарды айырмалай аласыз.
Катуулугу: адегенде эмнени оңдоо керек?
Бардык табылгалар бирдей эмес. Катуулугу маселенин канчалык тез арада чечилиши керектигин көрсөтүп турат жана үч фактор менен аныкталат:
- Таасир: Маселе колдонуучуга тапшырманы аткарууга тоскоол болобу же жөн эле аларды тажатабы?
- Жыштык: Канча колдонуучу жана канча жолу?
- Бизнеске таасири: Бул маселе конверсияга, кирешеге же ишенимге канчалык таасир этет?
Типтүү шкала: Критикалык (миссияга толугу менен тоскоол болот), Жогорку (катуу кыйынчылык), Орто (жайлатат), Төмөн (косметикалык). AI баштапкы рейтингди сунуш кылышы мүмкүн, бирок акыркы салмактоо чечими, атап айтканда, бизнеске таасир этет - команданын контекстти билүүсүн талап кылат.
табуу
Таасири
жыштык
маанилүү
Сунуш
Негизги баскыч табылбай жатат
Бул тапшырмага тоскоол болот
4/6 катышуучулар
сын
Бөлүп көрсөтүү баскычы
Ката кабары түшүнүксүз
жайлоо
3/6
бийик
Билдирүүнү тактаңыз
Белги мааниси түшүнүксүз
бир аз тартынуу
2/6
орто
Тег кошуу
Түс өңү жаккан жок
косметика
1/6
төмөн
аны кийинчерээк калтырыңыз
үч мини учурлар
1-жагдай — 5 саат жаздыруу, жарым суткада табылгалар. Бир команда AI үчүн колдонуучунун 6 тестинин (бардыгы 5 саат) ноталарын берди. Модель 14 жыйынтыкты сунуш кылган; Команда ар бирин байкоолордун санына карата текшерип, аны 9га чейин кыскартып, аларды маанилүүлүгү боюнча иретке келтирди. Кол менен 2 күн талап кылынчу синтез жарым күнгө чейин кыскарды.
2-жагдай - Көбөйтүлгөн табылга кармалды. "Колдонуучулар навигацияны түшүнүшпөйт", - деп жазган AI критикалык жыйынтыкта. Команда колдоочу байкоолорду карап чыкканда, ал бир катышуучунун бир көз ирмемине негизделгенин байкашкан. Табыштама "орто" даражага түшүрүлүп, көбүрөөк маалымат суралган. Сабак: бир эле байкоо сындуу жыйынтык чыгарбайт.
3-жагдай - Өткөрүлбөй калган маанилүү маселе. Модель кайталануучу, бирок анча-мынча көрүнгөн маселени (форма автоматтык түрдө сыдырбоо) "төмөн" деп эсептеди. Дизайнер байкоолорду карап чыкканда, бул 5 катышуучуда тапшырмадан баш тартууга себеп болгонун түшүнүп, аны "жогорку" деп койду. Сабак: AI маанилүүлүгүн баалоо байкоо далили менен оңдолот.
Сандык жана сапаттык маалыматтарды чогуу окуу
Колдонуучулук тестирлөө негизинен сапаттык (байкоолорго негизделген), бирок сандык (сандык) сигналдар да бар: тапшырманы аткаруу ылдамдыгы, тапшырманын узактыгы, каталардын саны, канааттануу баллы. Эң күчтүү синтез экөөнү айкалыштырат: "Катышуучулардын 33% гана текшерүү тапшырмасын аткарышты (сандык), ал эми бүтүрө албагандардын баары жеткирүү кадамына (сапаттуу) тыгылып калышты." Жасалма интеллект бул эки маалыматты өз-өзүнчө бергенде бириктирүүгө жардам берет; бирок сиз сандардын тактыгын жана үлгү өлчөмүн ырастайсыз. Проценттер жөнүндө сөз кылуу кичинекей үлгүлөрдөгү адаштырышы мүмкүн (мисалы, 5 колдонуучу); "60%" дегенге караганда "5 колдонуучудан 3" деп айтуу чынчылыраак. Модельден абсолюттук сандар менен сүйлөөнү сураныңыз.
Кеңеш: AI "пайыздын ордуна "канча колдонуучу" деп жазыңыз" деп айтыңыз. Кичинекей үлгүлөрдөгү пайыздык көрсөткүч чындыгында караганда көбүрөөк тактыктын элесин берет.
Көчүрмө чакырыктар
Сиздин ролуңуз: колдонуу мүмкүнчүлүгүн талдоочу. Төмөнкү анонимдүү тест жазууларынан жыйынтыктарды чыгарыңыз. Ар бир табылга үчүн: 1) так билдирүү, 2) колдоочу байкоолор жана аны канча катышуучу көргөн, 3) эффект (бөгөттөө/жайлоо/косметикалык). Бир байкоонун негизинде табылган тыянактарды "АЛСЫЗ ДАЛИЛ" деп белгилеңиз. Эскертүү: <<текст>>
Бул тизмени маанилүүлүгү боюнча иреттеңиз. Критерийлер: таасири (милдеттин тоскоолдугу?), жыштыгы (канча катышуучу?), бизнестин таасири. Ар бир жыйынтыкты Критикалык/Жогорку/Орто/Төмөн деп дайындап, жүйөөлөрдү жазыңыз. Эгер бизнеске тийгизген таасириңизди так билбесеңиз, "команда баа бериши керек" деп айтыңыз. Жыйынтыктар: <<тизме>>
Ар бир табылга үчүн конкреттүү, ишке жарамдуу дизайн сунушун жазыңыз. Сунуш: эмне өзгөрөт + эмне үчүн бул көйгөйдү чечет + ал кандай экранга таасир этет. бүдөмүк (“жакшыраак кыл”) сунуштардан качыңыз. Жыйынтыктар: <<тизме>>
Кызыкдар тараптардын презентациясы үчүн бул жыйынтыктар боюнча отчетту жалпылаңыз: 3 эң маанилүү тыянакты, далилдерди (канча колдонуучу) жана сунушталган иш-аракеттерди камтыган кыскача аткаруучу резюме жазыңыз. апыртуу; ноталардан сандарды ал. Баяндама: <<текст>>
Алсыз тездик / Күчтүү тездик
Алсыз: "Бул тест упайларынан тыянак чыгарыңыз."
Натыйжа: Эч кандай далили, маанилүүлүгүнүн тартиби жана бир байкоону жаңылыштык катары кабыл алуусу жок аралаш тизме.
Күчтүү: "Кыска жазуулардан тыянакты тартыңыз; ар бир жыйынтыктын астына колдоочу байкоолорду жана ал канча катышуучу көргөнүн кошуңуз; бир байкоонун негизиндегисин "алсыз далилдер" деп белгилеңиз; андан кийин эффект-жыштык-жумуш эффектисине жараша маанилүүлүгү боюнча иреттеңиз."
Натыйжа: Далилдерге негизделген, артыкчылыктуу, корголуучу тыянактар.
Айырмасы: күчтүү тездик далилдердин санын көрсөтөт + алсыз тездик + маанилүү критерий.
Жалпы каталар
- Байкоону табуу менен чаташтыруу. Бир эле "эмне болгонун" жалпы жыйынтыкка айлантуу.
- Бир байкоодон критикалык корутундуларды чыгаруу. Жыштыгы текшерилмейинче эч кандай салмак берилбейт.
- Жасалма интеллектке бизнестин таасирин аныктоо. Киреше/конверсия таасири контекстти талап кылат; Ал өз командасында.
- Приоритет кылба. Жыйынтыктардын уюшулбаган тизмеси команданы шалдыратат; Баарын бир эле учурда оңдоо мүмкүн эмес.
- Сунуштарды бүдөмүк калтыруу. "Жакшыраак кыл" колдонууга болбойт; Эмне, эмне үчүн жана кайда ачык болушу керек.
Кыскача айтканда
Колдонуучулук тестирлөөнүн мааниси жазууларды жана ноталарды так, приоритеттүү жыйынтыктарга айландырууда. Жасалма интеллект бул синтезди абдан тездетет: байкоолорду жыйынтыктарга бириктирет, сунуштарды иштеп чыгат, маанилүүлүк тартибин сунуштайт. Бирок бул ар бир табылганын артында кандай байкоолордун санын текшерүү, бир гана байкоолордун негизинде ашкереленген жыйынтыктарды алып салуу жана контекст менен бизнеске тийгизген таасирин салмактоо адамдын иши. Далилдерге негизделген, белгилүү бир жыштыкка ээ болгон жана маанилүүлүгү боюнча иреттелген жыйынтык отчету кызыкдар тараптар үчүн тез жана корголгон болот.
Колдонмо тапшырмасы
- Колдонуу сыноосунан алынган жазууларды анонимдөө (чыныгы же ойдон чыгарылган).
- Биринчи тез арада жыйынтыктарды алып салуу; Ар биринин астындагы байкоолордун санын текшериңиз.
- "Начар далилдер" деп белгиленген жыйынтыктарды бөлүп, кошумча маалымат керекпи же жокпу, чечиңиз.
- Экинчи сунуш менен жыйынтыктарды маанилүүлүгү боюнча иреттеңиз; Команда катары бизнеске таасирин баалаңыз.
- Үчүнчү кеңеш менен ар бир табылга боюнча конкреттүү сунуштарды жазыңыз жана артыкчылыктуу таблицаны түзүңүз.
текшерүү тизмеси
- [ ] Мен байкоолорду, табылгаларды жана сунуштарды өзүнчө катмарлар катары сактап калдым.
- [ ] Ар бир табылганы канча катышуучу көрсөткөнүн текшердим.
- [ ] Мен бир эле байкоонун негизинде табылган жыйынтыктарды алсыз далил катары белгиледим.
- [ ] Мен таасир-жыштык-жумуш таасири менен оордук даражасын аныктадым.
- [ ] Команда менен бизнеске таасир этүүчү чечимди баалады.
- [ ] Сунуштарды конкреттүү түрдө жаздым (эмне/эмне үчүн/кайда).