Nyereség:
- Képes a nyers interjú-átiratok, a nyílt végű felmérési válaszok és a támogató jegyek mesterséges intelligenciával témákká és betekintésekké alakítani
- Képes a kvalitatív elemzési lépések felgyorsítására, mint például az affinitás-leképezés és a kódolás mesterséges intelligencia támogatásával, valamint az eredmények emberi szemmel történő ellenőrzése
- Képes kiszűrni a mesterséges intelligencia által kitalált vagy eltúlzott témákat valódi idézetekhez való visszakapcsolással
A felhasználói kutatás legfárasztóbb és legkönnyebben átugorható szakasza a szintézis: több tucat interjú, több száz felmérési válasz és támogatási jegy (a felhasználó segítségkérése) értelmes betekintést nyerhet. Ez a munka napokat vesz igénybe kézzel; Ez az oka annak, hogy a csapatok gyakran sarkallnak, és „érzés szerint” döntenek. Az AI éppen ezt a szűk keresztmetszetet nyitja meg: órák helyett percek alatt bontja témákra a nyers szöveget. A szintézis azonban nem „összefoglaló készítés” feladat; Ez egy bizonyítékokon alapuló, auditálható érvelés. Ez az egység bemutatja, hogyan őrizheti meg a betekintés hitelességét, miközben az AI-t szintézispartnerévé teszi.
Mi a betekintés, nem az összefoglalás
Először tisztázzuk a kifejezést. Az Insight egy értelmes minta, amely az adatokból rajzolódik ki, és irányítja a tervezést: "A felhasználók nem a fizetéskor adják fel, hanem amikor először látják a szállítási díjat." Ez nem összefoglaló ("A felhasználók panaszkodnak a fizetés miatt"); és nem is megfigyelés („a 4. résztvevő megállt, amikor meglátta a szállítási díjat”). Az insight megragadja a sok megfigyelés mögött meghúzódó közös okot, és megnyitja az ajtót a tervezési döntés előtt.
Az AI természetesen hajlamos összefoglalók készítésére. Az Ön feladata, hogy az összefoglalótól a betekintésig terjedjen: „miért?” és "miben változtat ez a tervezésben?" kérdéseinek beágyazásával a promptba.
A kvalitatív elemzés lépései és a mesterséges intelligencia helye
A kvalitatív (nem numerikus, szöveges/megfigyelési alapú) elemzés klasszikusan a következő lépésekkel halad:
- Kódolás: A szöveg minden értelmes darabja címkét kap ("szállítási költséggel kapcsolatos aggály", "bizalomhiány").
- Affinitásdiagram (affinitásleképezés): A hasonló címkék csoportosítva vannak; csoportok válnak témákká.
- Téma prioritás: melyik témát hány felhasználó látja és milyen intenzitással van meghatározva.
- Betekintés és tanács: Témák "mit tegyünk?" mondatokhoz kapcsolódik.
Az AI nagymértékben felgyorsítja az 1. és 2. lépést: percek alatt biztosítja a kezdeti kódolást és a kezdeti csoportosítást. A csoportok jelentése, a témák fontossága, a javaslatok pontossága azonban emberi ellenőrzést igényel. Az AI egy „első térképvázlatot” ad; Javítod a térképet a valóságnak megfelelően.
Tipp: Mielőtt azt mondaná az AI-nak, hogy "kivonja a témákat", adja meg a kódolási sémát (címkék listája). Ily módon mindenki közös nyelvén működik, és a kimenetek összehasonlíthatók.
Bizonyítéklánc: minden téma egy idézethez kapcsolódik
A szintézis aranyszabálya: minden témához kapcsolódik legalább egy szó szerinti idézet. Az idézet a bizonyíték arra, hogy a téma valódi. Mindig tüntesse fel az idézési követelményt, amikor egy témát kér az AI-tól; Mondd meg neki, hogy ne készítsen olyan témát, amelyre nem talál idézetet. Így megállíthatja a hallucinációt a forrásnál: egy kitalált témát "alaptalannak" jelölnek, mert nincs megfelelője a forrásban.
réteg
példa
forrás
megfigyelés
"A 4. résztvevő elhagyta a kocsit, amikor meglátta a szállítási díjat"
egy-egy felvétel
kód
"váratlan költség"
Címkézés
téma
"A rejtett költségek megtörik a bizalmat"
ismételje meg 5 résztvevőnél
betekintést
"A szállítási költséget korán fel kell tüntetni"
hagyom a témát
Javaslat
"Szállítási becslés hozzáadása a termékoldalhoz"
Tervezési döntés
Ez a lánc akkor kezdődik, amikor egy érdekelt fél megkérdezi: „honnan tudjuk ezt?” Amikor kérdez, lehetővé teszi, hogy visszatérjen a megfigyeléstől az idézetig.
három mini tok
1. eset – 240 felmérési válasz, 90 perc. Egy csapat mesterséges intelligencia által kódolt 240 nyílt végű (szabad szövegű) felmérési választ. A modell 11 témát javasolt; A csapat 90 perc alatt áttekintette ezeket, 7-re szűkítette őket, 2 témát kombinált, kettőt pedig eltávolított, mint nem támogatott. A 2 napos fizikai munkát fél napra csökkentették, és a bizonyítékok láncolata megmaradt.
2. eset – Eltúlzott téma. A mesterséges intelligencia erős témát hozott létre: „a felhasználók utálják az alkalmazást”. Amikor a csapat megnézte az idézeteket, azt találták, hogy csak 2 résztvevő volt kemény, míg 18 semleges. A témát a következőképpen írták át: "intenzív csalódás egy bizonyos áramlásban". Tanulság: Az AI eltúlozhatja az érzelmi intenzitást; számolja meg a frekvenciát.
3. eset – Hiányzó kisebbségi vélemény. Míg a modell a többségi témákat emelte ki, egy kritikus akadálymentesítési problémát, amelyet 3 résztvevő „nem fontosnak” nevezett fel. A tervező ezt észrevette és külön leletként megőrizte; Később világossá vált, hogy ez a probléma minden képernyőolvasó felhasználót érintett. Tanulság: a kisebbségi jelzés nem mindig „kevésbé fontos”.
Másolható felszólítások
Az Ön szerepe: kvalitatív kutatási elemző.Kódolási séma (címkék): <<list>>Feladat: Kódolja az alábbi anonimizált átiratot ezekkel a címkékkel.Add [résztvevő
Alakítsa át a következő kódolt adatokat közelségi diagrammá: csoportosítsa a hasonló kódokat, nevezzen el minden csoportnak egy témát. Minden témához számolja meg, hány egyéni résztvevőben jelenik meg, írja be a 2 legerősebb idézetet, és írjon egy egymondatos „miért” magyarázatot. Jelölje meg külön a gyenge bizonyítékokkal rendelkező témákat.Adatok: <<kódok>>
A következő témát szeretném tesztelni: "<<téma>>". Sorolja fel külön a forrásszövegben azokat az idézeteket, amelyek ezt a témát TÁMOGATJÁK, illetve ELUTASÍTJÁK. A végén értékelje, mennyire támogatott a téma (erős/közepes/gyenge).Forrás: <<átírás>>
Változtassa ezt a témalistát betekintésekké és javaslatokká. Minden témához: 1) egymondatos betekintés (amely „mert…”-t tartalmaz), 2) konkrét tervezési javaslat, 3) milyen képernyőt/folyamatot érint ez a javaslat. Ne pótolj; Ha az alap gyenge, írja be, hogy "további kutatásra van szükség". Témák: <<lista>>
Gyenge felszólítás / Erős felszólítás
Gyenge: "Elemezze ezeket a beszélgetéseket, és mondja el az eredményeket."
Eredmény: Összefoglaló források, gyakorisági információk nélkül, és nyitott a túlzásokra.
Erős: "Kódolja ezt az átiratot azokkal a címkékkel, amelyeket adtam; kössön minden témát a [résztvevő" idézetéhez
Eredmény: Nagy gyakoriságú, bizonyítékokon alapuló, auditálható szintézis.
Különbség: erős prompt promptok gyakorisága + idézet + gyenge rögzítő prompt; ezek megakadályozzák a túlzást és a hallucinációt.
Gyakori hibák
- Nem számítva a gyakoriságot. Döntéshozatal anélkül, hogy tudná, hogy 2 vagy 20 ember van-e a "A felhasználók X-et akarnak" mondat mögött.
- Az érzelmek intenzitását úgy véve, ahogy van. Az AI hajlamos kiemelni az erős kifejezéseket; Semleges többséget rejthet.
- A kisebbségi jelzés megszüntetése. Egy olyan probléma, amelyet kevesen tapasztalnak, kritikus lehet (például a hozzáférhetőség).
- Nem igényel idézést. Az idézet nélküli téma az ellenőrizhetetlen téma.
- Végezzen egy körben. A szintézis iteratív; Tesztelje az első kimenetet, és élesítse a promptot.
Összefoglalva
A szintézis az az érvelés, amely a nyers adatokat olyan betekintést nyújtó betekintést nyújt, amely a tervezést vezérli. Az AI nagymértékben felgyorsítja az olyan mechanikus lépéseket, mint a kódolás és a közelségi csoportosítás, de a betekintés értelme és jelentősége továbbra is emberi marad. Az aranyszabály az, hogy minden témát egy szó szerinti idézettel kell összekötni; számolási gyakoriság, érzelmi túlzást korrigálva, ne hagyd ki a kisebbségi jelet. Ha létrehoz egy bizonyítékláncot, amely megfigyeléstől idézetig, témától a javaslatig terjed, akkor olyan kutatási eredményt ér el, amely egyszerre gyors és védhető.
Pályázati feladat
- Anonimizálja 8-10 (vagy kitalált) interjúra/felmérésre adott válaszát.
- Írja meg saját kódolási sémáját (6-8 címke), és az első felszólítással kódolja mesterséges intelligenciával.
- Távolítsa el a témákat a második prompttal; Jegyezze fel, hány résztvevő jelenik meg az egyes témáknál.
- Tesztelje a legerősebb témát a harmadik felszólítással: hasonlítsa össze a támogató és cáfoló idézeteket.
- Írjon egy témát betekintés + javaslat + érintett képernyő formájában, és ábrázolja a bizonyítékok láncát.
ellenőrző lista
- [ ] A kódolási sémámat előre megadtam az AI-nak.
- [ ] Minden témát legalább egy szó szerinti idézethez kapcsoltam.
- [ ] Megszámoltam, hogy az egyes témákhoz hány egyéni résztvevő jelent meg.
- [ ] Gyakran javítottam a túlzó érzelmi kifejezéseket.
- [ ] Tudatosan döntöttem arról, hogy megszüntetem-e a kisebbségi jelzéseket.
- [ ] A meglátásokat összekapcsoltam a konkrét tervjavaslattal és az érintett képernyővel.