zisky:
- Schopnosť transformovať nespracované prepisy rozhovorov, otvorené odpovede na prieskumy a lístky na podporu na témy a poznatky pomocou umelej inteligencie
- Schopnosť urýchliť kroky kvalitatívnej analýzy, ako je afinitné mapovanie a kódovanie s podporou umelej inteligencie a overiť výsledky ľudským okom
- Schopnosť vyradiť témy vytvorené alebo zveličené umelou inteligenciou ich prepojením so skutočnými úvodzovkami
Najúnavnejšou a najľahšie preskočenou fázou používateľského prieskumu je syntéza: premena desiatok rozhovorov, stoviek odpovedí na prieskum a lístkov na podporu (žiadosť používateľa o pomoc) na zmysluplné poznatky. Táto práca trvá dni ručne; Preto tímy často škrtajú a rozhodujú sa „podľa pocitu“. Umelá inteligencia otvára práve túto prekážku: nespracovaný text rozdeľuje na témy v priebehu niekoľkých minút a nie hodín. Syntéza však nie je úlohou „vytvoriť súhrn“; Je to odôvodnenie založené na dôkazoch a overiteľné. Táto jednotka vám ukáže, ako si zachovať autentickosť náhľadu a zároveň urobiť z AI svojho partnera pre syntézu.
Čo je náhľad, nie súhrn
Najprv si ujasnime pojem. Insight je zmysluplný vzorec, ktorý vychádza z údajov a vedie návrh: „Používatelia sa nevzdávajú pri pokladni, ale keď prvýkrát uvidia poplatok za dopravu.“ Toto nie je súhrn („Používatelia sa sťažujú na platbu“); nie je to ani pozorovanie („Účastník 4 sa zastavil, keď videl poplatok za dopravu“). Insight zachytáva spoločnú príčinu mnohých pozorovaní a otvára dvere k rozhodnutiu o dizajne.
AI má prirodzene tendenciu vytvárať súhrny. Vašou úlohou je preniesť to od súhrnu k prehľadu: „prečo?“ a "Čo sa tým mení v dizajne?" vložením svojich otázok do výzvy.
Kroky kvalitatívnej analýzy a miesto umelej inteligencie
Kvalitatívna analýza (nenumerická, založená na texte/pozorovaní) klasicky prebieha týmito krokmi:
- Kódovanie: Každá zmysluplná časť v texte je označená štítkom ("obáva sa nákladov na dopravu", "nedostatok dôvery").
- Diagram afinity (mapovanie afinity): Podobné značky sú zoskupené; skupiny sa stávajú témami.
- Stanovenie priority témy: Určuje sa, ktorá téma sa zobrazuje koľkým používateľom a s akou intenzitou.
- Pohľad a rady: Témy "čo robiť?" spája sa s vetami.
AI výrazne urýchľuje kroky 1 a 2: poskytovanie počiatočného kódovania a počiatočného zoskupovania v priebehu niekoľkých minút. Význam skupín, dôležitosť tém a presnosť návrhov si však vyžadujú overenie človekom. AI vám dá „prvý návrh mapy“; Mapu opravujete podľa skutočnosti.
Tip: Predtým, ako poviete AI, aby „extrahovala témy“, zadajte svoju schému kódovania (zoznam značiek). Takto to funguje v spoločnom jazyku všetkých a výstupy sú porovnateľné.
Reťaz dôkazov: každá téma odkazuje na citát
Zlaté pravidlo syntézy: každá téma je spojená s aspoň jedným doslovným citátom. Citát je dôkazom, že téma je skutočná. Keď požiadate AI o tému, vždy uveďte požiadavku na citáciu; Povedzte mu, aby nevytváral tému, na ktorú nemôže nájsť cenovú ponuku. Týmto spôsobom zastavíte halucináciu pri zdroji: vymyslená téma je označená ako „nepodložená“, pretože nemá v zdroji protipól.
vrstva
príklad
zdroj
pozorovanie
„Účastník 4 opustil košík, keď videl poplatok za dopravu“
nahrávanie jeden na jedného
kód
"neočakávané náklady"
Označovanie
tému
"Skryté náklady narúšajú dôveru"
opakujte pri 5 účastníkoch
vhľad
"Cena dopravy by mala byť uvedená včas"
Opúšťam tému
Návrh
"Pridať odhad dopravy na stránku produktu"
Rozhodnutie o dizajne
Tento reťazec začína, keď sa zainteresovaná strana opýta: „Ako to vieme? Keď sa pýtate, umožňuje vám to vrátiť sa od pozorovania k citácii.
tri mini prípady
Prípad 1 – 240 odpovedí na prieskum, 90 minút. Jeden tím AI kódoval 240 otvorených (voľný text) odpovedí prieskumu. Model navrhol 11 tém; Tím ich skontroloval za 90 minút, zúžil ich na 7, skombinoval 2 témy a 2 odstránil ako nepodporované. 2-dňová manuálna práca bola skrátená na pol dňa a reťaz dôkazov bola zachovaná.
Prípad 2 – Zachytená prehnaná téma. AI vytvorila silnú tému „používatelia nenávidia aplikáciu“. Keď sa tím pozrel na úvodzovky, zistil, že iba 2 účastníci boli drsní, zatiaľ čo 18 boli neutrálni. Téma bola prepísaná ako „intenzívne sklamanie v určitom toku“. Ponaučenie: AI môže preháňať emocionálnu intenzitu; počítať frekvenciu.
Prípad 3 – Chýbajúci menšinový názor. Zatiaľ čo model zdôrazňoval väčšinové témy, bagatelizoval kritický problém dostupnosti, ktorý nastolili 3 účastníci, ako „nedôležitý“. Projektant si to všimol a zachoval ako samostatný nález; Neskôr sa ukázalo, že tento problém sa týkal všetkých používateľov čítačky obrazovky. Poučenie: menšinový signál nie je vždy „menej dôležitý“.
Kopírovateľné výzvy
Vaša úloha: analytik kvalitatívneho výskumu. Schéma kódovania (značky): <<zoznam>>Úloha: Kódujte anonymizovaný prepis nižšie pomocou týchto značiek. Pridať [Účastník
Transformujte nasledujúce kódované údaje do diagramu blízkosti: zoskupte podobné kódy, pomenujte každú skupinu témou. Pre každú tému: spočítajte, v koľkých jednotlivých účastníkoch sa objavuje, zahrňte 2 najsilnejšie citáty a napíšte jednovetové vysvetlenie „prečo“. Samostatne označte témy so slabými dôkazmi. Údaje: <<kódy>>
Chcem otestovať nasledujúcu tému: "<<téma>>". Samostatne uveďte v zdrojovom texte citáty, ktoré PODPORUJÚ a ODMIETNU túto tému. Na záver zhodnoťte, do akej miery je téma podporovaná (silná/stredná/slabá).Zdroj: <<transscription>>
Premeňte tento zoznam tém na prehľady a návrhy. Pre každú tému: 1) náhľad v jednej vete (obsahujúci „pretože...“), 2) konkrétny návrh dizajnu, 3) akú obrazovku/tok tento návrh ovplyvňuje. Nevymýšľajte; Ak je základ slabý, napíšte „je potrebný ďalší výskum“. Témy: <<zoznam>>
Slabá výzva / Silná výzva
Slabý: "Analyzujte tieto rozhovory a povedzte mi výsledky."
Výsledok: Súhrn bez zdrojov, bez informácií o frekvencii a otvorený zveličovaniu.
Strong: „Zakódujte tento prepis štítkami, ktoré som vám dal; pripojte každú tému k citátu od [účastníka
Výsledok: Vysokofrekvenčná, overiteľná syntéza založená na dôkazoch.
Rozdiel: silná výzva frekvencia + citát + slabá výzva; tieto zabraňujú preháňaniu a halucináciám.
Časté chyby
- Nepočítajúc frekvenciu. Rozhodovanie bez toho, aby ste vedeli, či sa za vetou „Používatelia chcú X“ skrývajú 2 alebo 20 ľudí.
- Berte intenzitu emócií takú, aká je. AI má tendenciu zvýrazniť silné výrazy; Môže skrývať neutrálnu väčšinu.
- Odstránenie menšinového signálu. Problém, s ktorým sa stretáva len málo ľudí, môže byť kritický (napr. dostupnosť).
- Nevyžaduje citáciu. Téma bez úvodzoviek je neoveriteľnou témou.
- Dokončite v jednom kole. Syntéza je iteratívna; Otestujte prvý výstup a zaostrite výzvu.
V súhrne
Syntéza je úvaha, ktorá premieňa nespracované údaje na poznatky, ktoré poháňajú dizajn. Umelá inteligencia výrazne urýchľuje mechanické kroky, ako je kódovanie a zoskupovanie podľa blízkosti, ale význam a význam vhľadu zostáva ľudský. Zlaté pravidlo je spojiť každú tému s doslovným citátom; frekvencia počítania, opravte emocionálne preháňanie, nenechajte si ujsť signál menšiny. Keď vytvoríte reťazec dôkazov, ktorý sa rozprestiera od pozorovania po citát, od témy po návrh, dosiahnete výstup výskumu, ktorý je rýchly a obhájiteľný.
Aplikačná úloha
- Anonymizujte svojich 8-10 (alebo fiktívnych) odpovedí na rozhovor/prieskum.
- Napíšte si vlastnú kódovaciu schému (6-8 štítkov) a nechajte si ju nakódovať umelou inteligenciou s prvou výzvou.
- Odstráňte témy pomocou druhej výzvy; Všimnite si, koľko účastníkov sa objaví pre každú tému.
- Otestujte najsilnejšiu tému s treťou výzvou: porovnajte podporné a vyvracajúce citácie.
- Napíšte tému vo forme náhľadu + návrhu + dotknutej obrazovky a zmapujte reťazec dôkazov.
kontrolný zoznam
- [ ] Svoju schému kódovania som dal vopred AI.
- [ ] Každú tému som prepojil aspoň s jedným doslovným citátom.
- [ ] Počítal som, koľko jednotlivých účastníkov sa objavilo pri každej téme.
- [ ] Často som opravoval prehnané citové prejavy.
- [ ] Urobil som vedomé rozhodnutie, či eliminovať menšinové signály.
- [ ] Pohľady som prepojil s konkrétnym návrhom dizajnu a dotknutou obrazovkou.