zisky:
- Schopnosť kódovať údaje z rozhovorov, prieskumov a pozorovaní pomocou umelej inteligencie a extrahovať témy a vzory
- Schopnosť navrhnúť personu, cestu používateľa a vyhlásenie o prehľade s podporou umelej inteligencie
- Ochrana pred výmyslom a zaujatosťou prepojením a overením poznatkov generovaných umelou inteligenciou späť k nespracovaným údajom
Dobré produkty sa rodia zo skutočnej potreby používateľa, nie z vkusu dizajnéra. Spôsob, ako pochopiť túto potrebu, je prostredníctvom používateľského výskumu: rozhovory, prieskumy, pozorovania v teréne, testy použiteľnosti. Najťažšou časťou výskumu však nie je zbierať údaje, ale dať im zmysel. Na prečítanie desiatok strán prepisov rozhovorov a stoviek odpovedí z prieskumu a získanie skutočných vzorcov, potrieb a postrehov (vhľad; za údajmi znamená „aha“) je potrebná skúsenosť a čas. Práve tu je umelá inteligencia výkonným pomocníkom pri syntéze: rýchlo kóduje veľké kusy textu, zoskupuje témy, poukazuje na vzory. Ale tá istá sila, ak sa nepoužíva opatrne, produkuje falošné citácie, skreslené dôrazy a zaujatosti. Táto jednotka vysvetľuje, ako používať AI ako urýchľovač pri syntéze výskumu a prečo by ste mali prepojiť každý náhľad späť s nespracovanými údajmi.
Čo je syntéza výskumu a kam patrí AI?
Nespracované údaje z výskumu sú chaotické: jeden používateľ hovorí, že „vždy hľadá nabíjací kábel“, ďalší hovorí, že „nočné svetlo je príliš jasné“, ďalší sa sťažuje, že „v tme nemôže nájsť tlačidlá“. Syntéza je akt zoskupenia týchto jednotlivých vyhlásení („nočné používanie je problematické“) a ich premena na náhľad („používatelia používajú tento produkt najlepšie v tme, ale produkt je určený na denné použitie“). Pri klasickej metóde to dizajnéri robia pomocou diagramu afinity (fyzické/digitálne zoskupenie podobných poznámok).
AI urýchľuje niekoľko krokov tohto procesu:
- Kódovanie: Priradenie tagov tém ku každému výroku („nočné používanie“, „náročnosť inštalácie“). AI vopred označí stovky fráz za pár minút.
- Téma: Zbieranie značiek do supersetov. AI poukazuje na opakujúce sa vzory.
- Náčrt náhľadu: Navrhovanie „aha“ viet z tém. AI vytvára koncepty, vy filtrujete.
- Osobnosť a obrys cesty: Načrtnutie typických užívateľských profilov a krokov použitia.
Kritické pravidlo: AI sumarizuje a zoskupuje, ale nespracované údaje hovoria pravdu. Každá téma a každý citát by mali byť prepojené so skutočným prepisom rozhovoru a overené.
Dve najväčšie riziká: falošné citácie a zaujatosť
V syntéze výskumu existujú dve nebezpečné úskalia AI. Prvým je vymyslený citát (halucinácia): AI dokáže vygenerovať používateľský citát, ktorý nie je v údajoch, ale „znie správne“. Toto je najnebezpečnejšia chyba vo výskume, pretože robíte skutočné rozhodnutie o dizajne na základe falošných dôkazov. Druhým je skreslenie a zaujatosť: AI môže zveličiť väčšinový názor a vymazať dôležitú, ale málo hovorenú potrebu menšiny; alebo stereotypy v tréningových údajoch („starí ľudia sa boja technológie“) môžu preniknúť do vášho výskumu. Jediný spôsob, ako sa chrániť pred oboma: zapojte každý výstup späť do nespracovaných údajov a opýtajte sa "v ktorej konverzácii, na ktorom riadku sa tento citát skutočne vyskytuje?" je položiť otázku.
Upozornenie: Nezahŕňajte do správy, osobnosti alebo prezentácie žiadne používateľské citácie vygenerované AI bez toho, aby ste ich nenašli a nepotvrdili doslovne v nespracovanom texte rozhovoru. Apokryfný citát skresľuje skutočné rozhodnutie o dizajne.
Bezpečný tok syntézy krok za krokom
- Anonymizovať: Vyčistite osobné údaje (meno, kontakt, identifikačné údaje) z prepisov rozhovorov. Údaje používateľa sú osobné údaje; Dôvernosť je nevyhnutná.
- Kódujte, ale požiadajte o zdroj: Požiadajte AI, aby si vyžiadala nespracovaný výraz a odkaz na riadok/zdroj zodpovedajúci každej značke.
- Počítajte témy: „Koľko používateľov to spomenulo?“ pýtať sa; Nedovoľte, aby jeden človek prezentoval svoj názor ako všeobecný vzor.
- Previažte prehľad späť: Pod každú vetu prehľadu uveďte skutočné úvodzovky, na ktorých je založená.
- Hľadajte protipríklady: Opýtajte sa AI „Existujú vyhlásenia, ktoré odporujú tejto téme, povedzte opak?“ pýtať sa; to odbúrava zaujatosť a prílišné zovšeobecňovanie.
tri mini prípady
Prípad 1 – Zachytená cenová ponuka. Tím zhrnie 12 konverzácií s AI; AI generuje pozoruhodnú citáciu: „Jeden z používateľov povedal: „Kúpil by som tento produkt ako darček“ a tím ho chcel zahrnúť do prezentácie. Výskumník skenuje nespracované texty; Takáto veta sa nenachádza v žiadnom rozhovore. AI „vymyslela“ citát z celkového pozitívneho tónu. Citát je odstránený. Ponaučenie: každá cenová ponuka je overená doslovne v nespracovaných údajoch.
Prípad 2 – Vymazanie potreby menšín. Dizajnový tím vykonáva štúdiu kuchynských spotrebičov s 20 používateľmi. Stručný prehľad AI zdôrazňuje tému „používateľom záleží na rýchlosti“. Keď sa však tím vráti k nespracovaným údajom, vidí, že 3 používatelia spomenuli potrebu používania jednou rukou (jeden s postihnutou rukou, jeden neustále nosí dieťa); AI to odmietla ako „menšinu“. Ide však o kritický prehľad prístupnosti, ktorý bude produkt odlišovať. Ponaučenie: číselná váha nemusí vždy znamenať dôležitosť; menšinová potreba môže byť tým najcennejším pohľadom.
Prípad 3 – Správne použitie. Výskumník odovzdá AI 300 otvorených odpovedí prieskumu a povie „označte každú odpoveď na tieto témy, spočítajte, koľko odpovedí pripadá na každú tému, a citujte 3 skutočné vzorové odpovede doslovne z každej témy.“ AI generuje 8 tém, čísel a skutočných citátov. Výskumník kontroluje ukážkové citácie v nespracovaných údajoch, všetky sú skutočné. Tým sa tabuľka stáva začiatkom afinitnej štúdie. Lekcia: štruktúrovaná výzva s požiadavkou na výpočet + doslovná citácia prináša spoľahlivú a overiteľnú syntézu.
Kopírovateľné šablóny výziev
ŠABLONA ZABEZPEČENÉHO KÓDOVANIA "Označte nasledujúce (anonymizované) výroky v rozhovore do tém. Pre každý výrok: (1) tému, ktorú ste priradili, (2) PRESNÝ text výroku, (3) odkaz na zdroj [číslo/riadok rozhovoru]. NEVYTVORUJTE žiadne vyhlásenie, ktoré NIE JE v texte. Označte výrok, ktorým si nie ste istý], štítkom 'neistý'. Údaje: [prilepiť]."
ŠABLONA POČÍTANIA TÉM"Extrahujte témy z nasledujúcich kódovaných údajov. Pre každú tému: koľko RÔZNYCH používateľov ju vyjadrilo, príklad 3 doslovných citátov (so zdrojom). Neprezentujte názor vyjadrený jednou osobou ako 'všeobecný vzor'; jasne napíšte frekvenciu. Údaje: [prilepiť]."
PROTIPRÍKLAD/ŠABLÓNA NA PORUŠENIE PREDSUDU „Chcem otestovať nasledujúcu šablónu prehľadu: '[názor]. Uveďte v nespracovaných údajoch tvrdenia, ktoré PROTI tomuto prehľadu naznačujú opak alebo sú v menšine, ale môžu byť dôležité. Cieľom je zachytiť nadmerné zovšeobecňovanie a zaujatosť. Údaje: [prilepiť].“
ŠABLONA NA SPÄTNÉ PREPOJENIE POHĽADOV "Napíšte nasledujúcu vetu náhľadu: [názor]. Hneď nižšie uveďte skutočné citácie (doslovne, so zdrojom), ktoré PODPORÚ tento náhľad. Ak nie je dostatok priamych dôkazov, povedzte ‚nedostatočné dôkazy‘. NEPRIDÁVAJTE vymyslené dôkazy.“
Slabá výzva / Silná výzva
SLABÁ VÝZVA: "Zhrňte tieto rozhovory a poskytnite mi postrehy."
SILNÁ VÝZVA: "Analyzujte nižšie uvedených 12 anonymizovaných rozhovorov. (1) Označte výroky do tém. (2) Spočítajte, koľko rôznych používateľov spomenulo každú tému. (3) Uveďte 2 PRESNÉ citácie pre každú tému (s číslom rozhovoru). (4) Zhromaždite menšinové, ale potenciálne dôležité potreby pod samostatný nadpis. (5) Označte závery s nedostatočnými dôkazmi, aby sa v texte nenachádzali žiadne overené. NEEXISTUJE. V texte NEEXISTUJE. Údaje: [prilepiť].“
Slabá výzva dáva AI slobodu skresľovať a vyrábať; Vďaka tomu je syntéza overiteľná silným rýchlym počítaním, doslovným citovaním, ochranou menšín a „zákazom výroby“.
Časté chyby
- Použitie ponuky vygenerovanej AI bez jej kontroly v nespracovaných údajoch. Vymyslená citácia je najnebezpečnejšia výskumná chyba.
- Myslieť si, že početná väčšina je jediným kritériom dôležitosti. Potreba menšiny je často tým najcennejším poznaním.
- Poskytovanie osobných údajov AI bez ich anonymizácie. Údaje používateľa sú osobné údaje; Dôvernosť je povinná.
- Nehľadajte protipríklady. Syntéza, ktorá netestuje opak, posilňuje predsudky.
- Zamieňanie skratky AI za „výskum“. Syntéza je začiatok; Štatistiky sú založené na nespracovaných údajoch.
Tip: Pod každým prehľadom sa opýtajte „aké 2-3 skutočné citáty to podporujú?“ Napíšte otázku. Ak neexistuje odpoveď, tento pohľad je stále hypotézou, nie zistením.
V súhrne
Umelá inteligencia je výkonným urýchľovačom syntézy používateľského výskumu: kóduje stovky fráz, zoskupuje témy a vytvára prehľady a postavy. Existujú však dve hlavné riziká: vymyslené ponuky a skreslenie/zaujatosť. Spôsob, ako sa tomu brániť, je prepojiť každú tému a citovať späť k nespracovaným údajom, počítať frekvenciu, zachovať potrebu menšín a hľadať protipríklady. Anonymizovať používateľské údaje, požiadať AI o doslovné citácie a zdroje, zaviesť pravidlo „nevymýšľania“ a nepovažovať žiadne poznatky za zistenia bez toho, aby ste ich podložili dôkazmi.
Aplikačná úloha
Majte 8-10 krátkych používateľských posudkov, skutočných alebo fiktívnych. Najprv ich všetky anonymizujte. Majte témy značiek AI so šablónou „bezpečné kódovanie“; potom požiadajte o frekvenciu a doslovné citácie pomocou šablóny „Počet tém“. Skontrolujte úvodzovky uvedené AI v surovom texte jeden po druhom a označte, či sú skutočné alebo nie. Nakoniec pomocou šablóny „Protipríklad“ hľadajte výroky, ktoré sú v rozpore s vašou hlavnou témou, a zapíšte si, či nájdete menšinovú potrebu.
kontrolný zoznam
- [ ] Pred odovzdaním AI som anonymizoval používateľské údaje.
- [ ] Požiadal som AI o doslovné citácie a odkazy na zdroje pre každú tému.
- [ ] Každý citát som overil tak, že som ho našiel v nespracovaných údajoch (kontrola správnosti).
- [ ] Počítal som frekvenciu tém a potreby menšín som ponechal oddelene.
- [ ] Testoval som zaujatosť hľadaním protipríkladov k mojim hlavným témam.
- [ ] Úsudky, ktoré neboli založené na dôkazoch, som označil za „hypotézy“ a nepočítal som s nimi ako so zisteniami.