Felhasználói kutatás szintézise és betekintés generálása

Nyereség:

• Képes interjúk, felmérések és megfigyelések adatainak mesterséges intelligenciával kódolására, valamint témák és minták kinyerésére
• Képes személyi, felhasználói úti és betekintési nyilatkozatok megfogalmazására a mesterséges intelligencia segítségével
• Védelem a gyártás és az elfogultság ellen a mesterséges intelligencia által generált betekintések nyers adatokhoz való kapcsolásával és validálásával

A jó termékek a felhasználó valós igényéből születnek, nem a tervező ízléséből. Ezt az igényt felhasználói kutatással lehet megérteni: interjúk, felmérések, helyszíni megfigyelések, használhatósági tesztek. De a kutatás legnehezebb része nem az adatok gyűjtése, hanem az értelmes feldolgozás. Tapasztalat és idő kell ahhoz, hogy elolvassa több tíz oldalnyi interjúátiratot és több száz felmérési választ, és kivonja a valódi mintákat, szükségleteket és betekintést (betekintés; az adatok mögött meghúzódó "aha" jelentés). Itt a mesterséges intelligencia hatékony szintézis asszisztens: gyorsan kódol nagy szövegrészeket, csoportosít témákat, rámutat a mintákra. De ugyanez az erő, ha nem óvatosan használjuk, hamis idézeteket, torz hangsúlyokat és elfogultságot eredményez. Ez az egység elmagyarázza, hogyan lehet az AI-t a kutatási szintézis gyorsítójaként használni, és miért kell minden betekintést nyers adatokhoz kapcsolni.

Mi a kutatási szintézis, és hol illeszkedik a mesterséges intelligencia?

A nyers kutatási adatok rendetlenek: az egyik felhasználó azt mondja, hogy "minden alkalommal megkeresi a töltőkábelt", egy másik azt mondja, hogy "túl erős az éjszakai lámpa", egy másik pedig arra panaszkodik, hogy "nem találja a gombokat a sötétben". A szintézis ezen egyetlen állítások csoportosítása ("az éjszakai használat problémás"), és betekintést nyerhet belőlük ("a felhasználók ezt a terméket sötétben használják legjobban, de a terméket nappali használatra tervezték"). A klasszikus módszerben a tervezők ezt egy affinitásdiagrammal teszik meg (hasonló hangjegyek fizikai/digitális csoportosítása).

Az AI felgyorsítja a folyamat több lépését:

1. Kódolás: Témacímkék hozzárendelése minden utasításhoz ("éjszakai használat", "telepítési nehézség"). Az AI percek alatt több száz kifejezést címkéz elő.
2. Tematika: Címkék összegyűjtése szuperkészletekbe. Az AI ismétlődő mintákra mutat rá.
3. Betekintési vázlat: „Aha” mondatok javaslata témákból. A mesterséges intelligencia piszkozatokat készít, te szűrsz.
4. Személy és útvázlat: Tipikus felhasználói profilok és használati lépések felvázolása.

Kritikus szabály: a mesterséges intelligencia összegez és csoportosít, de a nyers adatok megmondják az igazat. Minden témát és minden idézetet vissza kell kapcsolni a tényleges interjú átiratához, és ellenőrizni kell.

A két legnagyobb kockázat: hamis idézetek és elfogultság

Az MI-nek két veszélyes buktatója van a kutatási szintézisben. Az első a kitalált idézet (hallucináció): az AI olyan felhasználói idézetet tud generálni, amely nem szerepel az adatokban, de „jól hangzik”. Ez a kutatás legveszélyesebb hibája, mert valódi tervezési döntést hoz, hamis bizonyítékok alapján. A második a torzítás és az elfogultság: a mesterséges intelligencia eltúlozza a többség véleményét, és eltünteti a kisebbség fontos, de kevéssé kimondott szükségletét; vagy a képzési adatok sztereotípiái („az öregek félnek a technológiától”) beszivároghatnak a kutatásába. Az egyetlen módja annak, hogy mindkettő ellen védekezzen: dugja vissza az egyes kimeneteket a nyers adatokhoz, és kérdezze meg, hogy "melyik beszélgetésben, melyik sorban fordul elő ez az idézet?" feltenni a kérdést.

Vigyázat: Ne írjon be mesterséges intelligencia által generált felhasználói idézeteket a jelentésbe, a személyiségbe vagy a prezentációba anélkül, hogy azokat szó szerint meg nem találta és megerősítené az interjú nyers szövegében. Az apokrif idézet hamisan ábrázolja a tényleges tervezési döntést.

Biztonságos szintézis folyamat lépésről lépésre

1. Anonimizálás: A személyes adatok (név, elérhetőség, azonosító adatok) eltávolítása az interjúk átirataiból. A felhasználói adatok személyes adatok; A titoktartás elengedhetetlen.
2. Kódolás, de kérje a forrást: Kérje meg az AI-t, hogy kérje le az egyes címkéknek megfelelő nyers kifejezést és sor/forrás hivatkozást.
3. Számolja meg a témákat: „Hány felhasználó említette ezt?” kérdez; Ne hagyja, hogy egy személy általános mintaként mutassa be véleményét.
4. Kösd vissza a betekintést: Minden betekintést nyújtó mondat alá tegye a tényleges idézeteket, amelyeken alapul.
5. Keressen ellenpéldákat: Kérdezze meg az AI-t: „vannak olyan kijelentések, amelyek ellentmondanak ennek a témának, mondjuk az ellenkezőjét?” kérdez; ez lebontja az elfogultságot és a túláltalánosítást.

három mini tok

1. eset – Elkapott koholt idézet. Egy csapat 12, mesterséges intelligenciával folytatott beszélgetést foglal össze; A mesterséges intelligencia feltűnő idézetet generál: „Az egyik felhasználó azt mondta: „Ajándékba venném ezt a terméket”, és a csapat be akarta építeni a bemutatóba. Egy kutató beszkenneli a nyers szövegeket; Ilyen mondat egyetlen beszélgetésben sem található. A mesterséges intelligencia az általános pozitív hangnemből idézett. Az idézet eltávolítva. Tanulság: minden idézet szó szerint igazolódik a nyers adatokban.

2. eset – A kisebbségi igény törlése. Egy tervezőcsapat 20 felhasználó bevonásával végez konyhai berendezések vizsgálatát. Az AI-tájékoztató kiemeli a „felhasználókat érdekli a sebesség” témáját. De amikor a csapat visszatér a nyers adatokhoz, azt látják, hogy 3 felhasználó említette az egykezes használat szükségességét (egy fogyatékos karral, egy állandóan babát hord); Az AI ezt "kisebbségként" utasította el. Ez azonban egy kritikus hozzáférhetőségi betekintés, amely megkülönbözteti a terméket. Tanulság: a számszerű súly nem mindig jelent fontosságot; a kisebbségi igény lehet a legértékesebb betekintés.

3. eset – Rendeltetésszerű használat. Egy kutató 300 felmérés nyílt végű választ ad az MI-hez, és azt mondja: „Minden egyes választ jelöljön meg ezekhez a témákhoz, számolja meg, hány válasz esik az egyes témákhoz, és idézzen szó szerint 3 tényleges mintaválaszt minden témából.” Az AI 8 témát, számokat és valós idézeteket generál. A kutató ellenőrzi a nyers adatokban szereplő idézetmintákat, ezek mind valósak. Ezzel a táblázat az affinitásvizsgálat kezdete. Tanulság: a felsorolást kérő strukturált prompt + szó szerinti idézet megbízható és ellenőrizhető szintézist eredményez.

Másolható prompt sablonok

BIZTONSÁGOS KÓDOLÁSSABBON "Célelje be témákba a következő (anonimizált) interjúkijelentéseket. Minden állításhoz: (1) az Ön által hozzárendelt téma, (2) az állítás PONTOS szövege, (3) a forrás hivatkozása [interjúszám/sor]. NE alkosson olyan állítást, amely NEM szerepel a szövegben. Jelölje „bizonytalan” az állítást, amelyről Ön.

TÉMASZÁMLÁLÓ SABLON"Kivonja ki a témákat a következő kódolt adatokból. Minden témához: hány KÜLÖNBÖZŐ felhasználó fejezte ki, példa 3 szó szerinti idézet (forrással). Egyetlen személy véleményét ne mutasd be 'általános mintaként'; írja le egyértelműen a gyakoriságot. Adatok: [beillesztés]."

ELLENPÉLDA / ELŐÍTÉLETEK MEGTÖRÉSE SABLON "A következő betekintési sablont szeretném tesztelni: '[betekintés]'. Sorolja fel a nyers adatokban azokat az állításokat, amelyek ezzel a betekintéssel ELLENI, vagy az ellenkezőjére utalnak, vagy kisebbségben vannak, de fontosak lehetnek. A cél a túlzott általánosítás és az elfogultság megfogása. Adatok: [beillesztés]."

BEJELENTKEZÉS VISSZAHIVATKOZÓ SABLON "Írja be a következő betekintési mondatot: [insight]. Közvetlenül az alábbiakban tegyen tényleges idézeteket (szó szerint, a forrás megjelölésével), amelyek TÁMOGATJÁK ezt a meglátást. Ha nincs elegendő közvetlen bizonyíték, mondják azt, hogy "nincs elegendő bizonyíték". NE HASZNÁLJ hozzá kitalált bizonyítékot."

Gyenge felszólítás / Erős felszólítás

GYENGE PROMPT: "Összefoglalja ezeket a beszélgetéseket, és adja meg nekem a betekintést."

ERŐS UTASÍTÁS: "Elemezze az alábbi 12 anonimizált interjút. (1) Címkézze fel a kijelentéseket témákba. (2) Számolja meg, hány különböző felhasználó említette az egyes témákat. (3) Adjon 2 PONTOS idézetet minden témához (interjúszámmal). (4) Gyűjtse össze a kisebbségi, de potenciálisan fontos szükségleteket külön címszó alatt. (5) Megerősített, hiteles bizonyítékok megjelölése. a szövegben NE csinálj olyan idézetet, amely nem létezik Adatok: [beillesztés].

A gyenge prompt szabadságot ad az AI-nak a torzításra és a gyártásra; Erős azonnali számlálással, szó szerinti idézéssel, kisebbségvédelemmel és "gyártási tilalmmal" teszi ellenőrizhetővé a szintézist.

Gyakori hibák

• Az AI által generált árajánlat használata anélkül, hogy ellenőrizné a nyers adatokban. A kitalált idézet a legveszélyesebb kutatási hiba.
• Ha azt gondoljuk, hogy a számszerű többség az egyetlen fontossági kritérium. A kisebbségi igény gyakran a legértékesebb betekintés.
• Személyes adatok megadása MI-nek anonimizálás nélkül. A felhasználói adatok személyes adatok; A titoktartás kötelező.
• Nem keresünk ellenpéldákat. Az ellenkezőjét nem vizsgáló szintézis megerősíti az előítéleteket.
• Az AI-tájékoztató összetévesztése „kutatással”. A szintézis egy kezdet; Az insight nyers adatokon alapul.

Tipp: Minden betekintés alatt kérdezze meg, hogy „mi 2-3 valódi idézet támasztja alá ezt?” Írd meg a kérdést. Ha nincs válasz, ez a belátás még mindig hipotézis, nem pedig megállapítás.

Összefoglalva

A mesterséges intelligencia egy erőteljes gyorsító a felhasználói kutatási szintézisben: kifejezések százait kódolja, témákat csoportosít, valamint betekintést és személyiségeket hoz létre. De van két fő kockázat: kitalált idézetek és torzítás/elfogultság. Ez ellen úgy védekezhetünk, hogy az egyes témákat és idézeteket visszacsatoljuk a nyers adatokhoz, megszámoljuk a gyakoriságot, megőrizzük a kisebbségi szükségleteket, és ellenpéldákat keresünk. Anonimizálja a felhasználói adatokat, kérjen szó szerinti idézeteket és forrásokat az AI-tól, írjon elő egy „nem gyártási” szabályt, és ne számítson betekintést leletnek anélkül, hogy bizonyítékokkal alátámasztja azokat.

Pályázati feladat

Legyen 8-10 rövid felhasználói beszámoló, valós vagy kitalált. Először anonimizálja őket. Legyen az AI-címke témák a „biztonságos kódolás” sablonnal; majd kérjen gyakoriságot és szó szerinti idézeteket a „Témaszám” sablon segítségével. Ellenőrizze egyesével az AI által a nyers szövegben megadott idézeteket, és jelölje meg, hogy valódiak-e vagy sem. Végül az „Ellenpélda” sablon segítségével keressen olyan állításokat, amelyek ellentmondanak a fő témájának, és írja le, hogy talál-e kisebbségi igényt.

ellenőrző lista

• [ ] A felhasználói adatokat anonimizáltam, mielőtt átadtam volna az AI-nak.
• [ ] Minden témához szó szerinti idézeteket és forráshivatkozásokat kértem az AI-tól.
• [ ] Minden árajánlatot úgy ellenőriztem, hogy megtaláltam a nyers adatokban (illesztés ellenőrzése).
• [ ] A témák gyakoriságát és a kisebbségi igényeket külön számoltam.
• [ ] A torzítást úgy teszteltem, hogy ellenpéldákat kerestem fő témáimhoz.
• [ ] A nem bizonyítékon alapuló következtetéseket "hipotézisnek" jelöltem meg, és nem vettem figyelembe megállapításnak.