Dobički:
- Sposobnost kodiranja podatkov intervjuja, ankete in opazovanja z umetno inteligenco ter izločanje tem in vzorcev
- Sposobnost priprave izjav o osebi, uporabniški poti in vpogledih s podporo umetne inteligence
- Zaščita pred izmišljevanjem in pristranskostjo s povezovanjem in potrjevanjem vpogledov, ki jih je ustvarila umetna inteligenca, nazaj na neobdelane podatke
Dobri izdelki se rodijo iz resničnih potreb uporabnika, ne iz okusa oblikovalca. To potrebo lahko razumemo z raziskavami uporabnikov: intervjuji, ankete, terenska opazovanja, testi uporabnosti. Toda najtežji del raziskave ni zbiranje podatkov, ampak njihovo osmišljanje. Potrebujemo izkušnje in čas, da preberemo na desetine strani zapisov intervjujev in na stotine odgovorov na ankete ter izluščimo resnične vzorce, potrebe in spoznanja (vpogled; pomen "aha" za podatki). Tu je umetna inteligenca močan pomočnik pri sintezi: hitro kodira velike dele besedila, združuje teme, opozarja na vzorce. Toda ta ista moč, če je ne uporabljamo previdno, povzroči lažno navajanje, izkrivljeno poudarjanje in pristranskost. Ta enota pojasnjuje, kako uporabiti AI kot pospeševalnik pri sintezi raziskav in zakaj bi morali vsak vpogled povezati z neobdelanimi podatki.
Kaj je sinteza raziskav in kam se umešča umetna inteligenca?
Surovi podatki raziskave so neurejeni: en uporabnik pravi, da "vsakič išče polnilni kabel", drugi pravi, da "je nočna lučka presvetla," tretji se pritožuje, da "ne najde gumbov v temi." Sinteza je dejanje združevanja teh posameznih izjav ("nočna uporaba je problematična") in njihovega spreminjanja v vpogled ("uporabniki najbolje uporabljajo ta izdelek v temi, vendar je izdelek zasnovan za dnevno uporabo"). Pri klasični metodi oblikovalci to naredijo z afinitetnim diagramom (fizično/digitalno združevanje podobnih zapiskov).
AI pospeši več korakov tega procesa:
- Kodiranje: Dodeljevanje tematskih oznak vsaki izjavi ("nočna uporaba", "težava pri namestitvi"). AI vnaprej označi na stotine fraz v minutah.
- Tematizacija: Zbiranje oznak v nadnabore. AI opozarja na ponavljajoče se vzorce.
- Vpogledna skica: predlaganje stavkov »aha« iz tem. AI ustvarja osnutke, vi filtrirate.
- Osebnost in oris potovanja: skica tipičnih uporabniških profilov in korakov uporabe.
Kritično pravilo: AI povzema in združuje, vendar neobdelani podatki govorijo resnico. Vsako temo in vsak citat je treba povezati z dejanskim zapisom intervjuja in preveriti.
Dve največji nevarnosti: lažni citati in pristranskost
Obstajata dve nevarni pasti umetne inteligence pri sintezi raziskav. Prvi je izmišljen citat (halucinacija): AI lahko ustvari uporabniški citat, ki ga ni v podatkih, a »zveni prav«. To je najnevarnejša napaka v raziskavah, ker sprejmete resnično odločitev o oblikovanju na podlagi lažnih dokazov. Drugo je izkrivljanje in pristranskost: umetna inteligenca lahko pretirava z mnenjem večine in izbriše pomembne, a premalo govorjene potrebe manjšine; ali stereotipi v podatkih o usposabljanju (»stari ljudje se bojijo tehnologije«) lahko pricurljajo v vaše raziskave. Edini način, da se zaščitite pred obema: vključite vsak izhod nazaj v neobdelane podatke in vprašajte "v katerem pogovoru, v kateri vrstici se ta citat dejansko pojavi?" je postaviti vprašanje.
Pozor: v poročilo, osebnost ali predstavitev ne vključite nobenih uporabniških citatov, ki jih je ustvarila umetna inteligenca, ne da bi jih našli in dobesedno potrdili v neobdelanem besedilu intervjuja. Apokrifni citat napačno predstavlja dejansko oblikovalsko odločitev.
Varen tok sinteze korak za korakom
- Anonimiziraj: Počisti osebne podatke (ime, kontakt, identifikacijske podrobnosti) iz prepisov intervjujev. Uporabniški podatki so osebni podatki; Zaupnost je nujna.
- Kodirajte, vendar zahtevajte vir: Prosite AI, da zahteva surovi izraz in referenco vrstice/vira, ki ustreza vsaki oznaki.
- Preštejte teme: "Koliko uporabnikov je to omenilo?" vprašati; Ne dovolite, da ena oseba predstavi svoje mnenje kot splošen vzorec.
- Povežite vpogled: Pod vsak vpogledni stavek vnesite dejanske citate, na katerih temelji.
- Poiščite nasprotne primere: vprašajte AI "ali obstajajo izjave, ki nasprotujejo tej temi, recite nasprotno?" vprašati; to razbije pristranskost in pretirano posploševanje.
trije mini kovčki
Primer 1 – Ujet izmišljen citat. Ekipa povzema 12 pogovorov z AI; Umetna inteligenca ustvari osupljiv citat: »Eden od uporabnikov je rekel: 'Ta izdelek bi kupil kot darilo'« in ekipa ga je želela vključiti v predstavitev. Raziskovalec skenira neobdelana besedila; Takega stavka ni v nobenem pogovoru. AI je "sestavil" citat iz splošnega pozitivnega tona. Citat je odstranjen. Nauk: vsak citat je dobesedno preverjen v neobdelanih podatkih.
Primer 2 – Izbris manjšinske potrebe. Skupina oblikovalcev izvaja študijo kuhinjskih aparatov z 20 uporabniki. Povzetek AI poudarja temo "uporabnikom je pomembna hitrost." Toda ko se ekipa vrne k neobdelanim podatkom, vidi, da so 3 uporabniki omenili potrebo po enoročni uporabi (eden z invalidno roko, eden nenehno nosi otroka); AI je to zavrnil kot "manjšino". Vendar je to kritičen vpogled v dostopnost, ki bo razlikoval izdelek. Nauk: številčna teža ne pomeni vedno pomembnosti; potrebe manjšine so morda najdragocenejši vpogled.
3. primer – pravilna uporaba. Raziskovalec umetni inteligenci posreduje 300 odprtih odgovorov na anketo in reče, »označite vsak odgovor na te teme, preštejte, koliko odgovorov pade na vsako temo, in dobesedno navedite 3 dejanske vzorčne odgovore iz vsake teme.« AI ustvarja 8 tem, številk in resničnih citatov. Raziskovalec preveri vzorčne citate v neobdelanih podatkih, vsi so resnični. S tem je tabela začetek študije afinitete. Lekcija: strukturiran poziv za naštevanje + dobesedno navajanje daje zanesljivo in preverljivo sintezo.
Kopirane predloge pozivov
PREDLOGA ZA VARNO KODIRANJE »Naslednje (anonimizirane) izjave intervjuja označite v teme. Za vsako izjavo: (1) tema, ki ste jo dodelili, (2) TOČNO besedilo izjave, (3) sklic na vir [številka/vrstica intervjuja]. NE izmišljujte nobene izjave, ki NI v besedilu. Izjavo, o kateri niste prepričani, označite z 'negotovo'. Podatki: [prilepite].«
PREDLOGA ZA ŠTETJE TEM "Izvlecite teme iz naslednjih kodiranih podatkov. Za vsako temo: koliko RAZLIČNIH uporabnikov jo je izrazilo, primer 3 dobesedni navedki (z virom). Mnenja, ki ga je izrazila ena oseba, ne predstavljajte kot 'splošnega vzorca'; jasno zapišite pogostost. Podatki: [prilepi]."
PROTIPRIMER / PREDLOGA ZA RAZBIJANJE PREDSODKOV "Želim preizkusiti naslednjo predlogo vpogleda: '[vpogled]'. V neobdelanih podatkih naštejte izjave, ki PROTI temu vpogledu, namigujejo na nasprotno ali so v manjšini, vendar so lahko pomembne. Cilj je ujeti pretirano posploševanje in pristranskost. Podatki: [prilepi]."
PREDLOGA ZA POZRATNO POVEZAVO INSIGHT "Napišite naslednji vpogledni stavek: [vpogled]. Takoj spodaj navedite dejanske citate (dobesedno, z virom), ki PODPIRAJO ta vpogled. Če ni dovolj neposrednih dokazov, recite 'nezadostni dokazi'. NE DODAJAJTE izmišljenih dokazov."
Šibek poziv/močan poziv
ŠIBEK POZIV: "Povzemite te pogovore in mi dajte vpogled."
MOČEN POZIV: »Analizirajte spodnjih 12 anonimiziranih intervjujev. (1) Označite izjave v teme. (2) Preštejte, koliko različnih uporabnikov je omenilo posamezno temo. (3) Navedite 2 NATANČNA citata za vsako temo (s številko intervjuja). (4) Manjšinske, a potencialno pomembne potrebe zberite pod ločenim naslovom. (5) Označite sklepe z nezadostnimi dokazi kot 'treba jih je preveriti' v besedilu. NE izmišljujte narekovajev, ki ne obstajajo: [prilepite].«
Šibek poziv daje AI svobodo izkrivljanja in izdelovanja; Zaradi tega je sinteza preverljiva z močnim takojšnjim štetjem, dobesednim navajanjem, zaščito manjšine in "prepovedjo izdelave".
Pogoste napake
- Uporaba ponudbe, ustvarjene z AI, brez preverjanja v neobdelanih podatkih. Izmišljeni citat je najnevarnejša raziskovalna napaka.
- Misliti, da je številčna večina edini kriterij pomembnosti. Potreba manjšine je pogosto najdragocenejši vpogled.
- Dajanje osebnih podatkov AI brez njihove anonimizacije. Uporabniški podatki so osebni podatki; Zaupnost je obvezna.
- Brez iskanja protiprimerov. Sinteza, ki ne preizkuša nasprotnega, krepi predsodke.
- Zamenjati povzetek AI za "raziskavo". Sinteza je začetek; Vpogled temelji na neobdelanih podatkih.
Namig: pod vsakim vpogledom vprašajte "kateri 2-3 resnični citati to podpirajo?" Napišite vprašanje. Če odgovora ni, je ta vpogled še vedno hipoteza, ne ugotovitev.
Če povzamem
AI je močan pospeševalnik sinteze uporabniških raziskav: kodira na stotine fraz, združuje teme ter proizvaja vpoglede in osebnosti. Vendar obstajata dve glavni nevarnosti: izmišljene ponudbe in izkrivljanje/pristranskost. Način, kako se zaščititi pred temi, je, da vsako temo in citat povežete z neobdelanimi podatki, preštejete pogostost, ohranite potrebe manjšine in poiščete nasprotne primere. Anonimizirajte uporabniške podatke, zahtevajte od umetne inteligence dobesedne citate in vire, uveljavite pravilo »brez izmišljotin« in ne štejte nobenih vpogledov kot ugotovitev, ne da bi jih podprli z dokazi.
Aplikacijska naloga
Imejte 8-10 kratkih izjav uporabnikov, resničnih ali izmišljenih. Najprej jih vse anonimiziraj. Imejte teme oznak AI s predlogo »varno kodiranje«; nato zahtevajte pogostost in dobesedne citate s predlogo »Število tem«. Preverite citate, ki jih AI poda v neobdelanem besedilu enega za drugim, in označite, ali so resnični ali ne. Na koncu s predlogo »Nasprotni primer« poiščite izjave, ki so v nasprotju z vašo glavno temo, in zapišite, ali menite, da potrebujete manjšino.
kontrolni seznam
- [ ] Podatke o uporabnikih sem anonimiziral, preden sem jih dal AI.
- [ ] AI sem prosil za dobesedne citate in vire za vsako temo.
- [ ] Vsako ponudbo sem preveril tako, da sem jo našel v neobdelanih podatkih (preverjanje primernosti).
- [ ] Štel sem pogostost tem in ločeno hranil potrebe manjšin.
- [ ] Preizkusil sem pristranskost z iskanjem nasprotnih primerov za svoje glavne teme.
- [ ] Sklepe, ki niso temeljili na dokazih, sem označil kot "hipoteze" in jih nisem štel kot ugotovitve.