Unità 2 / 11

Sinteżi tar-Riċerka tal-Utent: Estrazzjoni ta 'Intuwizzjonijiet minn Intervisti u Data ta' Stħarriġ

Qligħ:

  • Kapaċità li tittrasforma traskrizzjonijiet mhux ipproċessati ta' intervisti, tweġibiet ta' stħarriġ miftuħ u biljetti ta' appoġġ f'temi u għarfien b'intelliġenza artifiċjali
  • Kapaċità li tħaffef passi ta 'analiżi kwalitattiva bħall-immappjar tal-affinità u l-kodifikazzjoni b'appoġġ għall-intelliġenza artifiċjali u tivverifika r-riżultati bl-għajn tal-bniedem
  • Kapaċità li tneħħi temi magħmula jew esaġerati minn intelliġenza artifiċjali billi torbothom lura ma' kwotazzjonijiet reali

L-aktar fażi tedjanti u l-aktar faċilment maqbuża tar-riċerka tal-utent hija s-sinteżi: iddawwar għexieren ta 'intervisti, mijiet ta' tweġibiet għall-istħarriġ, u biljetti ta 'appoġġ (it-talba tal-utent għall-għajnuna) f'għarfien sinifikanti. Dan ix-xogħol jieħu jiem bl-idejn; Huwa għalhekk li t-timijiet ħafna drabi jaqtgħu l-kantunieri u jiddeċiedu "bil-sensazzjoni." L-AI tiftaħ biss dan il-konġestjoni: tkisser it-test mhux maħdum f'temi f'minuti minflok f'sigħat. Iżda s-sinteżi mhix kompitu ta '"tipproduċi sommarju"; Huwa bbażat fuq l-evidenza, raġunament verifikabbli. Din l-unità turik kif tippreserva l-awtentiċità tal-għarfien filwaqt li tagħmel l-AI is-sieħeb tas-sinteżi tiegħek.

X'inhu għarfien, mhux sommarju

Ejja niċċaraw it-terminu l-ewwel. L-għarfien huwa mudell sinifikanti li joħroġ mid-dejta u jiggwida d-disinn: "L-utenti jieqfu mhux fil-pass tal-checkout, iżda meta jaraw l-ewwel darba l-miżata tat-tbaħħir." Dan mhuwiex sommarju ("L-utenti jilmentaw dwar il-ħlas"); lanqas mhi osservazzjoni (“Parteċipant 4 waqaf meta ra l-miżata tat-tbaħħir”). L-għarfien jaqbad il-kawża komuni sottostanti ħafna osservazzjonijiet u jiftaħ il-bieb għal deċiżjoni tad-disinn.

L-AI hija naturalment inklinata li tipproduċi sommarji. Ix-xogħol tiegħek huwa li tiġbed minn sommarju għal għarfien: "għaliex?" u "dan x'jibdel fid-disinn?" billi daħħal il-mistoqsijiet tiegħek fil-pront.

Passi ta 'analiżi kwalitattiva u l-post ta' intelliġenza artifiċjali

L-analiżi kwalitattiva (mhux numerika, ibbażata fuq it-test/l-osservazzjoni) tipproċedi klassikament b’dawn il-passi:

  1. Kodifikazzjoni: Kull biċċa sinifikanti fit-test tingħata tikketta ("tħassib dwar l-ispiża tat-tbaħħir", "nuqqas ta 'kunfidenza").
  2. Dijagramma ta 'affinità (mapping ta' affinità): Tikketti simili huma raggruppati; gruppi jsiru temi.
  3. Prijoritizzazzjoni tat-tema: Liema tema tidher minn kemm utenti u b'liema intensità hija determinata.
  4. Intuwizzjoni u pariri: Temi "x'għandek tagħmel?" jgħaqqad mas-sentenzi.

L-AI tħaffef ħafna l-passi 1 u 2: twassal kodifikazzjoni inizjali u raggruppament inizjali f'minuti. Madankollu, it-tifsira tal-gruppi, l-importanza tat-temi, u l-eżattezza tas-suġġerimenti jeħtieġu verifika umana. L-AI tagħtik "l-ewwel abbozz tal-mappa"; Int tikkoreġi l-mappa skont ir-realtà.

Tip: Qabel ma tgħid lill-AI biex "jiġbed it-temi", agħtiha l-iskema ta 'kodifikazzjoni tiegħek (lista ta' tikketti). B'dan il-mod, taħdem fil-lingwa komuni ta 'kulħadd u l-outputs huma komparabbli.

Katina ta' evidenza: kull tema torbot ma' kwotazzjoni

Ir-regola tad-deheb tas-sinteżi: kull tema hija marbuta ma’ mill-inqas kwotazzjoni verbatim waħda. Il-kwotazzjoni hija prova li t-tema hija reali. Dejjem inkludi r-rekwiżit taċ-ċitazzjoni meta titlob lill-AI għal tema; Għidlu biex ma jipproduċix tema li għaliha ma jistax isib kwotazzjoni. B'dan il-mod twaqqaf l-alluċinazzjoni fis-sors: tema magħmula hija mmarkata bħala "bla bażi" għaliex m'għandha l-ebda kontroparti fis-sors.

saff

eżempju

sors

osservazzjoni

"Parteċipant 4 abbanduna l-karrettun meta ra l-miżata tat-tbaħħir"

reġistrazzjoni one-on-one

Kodiċi

"ispiża mhux mistennija"

Tikkettar

tema

"Spejjeż moħbija jkissru l-fiduċja"

irrepeti f'5 parteċipanti

għarfien

"L-ispiża tat-tbaħħir għandha tintwera kmieni"

Inħalli t-tema

Suġġeriment

"Żid stima tat-tbaħħir fil-paġna tal-prodott"

Deċiżjoni tad-disinn

Din il-katina tibda meta parti interessata tistaqsi "kif nafu dan?" Meta tistaqsi, jippermettilek li tmur lura mill-osservazzjoni biex tikkwota.

tliet każijiet żgħar

Każ 1 — 240 tweġiba għall-istħarriġ, 90 minuta. Tim wieħed ikkodifikat bl-AI 240 tweġiba għal stħarriġ miftuħ (test ħieles). Il-mudell issuġġerixxa 11-il tema; It-tim irreveda dawn f'90 minuta, naqashom għal 7, għaqqad 2 temi, u neħħa 2 bħala mhux appoġġjati. Xogħol manwali ta’ jumejn tnaqqset għal nofs ġurnata u l-katina tal-evidenza ġiet ippreservata.

Każ 2 — Tema esaġerata maqbuda. L-AI pproduċiet tema qawwija ta '"l-utenti jobogħdu l-app." Meta t-tim ħares lejn il-kwotazzjonijiet, sabu li 2 parteċipanti biss kienu ħarxa, filwaqt li 18 kienu newtrali. It-tema ġiet miktuba mill-ġdid bħala "diżappunt intens f'ċertu fluss". Lezzjoni: AI tista' tesaġera l-intensità emozzjonali; għodd il-frekwenza.

Każ 3 — Opinjoni ta' minoranza nieqsa. Filwaqt li l-mudell enfasizza t-temi tal-maġġoranza, jonqos kwistjoni kritika ta' aċċessibbiltà mqajma minn 3 parteċipanti bħala "mhux importanti." Id-disinjatur innota dan u ppreservah bħala sejba separata; Aktar tard deher ċar li din il-kwistjoni affettwat l-utenti kollha tal-screen reader. Lezzjoni: is-sinjal tal-minoranza mhux dejjem huwa "inqas importanti".

Promptijiet kopjabbli

Ir-rwol tiegħek: analista ta' riċerka kwalitattiva. Skema ta' kodifikazzjoni (tags): <<lista>>Kompitu: Kodifika t-traskrizzjoni anonimizzata hawn taħt b'dawn it-tikketti.Żid [Parteċipant

Ittrasforma d-dejta kodifikata li ġejja f'dijagramma ta' prossimità: grupp kodiċijiet simili, semmi kull grupp tema. Għal kull tema: għodd kemm parteċipanti individwali tidher fiha, inkludi ż-żewġ kwotazzjonijiet l-aktar b'saħħithom, u ikteb spjegazzjoni ta' sentenza waħda "għaliex". Immarka t-temi b'evidenza dgħajfa separatament.Data: <<kodiċijiet>>

Irrid nittestja t-tema li ġejja: "<<tema>>". Elenka separatament il-kwotazzjonijiet li JAPPOĠĠAW u JIRRIFFA din it-tema fit-test sors. Fl-aħħar, evalwa kemm it-tema hija sostnuta b'mod qawwi (qawwija/medja/dgħajfa).Sors: <<traskrizzjoni>>

Dawwar din il-lista ta' temi f'għarfien u suġġerimenti. Għal kull tema:1) ħarsa ta' sentenza waħda (li fiha "minħabba..."),2) suġġeriment ta' disinn konkret,3) liema skrin/fluss jaffettwa dan is-suġġeriment. Tpattix; Jekk il-bażi hija dgħajfa, ikteb "aktar riċerka hija meħtieġa." Temi: <<lista>>

Pront dgħajjef / Pront qawwi

Dgħajjef: "Analizza dawn il-konversazzjonijiet u għidli r-riżultati."

Riżultat: Sommarju mingħajr sorsi, mingħajr informazzjoni dwar il-frekwenza, u miftuħ għall-esaġerazzjoni.

Qawwija: "Kodifika din it-traskrizzjoni bit-tikketti li tajtek; qabbad kull tema mal-kwotazzjoni minn [Parteċipant

Riżultat: Sintesi ta' frekwenza għolja, ibbażata fuq l-evidenza, awditjabbli.

Differenza: pront qawwi iqajjem frekwenza + kwotazzjoni + ankra dgħajfa fil-pront; dawn jipprevjenu l-esaġerazzjoni u l-alluċinazzjoni.

Żbalji komuni

  • Mhux tgħodd il-frekwenza. Tieħu deċiżjoni mingħajr ma tkun taf jekk hemmx 2 jew 20 persuna wara s-sentenza "L-utenti jridu X".
  • Nieħdu l-intensità tal-emozzjoni kif inhi. L-AI għandha t-tendenza li tenfasizza espressjonijiet b'saħħithom; Jista’ jaħbi maġġoranza newtrali.
  • L-eliminazzjoni tas-sinjal tal-minoranza. Kwistjoni li ftit nies jesperjenzaw tista’ tkun kritika (eż. aċċessibilità).
  • Ma teħtieġx ċitazzjoni. It-tema bla kwotazzjoni hija t-tema li ma tistax tiġi verifikata.
  • Tispiċċa f'dawra waħda. Is-sintesi hija iterattiva; Ittestja l-ewwel output u tiffoka l-pront.

Fil-qosor

Is-sintesi hija r-raġunament li jibdel id-dejta mhux ipproċessata f'għarfien li jmexxi d-disinn. L-AI tħaffef ħafna l-passi mekkaniċi bħall-kodifikazzjoni u r-raggruppament tal-prossimità, iżda t-tifsira u s-sinifikat tal-għarfien jibqgħu umani. Ir-regola tad-deheb hija li tgħaqqad kull tema ma 'kwotazzjoni letterali; għadd frekwenza, korretta għall-eżaġerazzjoni emozzjonali, ma titlifx is-sinjal tal-minoranza. Meta tistabbilixxi katina ta 'evidenza li testendi mill-osservazzjoni għall-kwotazzjoni, minn tema għal suġġeriment, inti tikseb output ta' riċerka li hija kemm veloċi kif ukoll difiżibbli.

Kompitu ta' applikazzjoni

  1. Anonimizza t-tweġibiet tal-intervista/istħarriġ tiegħek 8-10 (jew fittizji).
  2. Ikteb l-iskema ta 'kodifikazzjoni tiegħek stess (6-8 tikketti) u ikkodifikaha bl-intelliġenza artifiċjali bl-ewwel pront.
  3. Neħħi t-temi bit-tieni pront; Innota kemm jidhru parteċipanti għal kull tema.
  4. Ittestja l-aktar tema b'saħħitha bit-tielet pront: qabbel il-kwotazzjonijiet ta 'appoġġ u li jirrifjutaw.
  5. Ikteb tema fil-forma ta 'għarfien + suġġeriment + skrin affettwat u fassal il-katina ta' evidenza.

lista ta' kontroll

  • [ ] Jien tajt l-iskema ta' kodifikazzjoni tiegħi lill-AI bil-quddiem.
  • [ ] Rabat kull tema ma' tal-inqas kwotazzjoni waħda verbatim.
  • [ ] Għaddejt kemm dehru parteċipanti individwali għal kull tema.
  • [ ] Ħafna drabi kkoreġejt espressjonijiet emozzjonali esaġerati.
  • [ ] Ħadt deċiżjoni konxja jekk neliminax is-sinjali minoritarji.
  • [ ] Rabat l-għarfien mal-proposta tad-disinn konkret u l-iskrin affettwat.