Vienetas 2 / 11

Vartotojų tyrimų sintezė: įžvalgų ištraukimas iš interviu ir apklausos duomenų

Pelnas:

  • Gebėjimas dirbtinio intelekto temomis ir įžvalgomis paversti neapdorotus interviu stenogramas, atviro tipo apklausų atsakymus ir paramos bilietus.
  • Galimybė paspartinti kokybinės analizės veiksmus, tokius kaip giminingumo žemėlapių sudarymas ir kodavimas naudojant dirbtinio intelekto palaikymą, ir patikrinti rezultatus žmogaus akimis
  • Galimybė atmesti dirbtinio intelekto sukurtas arba perdėtas temas, susiejant jas su tikromis citatomis

Varginantis ir lengviausiai praleidžiamas vartotojų tyrimo etapas yra sintezė: dešimtys interviu, šimtai apklausų atsakymų ir palaikymo bilietų (vartotojo pagalbos prašymas) paverčiami prasmingomis įžvalgomis. Šis darbas trunka kelias dienas rankomis; Štai kodėl komandos dažnai kerta kampus ir nusprendžia „pagal jausmą“. AI atveria tik šią kliūtį: neapdorotą tekstą į temas suskaido per kelias minutes, o ne valandas. Tačiau sintezė nėra „gaminio santraukos“ užduotis; Tai įrodymais pagrįstas, audituojamas samprotavimas. Šis skyrius parodo, kaip išsaugoti įžvalgos autentiškumą ir dirbtinį intelektą paversti sintezės partneriu.

Kas yra įžvalga, o ne santrauka

Pirmiausia išsiaiškinkime terminą. Įžvalga yra prasmingas modelis, kuris atsiranda iš duomenų ir vadovaujasi kuriant dizainą: „Vartotojai pasiduoda ne atsiskaitydami, o pirmą kartą pamatę pristatymo mokestį“. Tai nėra santrauka („Vartotojai skundžiasi dėl mokėjimo“); taip pat nėra pastebėjimas („4 dalyvis sustojo pamatęs siuntimo mokestį“). Įžvalga užfiksuoja bendrą daugelio pastebėjimų priežastį ir atveria duris dizaino sprendimui.

AI natūraliai linkęs rengti santraukas. Jūsų darbas – iš santraukos pereiti prie įžvalgos: „kodėl? ir „ką tai keičia dizaine? įterpdami klausimus į raginimą.

Kokybinės analizės žingsniai ir dirbtinio intelekto vieta

Kokybinė (ne skaitinė, tekstu/stebėjimu pagrįsta) analizė klasikiniu būdu atliekama šiais žingsniais:

  1. Kodavimas: kiekviena prasminga teksto dalis yra pažymėta etikete („susirūpinimas siuntimo išlaidomis“, „pasitikėjimo trūkumas“).
  2. Afiniteto diagrama (afiniteto atvaizdavimas): panašios žymos sugrupuojamos; grupės tampa temomis.
  3. Temos prioritetų nustatymas: kurią temą mato kiek vartotojų ir kokiu intensyvumu nustatoma.
  4. Įžvalga ir patarimai: temos "ką daryti?" jungiasi su sakiniais.

AI labai pagreitina 1 ir 2 veiksmus: per kelias minutes pristatomas pradinis kodavimas ir pradinis grupavimas. Tačiau grupių prasmė, temų svarba ir pasiūlymų tikslumas reikalauja žmogaus patikrinimo. AI suteikia jums „pirmąjį žemėlapio juodraštį“; Jūs koreguojate žemėlapį pagal realybę.

Patarimas: prieš liepdami AI „išskirti temas“, pateikite kodavimo schemą (žymų sąrašą). Tokiu būdu jis veikia visų bendra kalba, o rezultatai yra palyginami.

Įrodymų grandinė: kiekviena tema yra susijusi su citata

Auksinė sintezės taisyklė: kiekviena tema yra susieta su bent viena pažodine citata. Citata yra įrodymas, kad tema yra tikra. Prašydami dirbtinio intelekto temos visada įtraukite citavimo reikalavimą; Pasakykite jam, kad jis nekurtų temos, kuriai jis negali rasti citatos. Taip sustabdote haliucinacijas prie šaltinio: sumanyta tema pažymima kaip „nepagrįsta“, nes šaltinyje neturi atitikmens.

sluoksnis

pavyzdys

šaltinis

stebėjimas

„4 dalyvis, pamatęs siuntimo mokestį, atsisakė vežimėlio“

vienas prieš vieną įrašą

Kodas

"netikėtos išlaidos"

Ženklinimas

tema

„Paslėptos išlaidos pažeidžia pasitikėjimą“

pakartokite 5 dalyvius

įžvalga

„Pristatymo kaina turi būti nurodyta anksčiau“

Palieku temą

Pasiūlymas

"Pridėti pristatymo sąmatą į produkto puslapį"

Dizaino sprendimas

Ši grandinė prasideda, kai suinteresuotoji šalis klausia: „Kaip mes tai žinome? Kai klausiate, tai leidžia nuo stebėjimo grįžti prie citatos.

trys mini dėklai

1 atvejis – 240 apklausos atsakymų, 90 minučių. Viena komanda AI užkodavo 240 atviro tipo (laisvo teksto) apklausos atsakymų. Modelis pasiūlė 11 temų; Komanda juos peržiūrėjo per 90 minučių, sumažino iki 7, sujungė 2 temas ir pašalino 2 kaip nepalaikomas. 2 dienų fizinis darbas buvo sumažintas iki pusės dienos, o įrodymų grandinė buvo išsaugota.

2 atvejis – pagauta perdėta tema. AI sukūrė stiprią temą „vartotojai nekenčia programos“. Kai komanda pažvelgė į citatas, jie nustatė, kad tik 2 dalyviai buvo griežti, o 18 buvo neutralūs. Tema buvo perrašyta kaip „intensyvus nusivylimas tam tikru srautu“. Pamoka: AI gali perdėti emocinį intensyvumą; skaičiuoti dažnį.

3 atvejis. Trūksta mažumos nuomonės. Nors modelis pabrėžė daugumą temų, jis sumenkino kritinę prieinamumo problemą, kurią 3 dalyviai iškėlė kaip „nesvarbią“. Dizaineris tai pastebėjo ir išsaugojo kaip atskirą radinį; Vėliau paaiškėjo, kad ši problema paveikė visus ekrano skaitytuvo vartotojus. Pamoka: mažumos signalas ne visada yra „mažiau svarbus“.

Kopijuojami raginimai

Jūsų vaidmuo: kokybinio tyrimo analitikas.Kodavimo schema (žymos): <<list>>Užduotis: Užkoduokite toliau pateiktą anoniminį nuorašą su šiomis žymomis.Pridėti [Dalyvis

Paverskite šiuos koduotus duomenis į artumo diagramą: sugrupuokite panašius kodus, kiekvienai grupei suteikite temą. Kiekvienai temai: suskaičiuokite, kiek atskirų dalyvių ji įtraukta, įtraukite 2 stipriausias citatas ir parašykite vieno sakinio paaiškinimą „kodėl“. Atskirai pažymėkite temas su silpnais įrodymais.Duomenys: <<kodai>>

Noriu išbandyti šią temą: "<<tema>>". Šaltinio tekste atskirai išvardykite citatas, kurios palaiko ir ATSAKO šią temą.Pabaigoje įvertinkite, kaip stipriai palaikoma tema (stipri/vidutinė/silpna).Šaltinis: <<transkripcija>>

Paverskite šį temų sąrašą įžvalgomis ir pasiūlymais. Kiekvienai temai: 1) vieno sakinio įžvalga (su „todėl...“), 2) konkretus dizaino pasiūlymas, 3) kokį ekraną / srautą paveikia šis pasiūlymas. Nesigalvok; Jei pagrindas silpnas, parašykite „reikia daugiau tyrimų“. Temos: <<sąrašas>>

Silpnas raginimas / Stiprus raginimas

Silpnas: „Išanalizuokite šiuos pokalbius ir pasakykite man rezultatus“.

Rezultatas: santrauka be šaltinių, be dažnio informacijos ir atvira perdėjimui.

Stiprus: „Koduokite šią nuorašą etiketėmis, kurias jums daviau; susiekite kiekvieną temą su citata iš [Dalyvis

Rezultatas: didelio dažnio, įrodymais pagrįsta, audituojama sintezė.

Skirtumas: stiprių raginimų dažnis + citata + silpnas inkaro raginimas; tai apsaugo nuo perdėjimo ir haliucinacijų.

Dažnos klaidos

  • Neskaičiuojant dažnumo. Sprendimo priėmimas nežinant, ar už sakinio „Vartotojai nori X“ yra 2 ar 20 žmonių.
  • Priimti emocijų intensyvumą tokį, koks jis yra. AI linkęs pabrėžti stiprias išraiškas; Tai gali slėpti neutralią daugumą.
  • Mažumos signalo pašalinimas. Problema, su kuria susiduria nedaug žmonių, gali būti labai svarbi (pvz., prieinamumas).
  • Cituoti nereikia. Tema be kabučių yra nepatikrinama.
  • Finišuokite vienu ratu. Sintezė yra kartotinė; Išbandykite pirmąjį išvestį ir paryškinkite raginimą.

Apibendrinant

Sintezė yra samprotavimas, kuris neapdorotus duomenis paverčia įžvalga, kuri skatina dizainą. AI labai pagreitina mechaninius veiksmus, tokius kaip kodavimas ir artumo grupavimas, tačiau įžvalgos prasmė ir reikšmė išlieka žmogiška. Auksinė taisyklė – kiekvieną temą susieti su tiesiogine citata; skaičiavimo dažnis, pataisykite emocinį perdėjimą, nepraleiskite mažumos signalo. Sukūrę įrodymų grandinę, kuri tęsiasi nuo stebėjimo iki citatos, nuo temos iki pasiūlymo, pasieksite greitą ir patikimą tyrimo rezultatą.

Taikymo užduotis

  1. Anonimizuoti savo 8–10 (arba išgalvotų) interviu / apklausos atsakymų.
  2. Parašykite savo kodavimo schemą (6–8 etiketės) ir pirmuoju raginimu užkoduokite dirbtiniu intelektu.
  3. Pašalinkite temas naudodami antrą raginimą; Atkreipkite dėmesį, kiek dalyvių yra kiekvienoje temoje.
  4. Išbandykite stipriausią temą naudodami trečiąjį raginimą: palyginkite patvirtinančias ir paneigiančias citatas.
  5. Parašykite temą įžvalgos + pasiūlymo + paveikto ekrano forma ir nurodykite įrodymų grandinę.

kontrolinis sąrašas

  • [ ] Iš anksto pateikiau savo kodavimo schemą AI.
  • [ ] Kiekvieną temą susiejau su bent viena pažodine citata.
  • [ ] Suskaičiavau, kiek kiekvienoje temoje atsirado atskirų dalyvių.
  • [ ] Dažnai taisydavau perdėtas emocines išraiškas.
  • [ ] Sąmoningai nusprendžiau, ar panaikinti mažumos signalus.
  • [ ] Įžvalgas susiejau su konkrečiu projekto pasiūlymu ir paveiktu ekranu.