Добици:
- Способност да се транскрипти интервјуа и одговори отвореног типа анкете поделе на теме са вештачком интелигенцијом и да их подржи навођењем доказа
- Способност сумирања квантитативних података истраживања и избегавања погрешне интерпретације (мали узорак, водеће питање, пристрасност при избору)
- Способност етичког рада и усаглашености са КВКК-ом штитећи поверљивост учесника и анонимизирајући транскрипте
Најбогатији увиди у консалтингу често не леже у графиконима, већ у ономе што људи кажу. Интервју са менаџером, отворени одговори на анкету купаца, белешке са теренске посете... Ово су ненумерички (квалитативни) подаци и потребни су сати да се прочитају, кодирају и поделе на теме. Вештачка интелигенција у великој мери убрзава овај посао: разлаже 30 транскрипата интервјуа на теме за неколико минута, проналазећи обрасце који се понављају. Али постоје две опасности: модел може „измислити“ тему (додати коментар који није у транскрипту), а поверљивост учесника може бити лако нарушена. У овој јединици ћемо научити да анализирамо квалитативне податке на безбедан начин заснован на доказима.
Квалитативна анализа: од кодирања до теме
Квалитативна анализа има три корака. Прво кодирање: свака изјава има кратку ознаку („жалба на цену“, „похвала за испоруку“). Затим тематизирање: слични кодови се скупљају у тему („оперативно незадовољство“). На крају, коментар: успостављен је однос између тема и слоја „па шта“. АИ је веома брз у прва два корака; Трећи корак захтева одлуку браниоца.
Најкритичније осигурање је ово: свака тема мора бити подржана дословним цитатом. Ово потврђује да тема заправо долази из података; Тема цитата без цитата носи ризик од халуцинација.
Ваша улога: аналитичар квалитативног истраживања. Испод је анонимни транскрипт 12 интервјуа са клијентима (означених са П1, П2...). Задатак: 1) Издвојите теме које се понављају (до 7 тема).2) За сваку тему: колико учесника је видело + 2 дословна цитата (са кодом учесника).3) Прикажите изјаве и одвојено ЦОНФ не додајте изјаве. мишљења која нису у транскрипту; Свака тема мора бити доказана цитатом. - Немојте давати идентификационе информације осим кодова учесника. - Наведите појединачна „мањинска, али важна“ мишљења одвојено на крају (гласови неслагања).
Још једна моћна техника је да тражите од модела да кодира са фиксним категоријама које ви одредите, уместо да прво постави сопствену шему кода. На пример, ако дате унапред дефинисане теме у студији задовољства купаца, као што су „цена, квалитет производа, испорука, подршка, једноставност употребе“, различити транскрипти постају упоредиви и моделу се спречава да сваки пут прави различита имена. Бесплатно издвајање тема је погодно за откривање, док је кодирање фиксне категорије погодно за поређење и мерење; За већину пројеката, коришћење оба заједно најбоље функционише: прво бесплатно истраживање, а затим дигитализација помоћу фиксне шеме.
Ваша улога: квалитативни асистент кодирања. Фиксне категорије: [цена, квалитет, испорука, подршка, једноставност употребе, остало]. Задатак: Доделите сваки отворени одговор у наставку једној или више ових категорија. - Напишите фразу окидача у одговору (дословно) поред сваког задатка. - Означите да ли је одговор позитиван или негативан у сентименту. Додавање коментара није укључено у одговор.
Савет: Веома је вредно тражити „мањинска, али важна“ мишљења одвојено. Једном изречено, али критично упозорење (нпр. један велики купац који каже „разматрамо обнављање уговора“) се губи у већини тема; остаје видљив када је наведен засебно.
Приватност и анонимност
Транскрипти интервјуа су лични подаци и често су осетљиви (жалбе запослених, критике менаџера). Пре него што их отпремите у алатку за вештачку интелигенцију, неопходно је да их анонимизирате: имена, наслови, унутрашњи детаљи за разликовање се замењују кодним бројем (К1, К2...). Учеснику се често обећава да ће „оно што кажете бити пријављено анонимно“; Технички еквивалент ове фразе је анонимизација.
Тип података
Ризик
предострожности
Име/титула учесника
откривање идентитета
Замените бројем кода
Унутрашњи детаљ
индиректна дијагноза
Генерализујте или маскирајте
осетљив вид
Ризик одмазде
Појединачно подударање са групним извештајем
Аудио/видео снимак
највећа осетљивост
Рендерујте у одобреном алату, а затим избришите
Можете да натерате модел да изврши анонимизацију као прелиминарни корак пре него што отпремите транскрипте у алатку; Али обавезно визуелно проверите излаз:
Ваша улога: уредник приватности. Припремите следећи транскрипт интервјуа за анализу; урадите следеће маскирање:- Направите имена свих контаката К1, К2...- Уопштите индиректно идентификационе детаље као што су титула, одељење, локација („Једини страни инжењер у Р&Д“ → „инжењер“).- Уклоните имена компанија/купаца. Дајте само маскирани текст; Укратко наведите коју врсту информација маскирате и зашто.
Опрез: Рећи „Анонимно“ није довољно. Фраза „Једина жена менаџерка одговорна за маркетинг“ идентификује особу иако њено име није написано. Анонимизација такође треба да укључи све детаље који се могу индиректно идентификовати. Кршење КВКК-а и губитак поверења учесника почиње одавде.
Тумачење квантитативних анкетних података
Вештачка интелигенција производи резиме и анализу резултата затвореног (нумеричког) истраживања. Али квантитативна анализа има своје замке и модел их може игнорисати:
- Мали узорак: Рећи „61% купаца је задовољно“ из анкете од 18 људи је погрешно; Ако је узорак мали, треба разговарати о сировом броју и неизвесности, а не о проценту.
- Водеће питање: „Колико сте задовољни нашом одличном услугом?“ Питање уграђује одговор; Резултат је пристрасан.
- Пристрасност одабира: Ако би одговорили само најзадовољнији или најљутији купци, резултат не би био репрезентативан за универзум.
Пре сумирања резултата овог истраживања, извршите методолошку проверу: - Да ли је величина узорка довољна да се резултати представе у процентима? - Да ли у питањима постоје сугестивне/сугестивне изјаве? Означите.- Колика је стопа одговора и ризик од пристрасности избора? Дајте само ревизорски извештај; Затим ћемо то сажети у посебну поруку.
три мини кофера
Случај 1 — Ухваћена је измишљена тема. Консултант додељује моделу 20 интервјуа; модел издваја тему „учесници желе да раде на даљину“. Консултант тражи понуду; Модел може пронаћи само 1 двосмислен цитат. Тема заправо није постојала, модел ју је направио од општег тренда. Да није било захтева за цитирање, нетачан налаз би био укључен у извештај.
Случај 2 — Индиректна дијагноза. У пројекту задовољства запослених, транскрипт укључује „Ово је рекао једини страни инжењер у истраживању и развоју“. Нема имена, али је особа јасна; Када извештај стигне до менаџера, постоји ризик од освете. Консултант је морао од почетка да генерализује све препознатљиве детаље („инжењер“).
Случај 3 — Замка за мали узорак. У тесту производа, свидело се 15 од 22 корисника; модел каже "68% сатисфакције" и постављен је на слајд. Инвестициони одбор приговара: „22 особе не представљају универзум“. Консултант искрено преписује резултат као "15 од 22 корисника позитивно; потребан је индикативан, потврдни велики узорак"; поверење се враћа.
Слаби промпт / Јаки промпт
Слабо обавештење:
Прочитајте ове интервјуе и извуците главне налазе.
Модел производи теме без наводника, без доказа; Ризик од измишљотина и поверљивости је висок.
Снажан упит:
Ваша улога: квалитативни аналитичар. Транскрипт испод, анонимизован (К1..Кн).Задатак: До 7 тема; број учесника за сваки + 2 дословна цитата (са шифром); поткрепљујуће и контрадикторне изјаве одвојено; мањина али критичка мишљења посебна листа. Правила: додавање мишљења које није у транскрипту; генерисање идентитета; Не дајте тему без наводника; означите тему за коју нисте сигурни као „слаб доказ“.
Засићеност и тежина тема
У квалитативној анализи два концепта одређују квалитет интерпретације. Први је засићење: каже се да су подаци „засићени“ када нови интервјуи више не производе нове теме; Ово је знак да је узорак довољан. Ако се потпуно нове теме и даље појављују на 8. интервјуу, потребно је више интервјуа. Друго, тежина тема: колико људи види тему и важност те теме су различите ствари. Мања непријатност коју помиње пет особа и ризик од отказа уговора који помиње једна особа нису једнаки по учесталости, али ово друго може бити много критичније по важности. Стога је само рангирање тема по учесталости погрешно; Оцените сваку тему у смислу „колико људи“ и „колико је важно“. Када АИ каже „оцени ове теме у две одвојене колоне учесталости и потенцијалног утицаја на пословање“ чини ову разлику видљивом; Ви доносите процену о утицају на пословање.
Уобичајене грешке
- Прихватање теме без цитата. Свака тема мора бити потврђена дословним цитатом из транскрипта; У супротном постоји ризик од халуцинација.
- Учинити анонимизацију површном. Није довољно избрисати име; Индиректни идентификациони детаљи такође треба да буду маскирани.
- Представљање малог узорка са процентима. Са малим бројем учесника треба разговарати о сировим бројевима и неизвесностима, а не о процентима.
- Игноришући сугестивно питање. Исход сугестивних питања је пристрасан; Проверите методологију.
- Губите аутлиере. Једном изговорено, критичко упозорење прогутају теме већине; навести посебно.
- Мешање квантитативног и квалитативног. Обрадите отворене коментаре са нумеричким резултатима на различите начине.
Укратко
Квалитативни подаци су најбогатији извор увида у консалтингу, а вештачка интелигенција штеди сате у кодирању и темама. Али свака тема треба да буде доказана дословним цитатима, поверљивост учесника треба да буде у потпуности заштићена, укључујући индиректну идентификацију, а методолошке замке као што су узорковање, пристрасност питања и селекција треба да се контролишу у квантитативним истраживањима. Модел је брз читач и етикетир; посао консултанта је да провери доказе, одржи поверљивост и успостави слој „па шта“.
Задатак апликације
Припремите неколико транскрипата интервјуа (или отворених одговора на анкету), било стварних или репрезентативних, и прво их анонимизирајте (укључујући име и индиректну идентификацију). Издвојите теме, цитате, конфликтне изјаве и неслагање са снажним квалитативним подстицајима. Проверите цитирање најмање једне теме у транскрипту да бисте потврдили да она заиста постоји. Затим узмите мало квантитативно истраживање и процените пристрасност узорка и питања тако што ћете затражити методолошку ревизију.
контролна листа
- [ ] Анонимизовао сам транскрипте, укључујући име и индиректну идентификацију.
- [ ] Сваку тему сам потврдио дословним цитатом.
- [ ] Одвојено сам приказао конфликтне изразе и контрадикторне гласове.
- [ ] У малом узорку користио сам сирове бројеве и несигурност уместо процента.
- [ ] Означио сам сугестивна питања.
- [ ] Проценио сам ризик од пристрасности избора.
- [ ] Осетљиве коментаре сам пријавио колективно без повезивања са појединцем.