Добивки:
- Способност да се подели транскриптите од интервјуто и отворените одговори на анкети во теми со вештачка интелигенција и да се поддржат со цитати со докази
- Способност да се сумираат квантитативните податоци од истражувањето и да се избегне погрешно толкување (мал примерок, водечко прашање, пристрасност во изборот)
- Способност за етичка работа и усогласеност со KVKK преку заштита на доверливоста на учесниците и анонимизирање на записниците
Најбогатите сознанија во консултациите честопати не лежат во графиконите, туку во она што луѓето го кажуваат. Интервју со менаџер, отворени одговори на анкета со клиенти, белешки од теренска посета... Ова се ненумерички (квалитативни) податоци и потребни се часови за читање, кодирање и поделување на теми. Вештачката интелигенција многу ја забрзува оваа работа: разложува 30 транскрипти од интервјуа на теми за неколку минути, наоѓајќи повторливи обрасци. Но, постојат две опасности: моделот може да „сочинува“ тема (додајте коментар што не е во транскриптот), а доверливоста на учесникот може лесно да се наруши. Во оваа единица, ќе научиме да ги анализираме квалитативните податоци на безбеден начин заснован на докази.
Квалитативна анализа: од кодирање до тема
Квалитативната анализа има три чекори. Прво кодирање: на секоја изјава и е дадена кратка ознака („приговор за цена“, „пофалба за испорака“). Потоа тематизација: слични кодови се собираат во тема („оперативно незадоволство“). На крајот, коментар: односот помеѓу темите и слојот „па што“ е воспоставен. ВИ е многу брза во првите два чекори; Третиот чекор бара расудување на бранителот.
Најкритичното уверување е ова: секоја тема мора да биде поддржана со дословно цитат. Ова потврдува дека темата всушност доаѓа од податоците; Темата цитат-нецитат носи ризик од халуцинација.
Вашата улога: аналитичар за квалитативно истражување. Подолу е анонимизиран транскрипт од 12 интервјуа со клиенти (означени како P1, P2...). додадете какви било мислења што не се во преписот; Секоја тема мора да се докаже со цитат. - Не произведувајте информации за идентификација, освен кодови на учесници. - Наведете единечни „малцински, но важни“ мислења одделно на крајот (различни гласови).
Друга моќна техника е да побарате од моделот да кодира со фиксни категории што вие ги одредувате, наместо прво да поставите сопствена шема на кодови. На пример, ако дадете предефинирани теми во студијата за задоволството на клиентите, како што се „цена, квалитет на производот, испорака, поддршка, леснотија на користење“, различните транскрипти стануваат споредливи и моделот е спречен да прави различни имиња секој пат. Екстракцијата на бесплатна тема е погодна за откривање, додека кодирањето со фиксна категорија е погодно за споредба и мерење; За повеќето проекти, користењето на двете заедно функционира најдобро: прво бесплатно истражување, а потоа дигитализирајте со фиксна шема.
Вашата улога: квалитативен асистент за кодирање. Фиксни категории: [цена, квалитет, испорака, поддршка, леснотија на користење, друго]. Задача: Доделете го секој отворен одговор подолу на една или повеќе од овие категории. - Напишете ја фразата за активирање во одговорот (дословно) до секоја задача. - Штиклирајте дали одговорот е позитивен или негативен во сентимент. Додавање коментари кои не се вклучени во одговорот.
Совет: Многу е вредно да побарате „малцински, но важни“ мислења одделно. Некогаш формулирано, но критичко предупредување (на пример, еден голем клиент кој вели „размислуваме да го обновиме договорот“) се губи во мнозинските теми; останува видлива кога е наведена посебно.
Приватност и анонимизација
Транскриптите од интервјуата се лични податоци и често се чувствителни (поплаки на вработените, критики на менаџерот). Пред да ги поставите на алатка за вештачка интелигенција, од суштинско значење е да ги анонимизирате: имињата, насловите, внатрешните разграничувачки детали се заменуваат со кодниот број (K1, K2...). На учесникот често му се ветува дека „она што ќе го кажеш ќе биде пријавено анонимно“; Техничкиот еквивалент на оваа фраза е анонимизација.
Тип на податоци
Ризик
претпазливост
Име/назив на учесникот
откривање на идентитетот
Заменете со шифра
Внатрешен детал
индиректна дијагноза
Генерализирајте или маскирајте
чувствителен вид
Ризик од одмазда
Индивидуално совпаѓање со рефус извештај
Аудио/видео снимање
највисока чувствителност
Рендерирајте во одобрена алатка, а потоа избришете
Може да го натерате моделот да изврши анонимизација како прелиминарен чекор пред да ги поставите транскриптите на алатката; Но, не заборавајте визуелно да го проверите излезот:
Вашата улога: уредник за приватност. Подгответе го следниот препис од интервјуто за анализа; направете го следното маскирање:- Направете ги сите имиња на контакти K1, K2...- Генерализирајте ги индиректните идентификациони детали како што се титулата, одделот, локацијата („Единствениот странски инженер во истражување и развој“ → „инженер“).- Отстранете ги имињата на компаниите/клиентите. Дајте само маскиран текст; Накратко наведете каков тип на информации маскирате и зошто.
Внимание: Да се каже „Аноним“ не е доволно. Фразата „Единствената жена менаџер одговорна за маркетинг“ ја означува личноста иако нејзиното име не е напишано. Анонимизацијата треба да ги вклучува и сите индиректно препознатливи детали. Прекршувањето на KVKK и губењето на довербата на учесниците започнуваат од тука.
Толкување на квантитативните податоци од анкетата
Вештачката интелигенција произведува резиме и расчленување на затворени (нумерички) резултати од истражувањето. Но, квантитативната анализа има свои стапици, а моделот може да ги игнорира:
- Мал примерок: Да се каже „61% од клиентите се задоволни“ од анкета на 18 луѓе е погрешно; Ако примерокот е мал, треба да се разговара за суровиот број и несигурноста, а не за процентот.
- Водечко прашање: „Колку сте задоволни од нашата одлична услуга? Прашањето го вградува одговорот; Резултатот е пристрасен.
- Пристрасност во изборот: Ако одговорат само најзадоволните или најлутите клиенти, резултатот нема да биде репрезентативен за универзумот.
Пред да ги сумирате резултатите од ова истражување, спроведете методолошка проверка: - Дали големината на примерокот е доволна за да се прикажат резултатите во проценти? - Дали има водечки/водечки изјави во прашањата? Штиклирајте.- Која е стапката на одговор и ризикот од пристрасност во изборот? Обезбедете само ревизорски извештај; Потоа ќе го сумираме во посебна порака.
три мини футроли
Случај 1 - Уловена измислена тема. Консултант му доделува 20 интервјуа на моделот; моделот ја извлекува темата „учесниците сакаат да работат од далечина“. Консултантот бара понуда; Моделот може да најде само 1 двосмислена понуда. Темата всушност не постоеше, моделот ја сочинуваше од општиот тренд. Доколку немало барање за цитирање, во извештајот би бил вклучен неточен наод.
Случај 2 - Индиректна дијагноза. Во проект за задоволство на вработените, преписот вклучува „Единствениот странски инженер во истражување и развој го кажа ова“. Нема име, но личноста е јасна; Штом извештајот оди кај менаџерот, постои ризик од одмазда. Консултантот од самиот почеток мораше да ги генерализира сите посебни детали („инженер“).
Случај 3 - Замка за мал примерок. Во тест на производот, на 15 од 22 корисници им се допадна; на моделот пишува „68% сатисфакција“ и се става на тобоганот. Инвестицискиот одбор се противи: „22 лица не го претставуваат универзумот“. Консултантот искрено го препишува резултатот како „15 од 22 корисници позитивни; потребен е индикативен, потврден голем примерок“; довербата се враќа.
Слаб промпт / Силен промпт
Слаба навестување:
Прочитајте ги овие интервјуа и извлечете ги главните наоди.
Моделот произведува теми без цитати, без докази; Ризикот од фабрикување и доверливост е висок.
Моќен потсетник:
Вашата улога: квалитативен аналитичар. Транскрипт подолу, анонимизиран (K1..Kn).Задача: До 7 теми; број на учесници за секој + 2 дословно цитати (со шифра); придружни и контрадикторни изјави одделно; малцински, но критички мислења посебна листа. Правила: додавање мислења кои не се во транскриптот; генерирање идентитет; Не давајте тема без наводници; означете ја темата за која не сте сигурни како „слаб доказ“.
Заситеност и тежина на темите
Во квалитативната анализа, два концепта го одредуваат квалитетот на толкувањето. Првата е заситеноста: се вели дека податоците се „заситени“ кога новите интервјуа повеќе не создаваат нови теми; Ова е знак дека примерокот е доволен. Ако на осмото интервју сè уште се појават сосема нови теми, потребни се повеќе интервјуа. Второ, тежината на темите: колку луѓе гледаат тема и важноста на таа тема се различни работи. Малите непријатности спомнати од пет лица и ризикот од откажување на договорот споменат од едно лице не се еднакви по зачестеност, но вториот може да биде многу покритичен по важност. Затоа, рангирањето на темите само по фреквенција е погрешно; Оценете ја секоја тема во однос на „колку луѓе“ и „колку е важна“. Ако вештачката интелигенција вели „оценете ги овие теми во две одделни колони за фреквенција и потенцијално деловно влијание“ ја прави оваа разлика видлива; Вие одлучувате за влијанието на бизнисот.
Вообичаени грешки
- Прифаќање на тема без цитат. Секоја тема мора да биде потврдена со дословно цитат од преписот; Во спротивно, постои ризик од халуцинации.
- Да се направи анонимизација површна. Не е доволно да се избрише името; Деталите за индиректно идентификување исто така треба да бидат маскирани.
- Презентирање на мал примерок со процент. Со мал број учесници, треба да се разговара за сурови бројки и несигурност, а не за проценти.
- Игнорирање на водечкото прашање. Исходот од водечките прашања е пристрасен; Проверете ја методологијата.
- Губење на оддалечените. Откако ќе се изговори, критичкото предупредување е проголтано од мнозинските теми; листа одделно.
- Мешање квантитативно и квалитативно. Обработете ги отворените коментари со нумерички резултати на различни начини.
Сумирано
Квалитативните податоци се најбогатиот извор на увид во консултантски услуги, а вештачката интелигенција заштедува часови во кодирање и тематизација. Но, секоја тема треба да се докажува со дословни цитати, доверливоста на учесниците треба да биде целосно заштитена, вклучително и индиректна идентификација, а методолошките стапици како што се земање примероци, пристрасност на прашањата и селекцијата треба да се контролираат во квантитативните истражувања. Моделот е брз читач и етикетира; работа на консултантот е да ги потврди доказите, да ја одржува доверливоста и да го воспостави слојот „па што“.
Задача за апликација
Подгответе неколку транскрипти од интервјуата (или отворени одговори на анкетата), или вистински или репрезентативни, и прво анонимизирајте ги (вклучувајќи име и индиректна идентификација). Извадете теми, цитати, спротивставени изјави и различни гласови со силно квалитативно поттикнување. Проверете го цитатот на барем една тема во преписот за да потврдите дека таа навистина постои. Потоа направете мала квантитативна анкета и проценете ја пристрасноста на примерокот и прашањето со барање методолошка ревизија.
листа за проверка
- [ ] Ги анонимизирав транскриптите, вклучувајќи име и индиректна идентификација.
- [ ] Секоја тема ја докажав со дословно цитат.
- [ ] Покажав спротивставени изрази и контрадикторни гласови одделно.
- [ ] Во малиот примерок, користев сурови бројки и несигурност наместо проценти.
- [ ] Ги означив водечките прашања.
- [ ] Го оценив ризикот од пристрасност во изборот.
- [ ] Ги пријавив чувствителните коментари колективно без да ги усогласам со поединецот.