Добици:
- Способност анализе отворених одговора на анкету према темама, учесталости и расположењу
- Способност тумачења метрика као што су еНПС и ангажовање и претварање их у препоруке за акцију
- Способност успостављања оквира за анализу анкета без пристрасности који чува анонимност и поверљивост
Спровели сте анкету о ангажовању запослених и добили стотине бесплатних текстуалних коментара од 400 људи. Требало би данима да се прочитају једна по једна и издвоје главне теме, а било би субјективно: из очију уморног читаоца неке теме би се издвојиле, а неке нестале. Вештачка интелигенција (АИ) групише стотине отворених одговора у теме, учесталост и расположење за неколико минута; То ствара слику која ће навести менаџмент да предузме акцију. Али ту долази до изражаја једна од најосетљивијих одговорности ХР-а: ови коментари припадају појединцима, анонимност је обећана и ово обећање никада не треба прекршити. У овој јединици ћемо научити како да спроведемо анализу анкете од краја до краја и очувамо анонимност и правичност.
Неколико термина: еНПС (емплоиее Нет Промотер Сцоре) је метрика која мери склоност запослених да препоруче компанију; Налази се тако што се проценат „оних који препоручују“ одузме од процента „оних који не препоручују“. Учешће/посвећеност се односи на емоционалну везу запосленог за свој посао и компанију. Анализа сентимента је класификација позитивног/негативног/неутралног тона текста. Тематско кодирање је процес поделе слободних текстова на уобичајене теме (као што су радно оптерећење, менаџмент, каријера).
Тематске отворене одговоре
АИ претвара слободан текст у структурални увид. Критична тачка: одржавање анализе анонимном и агрегираном. Корак по корак процес:
- Анонимизирајте податке. Уклоните или генерализујте назив, јединицу, описне детаље.
- Издвојите теме. Питајте у колико коментара се појављује свака тема.
- Додајте емоционално стање. Да ли је свака тема позитивна или негативна?
- Затражите узорке цитата - али сигурних. Репрезентативни цитати који неће одати појединца.
- Претворите то у акцију. 1-2 конкретна предлога за сваку важну тему.
- Тумачите са људима. Бројеви се читају са контекстом; Последњи коментар је ваш.
Ваша улога: аналитичар искуства запослених. Задатак: Анализирајте следеће анонимне коментаре анкете.1) Групишите коментаре у главне теме (нпр. менаџмент, оптерећење, каријера, плата, култура, алати). Наведите колико коментара имате за сваку тему.2) Сумирајте опште расположење (позитивно/негативно/неутрално) сваке теме.3) Идентификујте 3 најчешће помињана позитивна аспекта и 3 области развоја.Правило: Не покушавајте да упоредите коментаре са ЉУДИМА. Ако постоје детаљи (име, јединица, конкретан догађај) који описују појединца, ОПШТИ их при сумирању. Немојте само цитирати ретке/специфичне коментаре који би могли открити особу.
Овај промпт; То даје ефективан резултат за менаџмент, као што је „Тема радног оптерећења појавила се у 78 коментара, претежно негативних; вечерња смена је главни разлог“ — не откривајући никога.
Савет: Највећи етички ризик у анализи анкете је кршење анонимности. Коментар типа "Једина особа у рачуноводству чије је дете рођено" може сам од себе да изда особу. Експлицитно реците АИ да генерализује детаље који идентификују појединца и да не истиче ретке/специфичне коментаре.
Тумачење метрика и њихово превођење у акцију
Сирови број сам по себи није смислен; Да ли је „еНПС 12“ добар или лош? АИ помаже да се метрика контекстуализује и преведе у препоруке за акцију:
Протумачите метрику анкете у наставку и доставите резиме на 1 страницу менаџеру. Подаци: - еНПС: 12 (25 прошле године) - Укупан ангажман: 3,6 од 5 - Област са најнижим бодовањем: "развој каријере" (3,1) - Област са највишим бодовањем: "односи у тиму" (4.1) Захтева се шта је добро забрињавајуће2) Могуће хипотезе за опадање еНПС-а (измишљање тачног разлога, хипотеза)3) Предлог конкретне акције за 3 најкритичније области
Подијелите негативне коментаре на тему „Развој каријере“ на подтеме (нпр. несигурност у напредовању, недостатак обуке, недостатак повратних информација). За сваку подтему запишите број коментара и идеју за акцију. Не излажите особу; Држите цитате анонимним и репрезентативним.
Три мини кућишта
Случај 1 — Од дана до минута. У компанији од 600 људи, два стручњака за људске ресурсе су ручно кодирали 1.400 бесплатних коментара на годишњем истраживању у једној седмици. Са вештачком интелигенцијом, теме су сведене на неколико сати; Тим је посветио време анализи, тумачењу и акционом планирању. Доследност кодирања је такође повећана јер су исти критеријуми примењени на све коментаре.
Случај 2 — Пресретање тајног сигнала. У једној производној компанији, укупни резултати су били добри, али АИ је истакао тему „распоред смена“ са 46 негативних коментара; ово је био образац који је занемарен у читању из руке. Менаџмент је прегледао систем смена; У наредном кварталу, повезане жалбе су преполовљене.
Случај 3 — Спречавање кризе анонимности. У првом покушају, стручњак је такође пружио информације о јединици АИ; Испис је садржао откривајући цитат „О једином управнику у јединици Кс“. Експерт је то приметио пре објављивања, исправио процес: уклоњене су информације о јединици, уведено је правило да се „засебно пријави свака подгрупа са мање од 5 коментара“. Поверење је сачувано.
Слаба порука / јака промпт
Слаб упит: Сумирајте ове коментаре анкете.
Резултат: површан, бројан, без гаранције анонимности; сажетак који би чак могао одати појединца.
Снажан упит: [анонимизовани подаци + тема и број + расположење + сигуран/репрезентативни цитат + "генерализујте појединца, не откривајте ретке коментаре" + предлог за акцију]
Резултат: анализа која је нумеричка, тематска, оријентисана на акцију и одржава анонимност.
Правила анонимности и поштења
Ризик
предострожности
Откривање мале групе
Одвојено извештавање подгрупа са мање од 5 испитаника
описни детаљ
Генерализујте информације о називу/јединици/догађају
Цитирајући редак коментар
Користите само репрезентативне, већинске цитате
пристрасан коментар
Доведите у питање систематску негацију групе од стране вештачке интелигенције (старост, пол, итд.)
Извоз необрађених података у небезбедну алатку
Користите сертификоване/институционалне алате и анонимне податке
Пажња: Подаци из анкете су лични подаци; Лепљење необрађених коментара у генерички алат без осигурања корпоративних података носи ризик од КВКК-а (у то ћемо уронити у следећој јединици). Закључак АИ о теми је такође погрешив; Човек треба да прегледа бројеве и примере и направи коначну интерпретацију. АИ проналази обрасце; Човек одређује смисао и акцију.
Уобичајене грешке
- Кршење анонимности. Стављање јединице/имена/посебних детаља у анализу може одати особу.
- Извештавање у малим групама. Резултат јединице од 3 особе су скоро лични подаци.
- Слепо верујући сировом броју. Тематизација АИ је погрешна; Проверите узорковањем.
- Истичући редак упечатљив коментар. То може бити откривајуће, а не репрезентативно.
- Не повезује коментар са акцијом. Ако анализа не произведе конкретне кораке, остаје на полици.
- Гледајући пристрасност. Поставите питање да ли АИ систематски негира одређену групу.
Укратко
- АИ групише стотине отворених одговора према темама, учесталости и расположењу како би извукао увид у радњу за менаџмент.
- Одржавајте анонимност: генерализујте детаље који идентификују појединца, не откривајте мале групе и ретке коментаре.
- Ставите метрике као што су еНПС и ангажовање у контекст; Не измишљајте дефинитиван разлог, тражите хипотезу.
- Вежите сваку важну тему за конкретну акцију; Анализа не ствара вредност ако не производи кораке.
- Обрадите необрађене податке помоћу безбедног алата; АИ проналази обрасце, људи врше коначну интерпретацију и проверу пристрасности.
Задатак апликације
Припремите 30-40 коментара анкете, стварних или измишљених (намерно укључите један или два детаља који „изговарају”). Прво анонимизирајте податке. Нека АИ генерише теме, анализу осећања и број коментара за сваку тему; Затражите сигурне/репрезентативне понуде. Затим проверите излаз: да ли неки цитати одају особу? Да ли се подгрупа са мање од 5 коментара пријављује засебно? На крају, напишите конкретну акцију за 3 најкритичније теме.
контролна листа
- [ ] Да ли су подаци анонимизовани пре анализе (назив/јединица/детаљ)?
- [ ] Да ли су теме приказане нумерички (колико коментара)?
- [ ] Да ли је за сваку тему одређено расположење?
- [ ] Зар се подгрупе са мање од 5 одговора не пријављују засебно?
- [ ] Да ли су цитати репрезентативни и не откривају податке?
- [ ] Да ли су резултати вештачке интелигенције доведени у питање због пристрасности?
- [ ] Да ли је свака критичка тема везана за конкретну акцију?