одиниці
1. Вступ до штучного інтелекту в кол-центрі та роботі з клієнтами: ролі, межі, автентифікація та конфіденційність 2. Голосові та текстові боти: IVR, чат-бот і Voicebot Design 3. Дизайн розмови та віртуальний помічник: намір, діалог і природний досвід 4. Підсумок дзвінків і автоматичне позначення: скорочення підсумків до секунд 5. База знань і RAG: як бот і агент знаходять правильну відповідь 6. Помічник агента: допомога в реальному часі 7. Аналіз настрою та управління якістю: забезпечення якості з аналітикою мовлення 8. Самообслуговування та автоматизація: самовирішення клієнта 9. Конфіденційність даних, безпека та відповідність: KVKK, PCI-DSS і маскування 10. Ескалація та співпраця людини та штучного інтелекту 11. Вимірювання, KPI та постійне вдосконалення: що контролювати та як? 12. Створення наскрізної програми CX-AI: інтеграція та управління
одиниця 7 / 12

Аналіз настрою та управління якістю: забезпечення якості з аналітикою мовлення

Прибуток:

  • Здатність читати індивідуальні та сукупні тенденції за допомогою аналізу настроїв і аналізу мовлення та використовувати бали як сигнали, а не абсолютні факти
  • Можливість сканувати 100% розмов за допомогою об’єктивної системи показників і проводити попередню оцінку на основі доказів, залишаючи остаточне рішення людині
  • Здатність створити систему якості з прозорістю та далеко від пенітенціарної культури з метою розвитку та вдосконалення досвіду

Щодня в кол-центрі відбуваються тисячі розмов, але при класичному методі команда якості може вислухати й оцінити лише невелику частину з них (здебільшого 1-2%). Це означає, що 98% розмов втрачаються, навіть не перевіряючись; Навіть якщо до клієнта погано ставляться або представник неодноразово надає неправдиву інформацію, цього ніхто не може помітити. Кардинально змінює цю картину штучний інтелект: він може прочитати та оцінити кожну розмову. У цьому розділі ми розглянемо дві пов’язані теми: аналіз сентиментів (вимірювання емоційного тону клієнта та представника) та управління якістю (QA – Quality Assurance; оцінка відповідності розмов стандартам).

Перші два терміни. Аналіз настроїв – це позитивний, негативний або нейтральний емоційний тон тексту чи мови; Він призначений для автоматичного виявлення таких ситуацій, як гнів, задоволення та тривога. Аналітика мовлення (аналітика взаємодії) полягає в сукупному аналізі всіх розмов і виділенні тенденцій, частих тем, ризиків і можливостей. Разом вони дають кол-центру «чуючі вуха»: генеруючи значення з тисяч розмов, які менеджер не може вислухати окремо.

Аналіз самопочуття: тримати пульс

Аналіз настроїв працює на двох рівнях. Одиничний рівень: показує загальний тон розмови («клієнт почав злитися, згодом заспокоївся») і переломні моменти. Зведений рівень: витягує такі тенденції, як «негативні настрої цього тижня зросли на 18%, здебільшого про «рахунки»» з тисяч розмов. Ця інформація є золотою: вона завчасно вловлює наростаючу хвилю гніву, проблему з продуктом або плутанину щодо нової кампанії.

Однак аналіз настроїв не ідеальний. У турецькій мові сарказм, іронія та ідіоми можуть ввести модель в оману (речення «Дуже дякую, чудове обслуговування!», можливо, було сказано в гніві). Крім того, показник настрою є сигналом, а не остаточною істиною. Тож використовуйте аналіз настроїв не для покарання окремого представника, а для того, щоб побачити тенденції та виділити розмови, які потребують уваги.

Порада: використовуйте аналіз настроїв як «попередження», а не як «судження». Одна негативна оцінка не засуджує представника; але зростання негативної тенденції вказує на сферу, яка потребує вивчення. Перевірте сигнал за допомогою людини.

Управління якістю: 100% оцінка замість 1%

У класичному QA експерт з якості оцінює кілька випадково вибраних дзвінків за допомогою форми для оцінки (таблиця показників — такі пункти, як «чи було передано привітання, чи підтверджено особу, чи було запропоновано рішення, чи відповідне завершення»). Цей метод має проблеми з малим розміром вибірки, суб’єктивністю та затримкою. У QA, що підтримується штучним інтелектом, модель автоматично оцінює всі розмови відповідно до елементів системи показників; Якої статті не вистачає, які виступи ризиковані, якого представника в якому питанні треба підтримати – це все показує.

Критична точка: Оцінка AI QA є попереднім скринінгом і показником, а не остаточною оцінкою. AI каже, що «ця розмова, здається, пропустила етап автентифікації»; Експерт з якості вивчає ці позначені розмови та приймає остаточне рішення. Тож замість того, щоб прослуховувати тисячі розмов, експерт зосереджується на ризикованих/зразкових розмовах, які позначає штучний інтелект — і більш чесних, і більш повних.

У наведеній нижче таблиці порівнюються два підходи:

Розмір

Класичний QA

Контроль якості на основі AI

Область застосування

1-2% розмов

100% сканування

Тривалість

Повільно, рука слухає

Миттєве сканування

Послідовність

Залежно від експерта

Постійно застосовується до критерію

суб'єктивність

висока

Критерій зрозумілий, сигнал + людина

остаточне рішення

експерт

Експерт (фокусується на ШІ)

Ризик

Втеча від проблем

Помилковий знак (треба перевірити)

Крок за кроком: програма якості на основі ШІ

  1. Уточніть таблицю показників: пишіть об’єктивні та вимірні пункти оцінки (не розпливчасто, як «повівся ввічливо», а чітко, як «привітав клієнта на ім’я/відповідну адресу»).
  2. Дайте ШІ критерії: оцініть кожну розмову як «виконано/невиконано/незрозуміло» відповідно до цих пунктів; Ви показали доказове речення.
  3. Виділіть ризиковані розмови: приведіть до експерта бесіди з низькими оцінками, роздратування або небезпечні розмови.
  4. Експерт підтверджує: остаточна оцінка та відгук належать людині; Місця, які штучний інтелект називає «невизначеними», точно доступні людям.
  5. Перетворіть це на коучинг: використовуйте висновки для розвитку агента — зосереджено на покращенні, а не на покаранні.

Чотири шаблони, які можна копіювати

1) Рейтинг системи показників:

Оцініть наведену нижче анонімну розмову за наступними пунктами. Для кожного пункту: укажіть status=[done/not done/unclear] і речення ДОКАЗ (цитата з розмови). Якщо доказів немає, скажіть «незрозуміло»; вгадування. Елементи: 1) Відповідне привітання 2) Автентифікація 3) Розуміння проблеми 4) Правильна інформація/розв’язання 5) Обов’язкова інформація 6) Ввічливе закриття. Мовлення: <<розшифровка>>

2) Аналіз настроїв і поворотних моментів:

Намалюйте емоційну траєкторію анонімної розмови нижче.- Початковий тон, тон закінчення (спокійний/сердитий/тривожний/задоволений),- Момент, коли емоція ЗМІНИЛАСЯ та чому (з цитатою),- Чи були якісь ознаки гніву/кризи, як агент впорався з цим? Зверніть увагу на можливу іронію/сарказм; Якщо ви не впевнені, скажіть «незрозуміло». Мовлення: <<транскрипція>>

3) Зведений звіт про тенденції:

Нижче наведено теги анонімних розмов і оцінки настроїв цього тижня. (1) Тема, яка викликає найбільше негативних емоцій, (2) гіпотеза про можливу першопричину (довести), (3) 3 теми, рекомендовані для вивчення. Беріть цифри з даних, не вигадуйте їх; позначити гіпотези як «має бути підтверджено». Дані: <<зведена таблиця>>

4) Резюме коучингу (розвиток агента):

Створіть орієнтовану на розвиток некаральну коучинг-записку для ОДНОГО представника на основі наступних оцінених розмов. - Сильні сторони (2), - Область для вдосконалення (2, з конкретними прикладами), - 1 запропонована мікроціль. Особисте судження/використання міток. Дані: <<оцінки мовлення>>

Слабка підказка / Сильна підказка

Слабка підказка:

Оцініть, хороший чи поганий цей представник.

Суб'єктивний, без критеріїв, без доказів, каральний; Він виносить несправедливий і невиправданий «суд».

Потужна підказка:

Оцініть цю анонімну розмову за системою показників із 6 пунктів; Для кожного пункту цитата зроблено/не виконано/незрозуміло + ДОКАЗИ з виступу. Якщо доказів немає, скажіть «незрозуміло». Я (експерт з якості) прийму остаточне рішення; ви просто робите попередню оцінку з доказами.

Різниця: критерій чіткий, докази обов’язкові, невизначеність чесна, остаточне рішення залишається за особою.

три міні-чохла

Випадок 1 — потужність 100% покриття. В одному банку команда QA могла прослуховувати ~1200 розмов на місяць (1,5% від загальної кількості). Усі 80 000 розмов були проскановані за допомогою ШІ; Виявилося, що крок автентифікації було пропущено в 6% випадків — ризик відповідності, якого ніколи не було б за класичної вибірки. Завдяки цілеспрямованому коучингу показник знизився до менше 1% за 2 місяці.

Випадок 2 — Пастка іронії. У центрі електронної комерції модель емоцій вважала іронічні речення на кшталт «ти молодець, я чекав 3 дні» як «позитивні»; тому деякі розгнівані клієнти здавалися "задоволеними". Коли модель не була єдиною особою, яка приймала рішення, а оцінки перевірялися за допомогою вибірки людським оком, команда відзначала випадки іронії окремо, і надійність звітів зросла. Урок: оцінка настрою – це сигнал, а не абсолютна істина.

Випадок 3 — Раннє попередження. Аналітика мовлення в одному телекомі показала, що негативні настрої навколо «рахунку» зросли на 40% за 3 дні, починаючи з вівторка. Розслідування показало, що при переході на новий тариф неправильно відображені рахунки. Проблему було виявлено та усунено раннім емоційним сигналом до того, як накопичилися тисячі скарг. Аналітика стала системою раннього попередження, а також якісним інструментом.

Поширені помилки

  • Розглядаючи оцінку емоцій як абсолютну істину. Іронія, ідіома та контекст вводять модель в оману; Використовуйте оцінку як сигнал, перевірте за допомогою людини.
  • Оцінка ШІ приймає остаточне рішення. У QA кінцева оцінка та відгук належать людині; ШІ прогресує.
  • Нечіткі елементи системи показників. «Він поводився добре» не можна виміряти; Пишіть об'єктивні, перевірені пункти.
  • Перетворення QA на інструмент покарання. Мета - розвиток і клієнтський досвід; Культура покарання змушує агента мовчати та спотворює дані.
  • Оцінка без доказів. Кожен висновок необхідно підкріпити цитатою з виступу; Інакше це слід називати «незрозумілим».
Застереження: вимірювання всіх розмов за допомогою AI є потужним, але чутливим. Перетворення цього на систему, яка постійно контролює та карає працівників, є неетичним і руйнує довіру команди. Мета полягає в тому, щоб покращити досвід клієнтів і розвиток агентів; Важливими є прозорість і орієнтація на розвиток.

Підсумовуючи

Аналіз настрою та керування якістю на основі штучного інтелекту дають кол-центру змогу чути тисячі розмов: сканування 100% вибірки замість 1%, раннє виявлення тенденцій і підтримка оцінки якості. Але оцінка настрою є сигналом, а не абсолютною істиною; У QA остаточне рішення належить людині. Напишіть таблицю показників об’єктивно, поясніть кожне відкриття доказами, залиште невизначеність для людей і створіть всю систему прозоро, з метою розвитку та покращення досвіду, а не покарання.

Аплікаційне завдання

Розробіть об’єктивну систему показників із 6 пунктами (кожен пункт має бути вимірним і доказовим). Візьміть фіктивну/анонімну стенограму та застосуйте шаблони «1) Оцінка системи показників» і «2) Аналіз настрою». Виділіть області, де модель говорить «неоднозначно» або де може бути іронія, і напишіть, як людина-експерт має їх перевірити. Нарешті, створіть пам’ятку, орієнтовану на розвиток, із «4) Резюме коучинга».

контрольний список

  • [ ] Пункти моїх показників об’єктивні, вимірні та перевірені.
  • [ ] ШІ оцінка попередній скринінг; Остаточне рішення щодо забезпечення якості та відгуки залишаються за людиною.
  • [ ] Я використовую показники настроїв як сигнали, а не як абсолютну істину.
  • [ ] Кожен висновок підтверджується цитатою свідчень із розмови; інакше "незрозуміло".
  • [ ] Я створив систему з метою розвитку та покращення досвіду, а не покарання.
  • [ ] Мета та обсяг аналізу були прозоро роз’яснені працівникам.