Прибуток:
- Можливість розділяти опитування щодо задоволеності пацієнтів і безкоштовний текстовий відгук на теми та виконувати аналіз настроїв із підтримкою штучного інтелекту
- Здатність створювати практичні висновки та проекти вдосконалень із текстів скарг і пропозицій
- Можливість виявлення підводних каменів, таких як зміщення вибірки, автоматична помилка тегу настрою та захист конфіденційності перед інтерпретацією
Пацієнти приходять не просто для того, щоб одужати; Вони також переживають і пам’ятають, як з ними поводилися, як довго чекали, кому могли розповісти про свої проблеми. Задоволеність пацієнтів є як етичною відповідальністю, так і виміром ефективності, який впливає на репутацію закладу та, у деяких випадках, на його відшкодування. Але дані про задоволеність часто надходять у двох формах: опитування, виміряні зірочками/рейтингами, і відгуки у вільній формі. Щоб прочитати сотні безкоштовних коментарів один за іншим, потрібен час. Ось тут потужний штучний інтелект: він розділяє сотні текстів на теми, виділяє емоційний тон і підсумовує помітні скарги та похвали. У цьому розділі ми побачимо, як це зробити, але, що більш важливо, як уникнути неправильного читання. Межа: ШІ узагальнює текст і виділяє теми; але автоматичний ярлик емоцій може бути помилковим, вибірка може бути упередженою — узагальнення та рішення належать менеджеру.
Основні поняття інтелектуального аналізу тексту
Кілька термінів: аналіз тексту – це процес автоматичного вилучення шаблонів і значення з письмових текстів. Аналіз настрою – це автоматична класифікація позитивного/негативного/нейтрального тону тексту. Виділення теми/теми — це групування кількох коментарів у спільні теми (чистота, очікування, спілкування, ціна). NPS (Net Promoter Score) — показник лояльності, який базується на питанні «Чи рекомендуєте ви нас?» Корисно розглядати дані про задоволеність у двох окремих вимірах: кількісний вимір (рейтинги, NPS) дає вам відповідь на запитання «скільки»; Якісний вимір (вільні коментарі) несе відповідь на запитання «чому». Обидва вони були б неповними окремо; Коли прочитати разом, ви побачите як масштаб проблеми, так і її джерело.
Ці транспортні засоби мають потужну, але небезпечну сторону. Аналіз настроїв натикається на тонкощі мови. Речення «Чудово, я знову чекав 3 години» може здатися позитивним, якщо дивитися дослівно, оскільки воно містить «чудово»; Однак це іронічно. «Це було непогано» містить заперечення. Суфікси та ідіоми в турецькій мові роблять це ще складнішим. Друга небезпека полягає в упередженості вибірки: опитування зазвичай заповнюють люди, які або дуже задоволені, або дуже злі; Мовчазна більшість посередині невидима. Тому картина, яку малює AI, є думкою «авторів», а не «всіх пацієнтів».
Справжня цінність цих інструментів не в кількості, а в напрямку. Зірковий рейтинг означає «задоволення 3,8», але не говорить вам, що виправити; вільний текст говорить вам, що саме вас турбує. Робота штучного інтелекту полягає в тому, щоб перетворити цей необроблений наратив у керовані заголовки: ви не можете прочитати 600 коментарів, але ви можете перетворити речення «30 відсотків коментарів згадують плутанину маршрутизації» в дію. Однак це скорочення також передбачає втрати: разюче, єдине, але важливе застереження щодо безпеки від одного пацієнта може бути втрачено в «маленькій темі про 2 відсотки». Тому, крім кількісного підсумку, необхідно додатково відсіювати окремі коментарі, які сигналізують про безпеку або серйозні скарги; Число показує загальну картину, а окремий коментар показує критичний виняток.
Крок за кроком: аналіз зворотного зв’язку за допомогою ШІ
- Знеособити. Видаліть із коментарів такі ідентифікатори, як ім’я, ім’я лікаря, номер палати.
- Розділіть його за темами. Попросіть AI згрупувати коментарі в загальні теми; Ви визначаєте кількість назв.
- Зніміть емоційний тон, але перевірте його. Отримайте позитивний/негативний рейтинг для кожної теми; Тоді прочитайте зразки коментарів самостійно.
- Інсайт у дії. Виберіть найчастішу та актуальну тему; Розроблено конкретну пропозицію щодо покращення.
- Вибірковий контроль. Скільки людей це написало, хто це написав, чи це репрезентативно? Зробіть узагальнення відповідно до цієї межі.
- Управлінське рішення. Рішення про вдосконалення та встановлення пріоритетів належить менеджеру; ШІ лише готує розуміння.
Застереження: число на зразок «78 відсотків позитивних», надане штучним інтелектом, могло неправильно зрозуміти іронію та заперечення. Обов’язково прочитайте кілька необроблених оглядів для кожної теми самостійно та перевірте, чи тег відповідає дійсності.
три міні-чохла
Випадок 1 — Прихована тема. Одна лікарня накопичила 640 безкоштовних коментарів на місяць; ніхто не міг це все прочитати. Відділ захисту прав пацієнтів надав анонімні коментарі YZ і відніс їх до теми. Найбільшою негативною темою був не «час очікування», як очікувалося, а «плутанина з маршрутом» (пацієнти не могли зрозуміти, на який поверх йти). Завдяки простим покажчикам і розташуванню персоналу ця тема значно зменшилася за два місяці. AI зробив приховану тему видимою; Рішення належало команді.
Випадок 2 — Пастка іронії. Один із підрозділів був задоволений підсумком штучного інтелекту «82 відсотки позитивних» і сказав керівництву, що «високе задоволення». Офіцер з якості зачитав зразки коментарів: іронічні речення на кшталт «Дивовижно, я прийшов через 2 години після призначеного часу» вважалися позитивними. Фактичний позитивний показник був нижчим. Обробник відкалібрував тег AI, прочитавши вручну кілька десятків коментарів, і виправив презентацію.
Випадок 3 — Зміщення вибірки. В одній амбулаторії лише 45 людей відповіли на онлайн-опитування, і більшість з них були дуже негативно налаштовані. Один керівник панікував, що «поліклініка збанкрутувала». Аналітик нагадав, що ці 45 людей були невеликою та упередженою частиною з 3200 пацієнтів того місяця, і що розлючені люди більше відповідали на опитування. Замість паніки запустили репрезентативний екзит-пол; Реальна картина була набагато збалансованішою.
Чотири шаблони, які можна копіювати
1) Вилучення теми:
Ваша роль: помічник аналітика досвіду пацієнтів. Нижче наведено анонімні коментарі пацієнтів-фрілансерів (без імені/імені лікаря). Завдання: розділити коментарі на 6-8 загальних тем (наприклад, очікування, спілкування, прибирання, рекомендація, гонорар). Укажіть, скільки коментарів у вас було для кожної теми, і наведіть 2 приклади цитат. Не вигадуйте коментарів; Просто використовуй те, що я тобі даю.
2) Почуття + сповіщення про перевірку:
Відніміть позитивне/негативне/нейтральне співвідношення для кожної теми. АЛЕ зауважте, що іронія, заперечення та саркастичні вирази можуть ввести в оману тег емоцій, і вкажіть 5 коментарів, щодо яких ви не впевнені, окремо як "перевірені вручну". Представлення у вигляді точного відсотка; дати прибл.
3) Інсайт, орієнтований на дію:
Виберіть найчастішу та найнегативнішу тему. Для цієї теми: опис можливої першопричини, 3 покращення, які можна впровадити в короткостроковій перспективі, і оцінений вплив/вартість кожного. Зазначте, що це пропозиція і рішення за керівником.
4) Зразок контрольної записки:
У цьому аналізі загальна кількість відповідей [N] є кількістю пацієнтів за цей період [M]. Напишіть мені застереження щодо репрезентативності вибірки: якщо рівень відповіді низький або сердиті пацієнти представлені надмірно, поясніть ризики узагальнення результатів у 4 пунктах.
Слабка підказка / Сильна підказка
Слабка підказка:
Скажіть мені, хороші ці коментарі чи погані, який відсоток задоволених.
Без тем, без перевірки, без зразків попереджень; Він повертає єдиний оманливий відсоток.
Потужна підказка:
Нижче наведено [N] анонімних коментарів пацієнтів, кількість пацієнтів на той момент [M]. Розділіть коментарі за темами, дайте приблизний емоційний тон для кожної теми, але позначте, якщо вони невпевнені через іронію/заперечення. Напишіть пропозицію щодо покращення найбільш гострої теми та додайте застереження щодо репрезентативності вибірки.
крок
Внесок ШІ
контроль людини
Поділ теми
Групує сотні коментарів
Чи мають назви значення?
тег емоції
Виробляє швидкий тон
Контроль іронії/заперечення
прозріння
Проект благоустрою
Застосовність, вартість
узагальнення
Надає резюме
Чи репрезентативна вибірка?
Поширені помилки
- Прийняття ярлика емоцій таким, яким воно є. Іронія та заперечення вводять в оману; Прочитайте приклади.
- Узагальнення за малою/зміщеною вибіркою. 45 гнівних коментарів не представляють усіх пацієнтів.
- Обхід анонімізації. Коментарі можуть містити ім’я лікаря/пацієнта; видалити його.
- Зосередження лише на негативі. Позитивні теми також вказують на те, що ви будете захищати.
- Помилкове сприйняття за рішення. Рішення та пріоритет щодо вдосконалення належить менеджеру.
Порада: наприкінці кожного аналізу самостійно прочитайте 15-20 випадкових необроблених коментарів і порівняйте їх із тегом AI. Ця 10-хвилинна звичка «калібрування» вловлює пастки іронії та заперечення та вчить вас, наскільки довіряти ШІ.
Підсумовуючи
Дані про задоволеність пацієнтів надходять як у вигляді балів, так і у вигляді вільного тексту, а штучний інтелект дуже потужно розбиває сотні коментарів на теми та підсумовує їх. Але автоматичний ярлик емоцій помиляється на боці іронії та заперечення; Вибірка опитування часто необ'єктивна. Тому результати штучного інтелекту неможливо узагальнити без перевірки за допомогою необроблених інтерпретацій і розміру вибірки. Зберігається анонімність, готується інсайт; Але рішення та пріоритет у вдосконаленні завжди належить менеджеру.
Аплікаційне завдання
Отримайте набір анонімних коментарів (20-30 коментарів, реальних або гіпотетичних). Попросіть AI тему та тон за допомогою шаблонів «Висновок теми» та «Емоція + сповіщення про перевірку». Потім самостійно прочитайте принаймні 10 необроблених коментарів і порівняйте їх із тегом AI; Напишіть, до скількох із них ви дорікаєте через іронію/заперечення та репрезентативність вибірки у 5 пунктах.
контрольний список
- [ ] Чи я анонімізував коментарі (без імені пацієнта/лікаря)?
- [ ] Чи відкалібрував я тег настрою за допомогою необроблених коментарів?
- [ ] Чи врахував я розмір вибірки та упередженість?
- [ ] Чи шукав я як позитивні, так і негативні теми?
- [ ] Чи залишив я рішення щодо вдосконалення та пріоритет для менеджера?