zisky:
- Schopnosť rozdeliť prieskumy spokojnosti pacientov a voľnú textovú spätnú väzbu do tém a vykonávať analýzu sentimentu s podporou umelej inteligencie
- Schopnosť vytvárať praktické poznatky a návrhy na zlepšenie z textov sťažností a návrhov
- Schopnosť zachytiť úskalia, ako je skreslenie vzoriek, automatická chyba sentimentových značiek a ochrana súkromia pred interpretáciou
Pacienti neprichádzajú len preto, aby sa zlepšili; Tiež zažívajú a pamätajú si, ako sa k nim správali, ako dlho čakali a komu mohli povedať svoje problémy. Spokojnosť pacientov je etickou zodpovednosťou aj výkonnostným rozmerom, ktorý ovplyvňuje povesť inštitúcie a v niektorých prípadoch aj jej úhradu. Údaje o spokojnosti však často prichádzajú v dvoch formách: prieskumy merané hviezdičkami/hodnoteniami a recenzie vo voľnom formáte. Čítanie stoviek bezplatných komentárov po jednom si vyžaduje čas. Tu je umelá inteligencia mocná: rozdeľuje stovky textov do tém, extrahuje emocionálny tón a sumarizuje výrazné sťažnosti a chvály. V tejto časti uvidíme, ako to urobiť, ale čo je dôležitejšie, ako sa vyhnúť nesprávnemu čítaniu. Hranica: AI sumarizuje text a extrahuje témy; ale automatické označenie emócií môže byť omylné, vzorka môže byť neobjektívna – zovšeobecňovanie a rozhodovanie patrí manažérovi.
Základné pojmy dolovania textu
Niekoľko pojmov: Text mining je proces automatického získavania vzorov a významu z písaných textov. Analýza sentimentu je automatická klasifikácia pozitívneho/negatívneho/neutrálneho tónu textu. Extrakcia témy/témy je zoskupenie viacerých komentárov do spoločných tém (čistota, čakanie, komunikácia, cena). NPS (Net Promoter Score) je indikátor lojality založený na otázke "Odporučili by ste nás?" Je užitočné uvažovať o údajoch o spokojnosti v dvoch samostatných dimenziách: kvantitatívna dimenzia (hodnotenia, NPS) vám dáva odpoveď na otázku „koľko“; Kvalitatívny rozmer (voľné komentáre) nesie odpoveď na otázku „prečo“. Obidva by boli samostatne neúplné; Pri spoločnom čítaní vidíte veľkosť problému aj jeho zdroj.
Tieto vozidlá majú silnú, ale nebezpečnú stránku. Analýza sentimentu naráža na jemnosť jazyka. Veta „Super, čakal som znova 3 hodiny“ sa môže zdať pozitívna, keď sa pozrieme na slovo od slova, pretože obsahuje „skvelé“; Je to však irónia. „Nebolo to zlé“ obsahuje negáciu. Prípony a idiómy v turečtine to ešte viac sťažujú. Druhým nebezpečenstvom je zaujatosť výberu vzoriek: prieskum vo všeobecnosti vypĺňajú ľudia, ktorí sú buď veľmi spokojní, alebo veľmi nahnevaní; Mlčiaca väčšina v strede je neviditeľná. Preto je obraz, ktorý AI vykresľuje, názorom „autorov“, nie „všetkých pacientov“.
Skutočná hodnota týchto nástrojov nie je v počte, ale v smere. Hodnotenie hviezdičkami vám povie „spokojnosť 3,8“, ale nepovie vám, čo treba opraviť; voľný text vám presne povie, čo vás trápi. Úlohou AI je destilovať tento surový príbeh do zvládnuteľných nadpisov: Neviete prečítať 600 komentárov, ale vetu „30 percent komentárov uvádza smerovanie zmätku“ môžete premeniť na činy. Toto zníženie však zahŕňa aj stratu: nápadné, jedinečné, ale dôležité bezpečnostné varovanie od jedného pacienta sa môže stratiť v „malej téme 2 percent“. Preto je potrebné okrem kvantitatívneho zhrnutia dodatočne preveriť jednotlivé komentáre, ktoré signalizujú bezpečnosť alebo závažné sťažnosti; Číslo ukazuje celkový obraz a jednotlivý komentár ukazuje kritickú výnimku.
Krok za krokom: Analýza spätnej väzby pomocou AI
- Anonymizovať. Odstráňte z komentárov identifikátory, ako je meno, meno lekára, číslo izby.
- Rozdeľte to podľa témy. Požiadajte AI o zoskupenie komentárov do bežných tém; Počet titulov určujete vy.
- Odstráňte emocionálny tón, ale overte si ho. Získajte pozitívnu/negatívnu mieru pre každú tému; Potom si sami prečítajte ukážkové komentáre.
- Pohľad do akcie. Vyberte si najčastejšiu a najpálčivejšiu tému; Je vypracovaný konkrétny návrh na zlepšenie.
- Ukážkové ovládanie. Koľko ľudí to napísalo, kto to napísal, je to reprezentatívne? Urobte zovšeobecnenie podľa tohto limitu.
- Manažérske rozhodnutie. Rozhodnutie o zlepšení a stanovenie priorít patrí manažérovi; AI len pripravuje náhľad.
Pozor: Číslo ako „78 percent pozitívnych“ zadané AI môže nesprávne vyložiť iróniu a negáciu. Nezabudnite si sami prečítať niekoľko surových recenzií na každú tému a skontrolujte, či sa štítok zhoduje s realitou.
tri mini prípady
Prípad 1 – Skrytá téma. Jedna nemocnica nazhromaždila 640 bezplatných komentárov za mesiac; nikto to nemohol všetko prečítať. Oddelenie práv pacientov dalo anonymné komentáre YZ a priradilo ich k téme. Najväčšou negatívnou témou nebola „čakacia doba“, ako sa očakávalo, ale „zmätok v smerovaní“ (pacienti nevedeli zistiť, na ktoré poschodie majú ísť). Vďaka jednoduchému značeniu a usporiadaniu personálu sa táto téma za dva mesiace výrazne znížila. AI zviditeľnila skrytú tému; Riešenie patrilo tímu.
Prípad 2 – Ironická pasca. Jedna jednotka bola spokojná s „82 percent pozitívnym“ zhrnutím AI a povedala vedeniu, že „spokojnosť je vysoká“. Pracovník kvality prečítal ukážkové komentáre: Ironické vety ako „Úžasné, dostal som sa 2 hodiny po dohodnutom čase“ boli považované za pozitívne. Skutočná kladná miera bola nižšia. Obsluha kalibrovala značku AI ručným čítaním niekoľkých desiatok komentárov a opravil prezentáciu.
Prípad 3 – Skreslenie vzorky. V jednej ambulancii odpovedalo na online prieskum len 45 ľudí a väčšina bola veľmi negatívna. Jeden manažér spanikáril, že „poliklinika skrachovala“. Analytik pripomenul, že týchto 45 ľudí bolo malým a neobjektívnym kúskom z 3200 pacientov v danom mesiaci a že nahnevaní ľudia na prieskum odpovedali viac. Namiesto paniky sa spustil reprezentatívny exit poll; Skutočný obraz bol oveľa vyváženejší.
Štyri kopírovateľné šablóny
1) Extrakcia témy:
Vaša úloha: asistent analytika skúseností pacientov. Nižšie sú uvedené anonymné komentáre pacientov na voľnej nohe (bez mena/mena lekára). Úloha: rozdeľte komentáre do 6-8 spoločných tém (napr. čakanie, komunikácia, upratovanie, odporúčanie, poplatok). Uveďte, koľko komentárov ste mali ku každej téme a uveďte 2 vzorové cenové ponuky. Nevymýšľajte si komentáre; Len použi to, čo ti dám.
2) Sentiment + upozornenie na potvrdenie:
Odčítajte pomer kladný/negatívny/neutrálny pre každú tému. ALE upozornite na to, že irónia, negácia a sarkastické výrazy môžu zavádzať značku emócií a 5 komentárov, ktorými si nie ste istý, uveďte samostatne ako „ručne kontrolované“. Prezentácia ako presné percento; dať cca.
3) Akčný prehľad:
Vyberte si najčastejšiu a najnegatívnejšiu tému. Pre túto tému: náčrt možnej základnej príčiny, 3 zlepšenia, ktoré je možné implementovať v krátkodobom horizonte, a odhadovaný vplyv/náklady každého z nich. Uveďte, že ide o návrh a rozhodnutie je na manažérovi.
4) Vzorová kontrolná poznámka:
V tejto analýze je celkový počet odpovedí [N] počtom pacientov v danom období [M]. Napíšte mi varovnú poznámku o reprezentatívnosti vzorky: ak je miera odpovede nízka alebo sú nadmerne zastúpení nahnevaní pacienti, vysvetlite riziká zovšeobecnenia výsledkov v 4 bodoch.
Slabá výzva / Silná výzva
Slabá výzva:
Povedzte mi, či sú tieto komentáre dobré alebo zlé, aké percento je spokojných.
Žiadne témy, žiadne overovanie, žiadne vzorové upozornenia; Vráti jediné zavádzajúce percento.
Výkonná výzva:
Nižšie je [N] anonymných komentárov pacientov, počet pacientov v tom čase [M]. Komentáre oddeľte podľa tém, ku každej téme uveďte približný emocionálny tón, ale označte, ak si nie sú isté kvôli irónii/negácii. Navrhnite návrh na zlepšenie najpálčivejšej témy a pridajte varovnú poznámku o reprezentatívnosti vzorky.
krok
Príspevok AI
ľudská kontrola
Oddelenie tém
Zoskupuje stovky komentárov
Sú názvy zmysluplné?
značka emócií
Vytvára rýchly tón
Ovládanie irónie/negácie
vhľad
Návrh na zlepšenie
Použiteľnosť, cena
zovšeobecňovanie
Poskytuje súhrn
Je vzorka reprezentatívna?
Časté chyby
- Prijatie nálepky emócie také, aké je. Irónia a negácia sú zavádzajúce; Prečítajte si príklady.
- Zovšeobecnenie z malej/zaujatej vzorky. 45 nahnevaných komentárov nereprezentuje všetkých pacientov.
- Obchádzanie anonymizácie. Komentáre môžu obsahovať meno lekára/pacienta; odstráňte ho.
- Zameranie sa len na negatívne. Pozitívne témy tiež naznačujú, čo budete chrániť.
- Nesprávny pohľad na rozhodnutie. Rozhodnutie a priorita zlepšovania patrí manažérovi.
Tip: Na konci každej analýzy si sami prečítajte 15 – 20 náhodných nespracovaných komentárov a porovnajte ich so značkou AI. Tento 10-minútový zvyk „kalibrácie“ zachytáva pasce irónie a negácie a naučí vás, ako veľmi dôverovať umelej inteligencii.
V súhrne
Údaje o spokojnosti pacientov prichádzajú v skóre aj vo voľnom texte a AI je veľmi výkonná pri rozdeľovaní stoviek komentárov do tém a ich zhrnutí. Ale automatické označenie emócií sa mýli na strane irónie a negácie; Vzorkovanie prieskumu je často neobjektívne. Výstup AI preto nemožno zovšeobecniť bez overenia pomocou nespracovaných interpretácií a veľkosti vzorky. Zachováva sa anonymita, pripravuje sa náhľad; Ale rozhodnutie a priorita zlepšovania vždy patrí manažérovi.
Aplikačná úloha
Získajte sadu anonymných komentárov (20 – 30 komentárov, skutočných alebo hypotetických). Požiadajte AI o tému a tón pomocou šablón „Vyvodenie témy“ a „Emotion + upozornenie na overenie“. Potom si sami prečítajte aspoň 10 surových komentárov a porovnajte ich s tagom AI; Do 5 položiek napíšte, v koľkých z nich vám vadí irónia/negácia a reprezentatívnosť vzorky.
kontrolný zoznam
- [ ] Anonymizoval som komentáre (bez mena pacienta/lekára)?
- [ ] Kalibroval som značku sentimentu s nespracovanými komentármi?
- [ ] Zvážil som veľkosť vzorky a zaujatosť?
- [ ] Hľadal som pozitívne aj negatívne témy?
- [ ] Nechal som rozhodnutie o zlepšení a prioritu na manažéra?