Nyereség:
- Lehetőség a betegelégedettségi felmérések és a szabad szöveges visszajelzések témákra való felosztására, valamint érzelemelemzés elvégzésére mesterséges intelligencia támogatással
- Képes gyakorlati betekintést és javítási tervezetet készíteni panasz- és javaslatszövegekből
- Képes elkapni a buktatókat, például a mintavételi torzítást, az automatikus hangulatcímkézési hibát és az adatvédelem értelmezés előtt
A betegek nem csak azért jönnek, hogy javuljanak; Azt is megtapasztalják és emlékeznek rá, hogyan kezelték őket, mennyi ideig vártak, és kinek mondhatták el problémáikat. A betegelégedettség egyrészt etikai felelősség, másrészt teljesítménydimenzió, amely befolyásolja az intézmény hírnevét, és esetenként a költségtérítését is. Az elégedettségi adatok azonban gyakran kétféle formában jelennek meg: csillagokkal/értékelésekkel mért felmérések és szabad formájú értékelések. Időbe telik, hogy egyenként elolvassa több száz ingyenes megjegyzést. Itt erős a mesterséges intelligencia: több száz szöveget bont témákra, érzelmi hangot von ki, és összefoglalja a kiemelkedő panaszokat és dicséreteket. Ebben az egységben látni fogjuk, hogyan kell ezt megtenni, de ami még fontosabb, hogyan kerüljük el a félreolvasást. Határ: az AI összefoglalja a szöveget és kivonja a témákat; de az automatikus érzelemcímke lehet esendő, a minta lehet elfogult – az általánosítás és a döntés a menedzseré.
A szövegbányászat alapfogalmai
Néhány kifejezés: A szövegbányászat az a folyamat, amely automatikusan mintákat és jelentéseket nyer ki írott szövegekből. A hangulatelemzés egy szöveg pozitív/negatív/semleges tónusának automatikus osztályozása. A téma/téma kinyerése több megjegyzés csoportosítása közös témákba (tisztaság, várakozás, kommunikáció, ár). Az NPS (Net Promoter Score) egy hűségmutató, amely a „Ajánlna minket?” kérdésen alapul. Hasznos az elégedettségi adatokat két különálló dimenzióban gondolkodni: a mennyiségi dimenzió (értékelések, NPS) megadja a választ a „mennyi” kérdésre; A minőségi dimenzió (szabad kommentek) a „miért” kérdésre ad választ. Mindkettő külön-külön hiányos lenne; Együtt olvasva láthatja a probléma nagyságát és forrását is.
Ezeknek a járműveknek van egy erős, de veszélyes oldaluk. A hangulatelemzés a nyelv finomságaiba botlik. A "Remek, megint 3 órát vártam" mondat szóról szóra nézve pozitívnak tűnhet, mert a "nagyszerű" kifejezést tartalmazza; Ez azonban ironikus. A „Nem volt rossz” tagadást tartalmaz. A török nyelvű toldalékok és idiómák ezt még megnehezítik. A második veszély a mintavételi elfogultság: a felmérést általában olyan emberek töltik ki, akik vagy nagyon elégedettek vagy nagyon dühösek; A középen lévő csendes többség láthatatlan. Ezért az AI által készített kép „a szerzők”, nem „minden beteg” véleménye.
Ezeknek az eszközöknek az igazi értéke nem a számban, hanem az irányban van. A csillagos értékelés azt jelzi, hogy "elégedettség 3,8", de nem mondja meg, hogy mit kell javítani; a szabad szöveg pontosan megmondja, mi zavar. A mesterséges intelligencia feladata, hogy ezt a nyers narratívát kezelhető címekké alakítsa: 600 megjegyzést nem lehet elolvasni, de azt a mondatot, hogy „a megjegyzések 30 százaléka az útválasztási zavart említi”, tettekre válthatja. Ez a csökkentés azonban veszteséggel is jár: egyetlen betegtől kapott feltűnő, egyedi, de fontos biztonsági figyelmeztetés elveszhet a „2 százalék kis témájában”. Ezért a mennyiségi összegzésen túl szükség van a biztonságot vagy súlyos panaszokat jelző egyedi megjegyzések további szűrésére is; A szám az összképet mutatja, az egyéni megjegyzés pedig a kritikus kivételt.
Lépésről lépésre: Visszajelzés elemzése mesterséges intelligencia segítségével
- Anonimizálás. Távolítsa el a megjegyzésekből az olyan azonosítókat, mint a név, orvos neve, szobaszám.
- Ossza el téma szerint. Kérje meg az AI-t, hogy csoportosítsa a megjegyzéseket közös témákba; Ön határozza meg a címek számát.
- Vegye ki az érzelmi hangot, de ellenőrizze. Szerezze meg az egyes témák pozitív/negatív arányát; Ezután olvassa el maga a minta megjegyzéseket.
- Betekintés a cselekvésbe. Válassza ki a leggyakoribb és legégetőbb témát; Konkrét javítási javaslat készül.
- Minta ellenőrzés. Hányan írták, kik írták, reprezentatív? Végezze el az általánosítást ennek a határértéknek megfelelően.
- Vezetői döntés. A fejlesztési döntés és a prioritások meghatározása a vezetőé; Az AI csak betekintést készít.
Figyelem: A mesterséges intelligencia által megadott "78 százalékos pozitív" szám félreértheti az iróniát és a tagadást. Mindenképpen olvasson el néhány nyers véleményt minden témáról, és ellenőrizze, hogy a címke megfelel-e a valóságnak.
három mini tok
1. eset – Rejtett téma. Egy kórház 640 ingyenes hozzászólást halmozott fel havonta; senki sem tudta elolvasni az egészet. A betegjogi osztály az anonim megjegyzéseket az YZ-nek adta, és a témához rendelte. A legnagyobb negatív téma nem a várakozási idő, hanem az "útvonali zavar" volt (a betegek nem tudták kitalálni, melyik emeletre menjenek). Egy egyszerű jelzésekkel és irányító személyzettel ez a téma két hónap alatt jelentősen csökkent. Az AI láthatóvá tette a rejtett témát; A megoldás a csapaté volt.
2. eset – Iróniacsapda. Az egyik egység elégedett volt az AI „82 százalékban pozitív” összefoglalójával, és azt mondta a vezetőségnek, hogy „nagy az elégedettség”. A minőségügyi tiszt mintamegjegyzéseket olvasott: Az olyan ironikus mondatokat, mint például: "Csodálatos, 2 órával a megbeszélt időpont után beértem" pozitívnak minősítették. A tényleges pozitív ráta alacsonyabb volt. A kezelő több tucat megjegyzés kézi olvasásával kalibrálta az AI-címkét, és javította a bemutatót.
3. eset – Mintavételi torzítás. Az egyik járóbeteg-szakrendelésen mindössze 45-en válaszoltak az online felmérésre, és a legtöbben nagyon negatívan. Az egyik vezető pánikba esett, hogy "a poliklinika csődbe ment". Az elemző emlékeztetett arra, hogy ez a 45 ember kicsi és elfogult szeletét képezte az abban a hónapban 3200 betegnek, és a dühös emberek jobban reagáltak a felmérésre. A pánik helyett reprezentatív exit poll indult; A valós kép sokkal kiegyensúlyozottabb volt.
Négy másolható sablon
1) Téma kivonat:
Az Ön szerepe: asszisztens a betegtapasztalat-elemzőhöz. Az alábbiakban névtelen szabadúszó betegek megjegyzései találhatók (név/orvos név nélkül). Feladat: osszuk fel a megjegyzéseket 6-8 közös témára (pl. várakozás, kommunikáció, takarítás, ajánlás, díj). Adja meg, hány megjegyzést fűzött az egyes témákhoz, és adjon 2 minta idézetet. Ne találd ki a megjegyzéseket; Csak használd, amit adok.
2) Hangulat + érvényesítési figyelmeztetés:
Vonja ki az egyes témák pozitív/negatív/semleges arányát. DE mutasd meg, hogy az irónia, a tagadás és a szarkasztikus kifejezések félrevezethetik az érzelem címkét, és sorold fel azt az 5 megjegyzést, amelyekben nem vagy biztos, külön-külön „manuálisan ellenőrizve”. Pontos százalékban kifejezve; adj kb.
3) Cselekvés-orientált betekintés:
Válassza ki a leggyakoribb és legnegatívabb témát. Ehhez a témához: a lehetséges kiváltó ok vázlata, 3 rövid távon megvalósítható fejlesztés, és mindegyik becsült hatása/költsége. Mondja el, hogy ez egy javaslat, és a döntés a vezetőn múlik.
4) Ellenőrzési megjegyzés minta:
Ebben az elemzésben a válaszok teljes száma [N] a betegek száma az adott időszakban [M]. Írjon nekem egy figyelmeztetést a minta reprezentativitására vonatkozóan: ha alacsony a válaszadási arány vagy túlreprezentáltak a dühös betegek, magyarázza meg 4 pontban az eredmények általánosításának kockázatait!
Gyenge felszólítás / Erős felszólítás
Gyenge felszólítás:
Mondja el, hogy ezek a megjegyzések jók vagy rosszak, hány százaléka elégedett.
Nincsenek témák, nincs ellenőrzés, nincsenek minta figyelmeztetések; Egyetlen félrevezető százalékot ad vissza.
Erőteljes felszólítás:
Az alábbiakban [N] névtelen betegek megjegyzései találhatók, az akkori betegek száma [M]. Válaszd szét a megjegyzéseket témák szerint, adj hozzávetőleges érzelmi hangot az egyes témákhoz, de jelöld, ha az irónia/negáció miatt bizonytalanok. Készítsen javaslatot a legégetőbb téma javítására, és adjon hozzá egy figyelmeztető megjegyzést a minta reprezentativitására vonatkozóan.
lépést
Az AI hozzájárulása
emberi kontroll
A téma szétválasztása
Több száz megjegyzést csoportosít
Értelmesek a címek?
érzelem címke
Gyors tónust hoz létre
Irónia/negáció kontroll
betekintést
Javítási tervezet
Alkalmazhatóság, költség
általánosítás
Összefoglalót ad
Reprezentatív a minta?
Gyakori hibák
- Elfogadni az érzelem címkét úgy, ahogy van. Az irónia és a tagadás félrevezető; Olvassa el a példákat.
- Általánosítás kis/elfogult mintából. 45 dühös megjegyzés nem minden beteget képvisel.
- Az anonimizálás megkerülése. A megjegyzések tartalmazhatják az orvos/beteg nevét; távolítsa el.
- Csak a negatívra koncentrálva. A pozitív témák azt is jelzik, hogy mit fog megvédeni.
- Félreértés a döntéshez. A fejlesztés döntése és prioritása a vezetőé.
Tipp: Minden elemzés végén olvasson el 15-20 véletlenszerű nyers megjegyzést, és hasonlítsa össze őket az AI címkéjével. Ez a 10 perces „kalibrációs” szokás megragadja az irónia és a tagadás csapdáit, és megtanítja, hogy mennyire bízz az AI-rövidítésben.
Összefoglalva
A betegelégedettségi adatok pontszámok és szabad szövegek formájában is megjelennek, és az AI nagyon hatékonyan képes több száz megjegyzést témákra bontani és összefoglalni. De az automatikus érzelemcímke az irónia és a tagadás oldalára téved; A felmérési mintavétel gyakran elfogult. Ezért az AI-kimenet nem általánosítható nyers értelmezésekkel és mintamérettel történő ellenőrzés nélkül. Az anonimitás megmarad, a betekintés előkészítve; De a döntés és a fejlesztés prioritása mindig a menedzseré.
Pályázati feladat
Szerezzen be egy névtelen megjegyzéskészletet (20-30 megjegyzés, valós vagy feltételezett). Kérjen témát és hangot az AI-tól a „Téma következtetés” és „Érzelem + érvényesítési figyelmeztetés” sablonokkal. Ezután olvasson el legalább 10 nyers megjegyzést, és hasonlítsa össze őket az AI címkéjével; Írd le 5 tételben, hogy közülük hányban találsz hibát az irónia/negáció és a minta reprezentativitása miatt!
ellenőrző lista
- [ ] Anonimizáltam a megjegyzéseket (nincs beteg/orvos neve)?
- [ ] Kalibráltam a hangulatcímkét nyers megjegyzésekkel?
- [ ] Figyelembe vettem a minta méretét és a torzítást?
- [ ] Kerestem pozitív és negatív témákat is?
- [ ] A fejlesztési döntést és az elsőbbséget a vezetőre bíztam?