Yksikkö 7 / 11

Potilastyytyväisyyden ja palautteen analyysi: Kysely ja tekstinlouhinta

Voitot:

  • Kyky jakaa potilastyytyväisyystutkimukset ja vapaan tekstipalautteen teemoiksi ja tehdä tunneanalyysiä tekoälyn tuella
  • Kyky tuottaa käytännöllisiä oivalluksia ja parannusluonnoksia valitus- ja ehdotusteksteistä
  • Kyky havaita sudenkuopat, kuten näytteenoton harha, automaattinen tunnetunnistevirhe ja yksityisyyden suoja ennen tulkintaa

Potilaat eivät tule vain paranemaan; He myös kokevat ja muistavat, miten heitä kohdeltiin, kuinka kauan he odottivat ja kenelle he voivat kertoa ongelmistaan. Potilastyytyväisyys on sekä eettinen vastuu että suoritusulottuvuus, joka vaikuttaa laitoksen maineeseen ja joissain tapauksissa sen korvaamiseen. Mutta tyytyväisyystiedot ovat usein kahdessa muodossa: tähdillä/arvosteluilla mitatut kyselyt ja vapaamuotoiset arvostelut. Kestää aikaa lukea satoja ilmaisia ​​kommentteja yksitellen. Tässä tekoälyllä on voimaa: se erottaa satoja tekstejä teemoiksi, poimii tunnesävyä ja tiivistää näkyvät valitukset ja ylistykset. Tässä osiossa näemme, miten tämä tehdään, mutta mikä vielä tärkeämpää, kuinka vältetään väärintulkinta. Raja: AI tekee yhteenvedon tekstistä ja poimii teemoja; mutta automaattinen tunnetunniste voi olla erehtyvä, näyte voi olla puolueellinen — yleistäminen ja päätöksenteko kuuluu johtajalle.

Tekstin louhinnan peruskäsitteet

Muutama termi: Tekstin louhinta on prosessi, jossa kirjoitetuista teksteistä poimitaan automaattisesti kuvioita ja merkityksiä. Tunneanalyysi on tekstin positiivisen/negatiivisen/neutraalin sävyn automaattinen luokittelu. Teeman/aiheen poimiminen on useiden kommenttien ryhmittely yhteisiksi aiheiksi (puhtaus, odotus, viestintä, hinta). NPS (Net Promoter Score) on uskollisuusindikaattori, joka perustuu kysymykseen "Suosittelisitko meitä?" On hyödyllistä ajatella tyytyväisyystietoja kahdessa erillisessä ulottuvuudessa: määrällinen ulottuvuus (luokitukset, NPS) antaa sinulle vastauksen "kuinka paljon" -kysymykseen; Laadullinen ulottuvuus (ilmaiset kommentit) sisältää vastauksen kysymykseen "miksi". Molemmat olisivat epätäydellisiä erikseen; Kun luet yhdessä, näet sekä ongelman suuruuden että sen lähteen.

Näillä ajoneuvoilla on voimakas mutta vaarallinen puoli. Tunneanalyysi törmää kielen hienouksiin. Lause "Hienoa, odotin taas 3 tuntia" saattaa vaikuttaa positiiviselta sanasta sanaan katsottuna, koska se sisältää sanan "hieno"; Se on kuitenkin ironista. "Se ei ollut huono" sisältää negatiivisen sanan. Turkin kielen jälkiliitteet ja idiomit tekevät tästä vielä vaikeampaa. Toinen vaara on otantaharha: kyselyyn yleensä osallistuvat ihmiset, jotka ovat joko erittäin tyytyväisiä tai erittäin vihaisia; Keskellä oleva hiljainen enemmistö on näkymätön. Siksi tekoälyn piirtämä kuva on "tekijöiden", ei "kaikkien potilaiden" mielipide.

Näiden työkalujen todellinen arvo ei ole lukumäärässä, vaan suunnassa. Tähtiluokitus kertoo "tyytyväisyys 3,8", mutta ei kerro, mitä pitäisi korjata. ilmainen teksti kertoo tarkalleen, mikä sinua vaivaa. Tekoälyn tehtävänä on tislata tämä raaka kertomus hallittavissa oleviksi otsikoiksi: Et voi lukea 600 kommenttia, mutta voit muuttaa lauseen "30 prosenttia kommenteista mainitsee reitityksen hämmennyksen" toiminnaksi. Mutta tämä vähennys sisältää myös menetyksiä: silmiinpistävä, ainutlaatuinen mutta tärkeä turvallisuusvaroitus yhdeltä potilaalta saattaa kadota "pieneen 2 prosentin teemaan". Siksi määrällisen yhteenvedon lisäksi on tarpeen seuloa lisäksi yksittäisiä kommentteja, jotka viittaavat turvallisuuteen tai vakaviin valituksiin; Numero näyttää kokonaiskuvan ja yksittäinen kommentti kriittisen poikkeuksen.

Askel askeleelta: Palauteanalyysi tekoälyllä

  1. Anonymisoi. Poista kommenteista tunnisteet, kuten nimi, lääkärin nimi, huoneen numero.
  2. Jaa se teeman mukaan. Pyydä tekoälyä ryhmittelemään kommentit yleisiin aiheisiin; Päätät nimikkeiden lukumäärän.
  3. Poista tunnesävy, mutta varmista se. Hanki positiivinen/negatiivinen prosentti jokaiselle teemalle; Lue sitten esimerkkikommentit itse.
  4. Katsaus toimintaan. Valitse yleisin ja polttavin teema; Konkreettinen parannusehdotus on laadittu.
  5. Näyteohjaus. Kuinka moni kirjoitti sen, kuka sen kirjoitti, onko se edustava? Tee yleistys tämän rajan mukaan.
  6. Johdon päätös. Parannuspäätös ja priorisointi kuuluu esimiehelle; AI vain valmistelee oivalluksia.
Varoitus: Tekoälyn antama luku, kuten "78 prosenttia positiivinen", on voinut ymmärtää ironian ja kielteen väärin. Muista lukea itse muutama raaka-arvostelu jokaisesta teemasta ja tarkistaa, vastaako tunniste todellisuutta.

kolme minilaukkua

Tapaus 1 – Piilotettu teema. Yksi sairaala keräsi 640 ilmaista kommenttia kuukaudessa; kukaan ei jaksanut lukea kaikkea. Potilasoikeusyksikkö antoi nimettömät kommentit YZ:lle ja osoitti ne teemaan. Suurin negatiivinen teema ei ollut "odotusaika" kuten odotettiin, vaan "reitityshäiriö" (potilaat eivät päässeet mihin kerrokseen mennä). Yksinkertaisella opaste- ja opastushenkilöstöjärjestelyllä tämä teema väheni merkittävästi kahdessa kuukaudessa. AI teki piilotetun teeman näkyväksi; Ratkaisu kuului tiimille.

Tapaus 2 – Ironinen ansa. Yksi yksikkö oli tyytyväinen tekoälyn "82 prosenttia positiiviseen" yhteenvetoon ja kertoi johdolle, että "tyytyväisyys on korkea". Laatuvastaava luki esimerkkikommentteja: Ironisia lauseita, kuten "Hienoa, pääsin sisään 2 tuntia tapaamisajan jälkeen", pidettiin positiivisina. Todellinen positiivinen korko oli alhaisempi. Käsittelijä kalibroi tekoälytunnisteen lukemalla käsin useita kymmeniä kommentteja ja korjasi esityksen.

Tapaus 3 – Otantaharha. Yhdellä poliklinikalla verkkokyselyyn vastasi vain 45 henkilöä, ja useimmat olivat erittäin kielteisiä. Yksi johtaja panikoi, että "poliklinikka on mennyt konkurssiin". Analyytikko muistutti, että nämä 45 ihmistä olivat pieni ja puolueellinen osa tuon kuukauden 3 200 potilaasta ja että vihaiset ihmiset vastasivat enemmän kyselyyn. Paniikkien sijaan käynnistettiin edustava poistumiskysely; Todellinen kuva oli paljon tasapainoisempi.

Neljä kopioitavaa mallia

1) Teeman poiminta:

Tehtäväsi: potilaskokemusanalyytikon avustaja. Alla on anonyymejä freelance-potilaiden kommentteja (ei nimeä/lääkärin nimeä). Tehtävä: Jaa kommentit 6-8 yhteiseen teemaan (esim. odotus, viestintä, siivous, ohje, maksu). Kerro kuinka monta kommenttia sinulla oli kustakin teemasta ja anna 2 esimerkkilainausta. Älä keksi kommentteja; Käytä vain sitä, mitä annan sinulle.

2) Tunne + vahvistushälytys:

Vähennä kunkin teeman positiivinen/negatiivinen/neutraali suhde. MUTTA huomauta, että ironia, kieltäminen ja sarkastiset ilmaisut voivat johtaa tunnetunnisteeseen harhaan, ja luettele ne 5 kommenttia, joista et ole varma, erikseen "manuaalisesti tarkistetuiksi". Esitetään tarkana prosentteina; anna n.

3) Toimintakeskeinen näkemys:

Valitse yleisin ja negatiivisin teema. Tätä teemaa varten: hahmotelma mahdollisesta perimmäisestä syystä, 3 parannusta, jotka voidaan toteuttaa lyhyellä aikavälillä, ja kunkin arvioitu vaikutus/kustannus. Ilmoita, että tämä on ehdotus ja päätös on johtajan tehtävä.

4) Esimerkki valvontahuomautus:

Tässä analyysissä vasteiden kokonaismäärä [N] on potilaiden lukumäärä kyseisenä ajanjaksona [M]. Kirjoita minulle varoitus otoksen edustavuudesta: jos vastausprosentti on alhainen tai vihaiset potilaat ovat yliedustettuja, selitä tulosten yleistämisen riskit 4 pisteellä.

Heikko kehote / Vahva kehote

Heikko kehote:

Kerro minulle, ovatko nämä kommentit hyviä vai huonoja, kuinka monta prosenttia on tyytyväisiä.

Ei teemoja, ei vahvistusta, ei näytevaroituksia; Se palauttaa yhden harhaanjohtavan prosenttiosuuden.

Tehokas kehotus:

Alla [N] nimetöntä potilaskommenttia, potilaiden lukumäärä tuolloin [M]. Erottele kommentit teeman mukaan, anna kullekin teemalle likimääräinen tunnesävy, mutta merkitse, jos ne ovat epävarmoja ironian/kielteisen vuoksi. Laadi parannusehdotus polttavimpaan teemaan ja lisää siihen varoitus otoksen edustavuudesta.

askel

Tekoälyn panos

ihmisen hallinta

Teeman erottelu

Ryhmittelee satoja kommentteja

Ovatko otsikot merkityksellisiä?

tunnemerkki

Tuottaa nopean sävyn

Ironian/negaation hallinta

näkemys

Parannusluonnos

Soveltuvuus, hinta

yleistäminen

Tarjoaa yhteenvedon

Onko näyte edustava?

Yleisiä virheitä

  • Hyväksymällä tunnetunnisteen sellaisena kuin se on. Ironia ja kieltäminen ovat harhaanjohtavia; Lue esimerkit.
  • Yleistys pienestä / puolueellisesta otoksesta. 45 vihaista kommenttia eivät edusta kaikkia potilaita.
  • Anonymisoinnin ohittaminen. Kommentit voivat sisältää lääkärin/potilaan nimen; poista se.
  • Keskity vain negatiiviseen. Positiiviset teemat osoittavat myös, mitä suojaat.
  • Virheellinen näkemys päätökseksi. Päätös ja parantamisen tärkeys kuuluu esimiehelle.
Vinkki: Lue jokaisen analyysin lopussa itse 15-20 satunnaista raakakommenttia ja vertaa niitä tekoälyn tunnisteeseen. Tämä 10 minuutin "kalibrointi" -tapa vangitsee ironian ja negatiivisuuden ansoja ja opettaa kuinka paljon luottaa tekoälyyn.

Yhteenvetona

Potilastyytyväisyystiedot tulevat sekä arvosanana että vapaana tekstinä, ja tekoäly on erittäin tehokas jakaa satoja kommentteja teemoiksi ja tiivistää niistä. Mutta automaattinen tunteiden otsikko erehtyy ironian ja negation puolelle; Kyselyn otanta on usein puolueellinen. Siksi AI-tulostusta ei voida yleistää ilman tarkastamista raakatulkinnoilla ja otoskoon avulla. Nimettömyys säilyy, näkemys valmistetaan; Päätös ja parantamisen prioriteetti kuuluu kuitenkin aina johtajalle.

Sovellustehtävä

Hanki anonyymi kommenttijoukko (20–30 kommenttia, todellista tai hypoteettista). Pyydä tekoälyltä teemaa ja sävyä "Teeman päättely"- ja "Emotion + validation alert" -malleilla. Lue sitten itse vähintään 10 raakakommenttia ja vertaa niitä tekoälyn tunnisteeseen; Kirjoita viiteen kohtaan muistiin, kuinka monessa niistä löydät vikaa ironian/negaation ja otoksen edustavuuden vuoksi.

tarkistuslista

  • [ ] Olenko anonymisoinut kommentit (ei potilaan/lääkärin nimeä)?
  • [ ] Olenko kalibroinut mielipidetunnisteen raakakommenteilla?
  • [ ] Olenko ottanut huomioon otoksen kokoa ja harhaa?
  • [ ] Olenko etsinyt sekä positiivisia että negatiivisia teemoja?
  • [ ] Olenko jättänyt parannuspäätöksen ja prioriteetin esimiehen tehtäväksi?