Vienība 6 / 11

Kvalitātes rādītāji un veiktspējas uzraudzība: KPI un informācijas paneļi

Ieguvumi:

  • Spēja definēt kvalitātes un veiktspējas rādītājus (SKS, klīniskā kvalitāte, pacientu drošība) un izveidot jēgpilnu informācijas paneli ar mākslīgā intelekta atbalstu
  • Spēja izmantot AI, lai sagatavotu indikatoru interpretāciju, dispersijas skaidrojumu un kopsavilkuma projektu
  • Izpratne par to, ka pārvaldnieka pienākums ir pārbaudīt datu kvalitāti un cēloņsakarību, kas ir aiz rādītāja, un apzināties azartspēļu risku.

"Jūs nevarat pārvaldīt to, ko nevarat izmērīt" ir gandrīz likums veselības aprūpes pārvaldībā. Taču mērījumiem veselības aprūpē ir arī ēnas puse: ja mēra nepareizu indikatoru, jūs atalgojat nepareizu uzvedību un apdraudat pacientu drošību. Šajā nodaļā mēs iemācīsimies definēt KPI (Key Performance Indicators), apkopot tos informācijas panelī (dashboard) un izmantot mākslīgo intelektu, lai interpretētu šos rādītājus. Ierobežojums ir skaidrs jau no paša sākuma: AI aprēķina rādītāju un sagatavo interpretācijas melnrakstu; Taču datu pareizības, cēloņsakarības un azartspēļu riska pārbaude ir pārvaldnieka ziņā.

Kāds būtu labs rādītājs?

Klasiskā veselības kvalitātes mērīšanas sistēma iedala rādītājus trīs veidos. Struktūras rādītājs mēra resursus un infrastruktūru (piemēram, māsu skaitu vienā gultā). Procesa indikators mēra, kā tiek veikts darbs (piemēram, cik ātri tiek veikta antibiotiku profilakse). Iznākuma rādītājs mēra, kas notiek ar pacientu (piemēram, infekcijas biežums, mirstība). Kvalitātes ietvarstruktūras nosaukums Türkiye ir SKS (Veselības kvalitātes standarti), un tas nosaka daudzus obligātos rādītājus. Ir svarīgi izsekot šiem trim veidiem kopā: ja paskatās tikai uz struktūru, tas saka "mums ir pietiekami daudz resursu", bet tas nenozīmē, ka darbs tiek veikts labi; Ja paskatās tikai uz procesu, tur ir rakstīts "mēs ievērojām noteikumus", bet tas nepierāda, ka tas ir labs pacientam. Īstā kvalitātes aina parādās, kad visas trīs tiek lasītas kopā.

Labam KPI ir vairākas īpašības: tas ir skaidri definēts (visi mēra vienu un to pašu), izmērāms, organizācijai nozīmīgs, savlaicīgs un grūti manipulējams. Lielākās briesmas ir pēdējās. Ja rādītājs ir piesaistīts mērķim, cilvēki dažreiz atrod veidu, kā uzlabot rādītāju, nevis faktisko veiktspēju. To sauc par mērķa novirzīšanu vai spēlēšanu; To apkopo slavenais Gudhārta likums: "Kad kritērijs kļūst par mērķi, tas pārstāj būt labs kritērijs." Piemēram: ja indikators "steidzams gaidīšanas laiks" rada spiedienu, pacientus var saglabāt statusā "ieraksts atvērts, bet nav redzēts" un indikatoru var padarīt mākslīgi labu.

Lai pareizi nolasītu indikatoru, ir nepieciešams kopīgi meklēt atbildes uz trim jautājumiem. Pirmkārt, no kurienes tiek iegūti dati: vai indikators tiek aprēķināts manuāli vai automātiski; Vai avots ir uzticams? Kāda ir iespējamība, ka pieteikšanās laikā netiks reģistrēta/nepareiza reģistrācija? Otrkārt, vai definīcija ir mainījusies: ja “gaidīšanas laiks” tiek mērīts no reģistrācijas līdz pārbaudei pagājušajā mēnesī un no šķirošanas līdz pārbaudei šajā mēnesī, šie divi skaitļi nav salīdzināmi. Treškārt, ar kuru indikatoru tas pārvietojās: skaitlis, kas uzlabojas viens pats, iespējams, izjaucis līdzsvara indikatoru blakus tam. Pieņemt lēmumu, aplūkojot indikatoru, neuzdodot šos trīs jautājumus, ir tas pats, kas aplūkot vienu rentgena attēlu un ārstēt pacientu; Attēls bez konteksta ir maldinošs. Mākslīgais intelekts nevar uzdot šos trīs jautājumus jūsu vietā; Jo tikai vadītājs, kurš pazīst organizāciju, zina, no kurienes nāk dati, kad mainījās definīcija un patiesība uz vietas. AI uzdevums ir aprēķināt indikatoru un uzskaitīt iespējamos skaidrojumus; Jums ir jāpārbauda, ​​kurš no šiem apgalvojumiem ir patiess.

Soli pa solim: informācijas panelis un komentāri ar AI

  1. Izvēlieties indikatorus. Ievērojiet struktūras/procesa/rezultāta līdzsvaru; Noteikti iekļaujiet pacientu drošības rādītājus.
  2. Precizējiet definīcijas. Jāraksta katra rādītāja skaitītājs/saucējs, avots un periods.
  3. Sniedziet datus anonīmi. Tikai cipari; Nav pacienta ID.
  4. Pieprasīt komentāra melnrakstu no AI. Apkopojiet novirzes, tendences un iespējamos skaidrojumus.
  5. Cēloņsakarība un datu kontrole. Par katru "uzlabojumu/pasliktināšanos": vai datu kvalitāte ir mainījusies, vai definīcija ir mainījusies, vai tā ir reāla vai tā ir spēle?
  6. Lasiet ar saistītajiem rādītājiem. Rādītājs nekad netiek novērtēts atsevišķi; Tas tiek apskatīts ar pāriem (piemēram, LOS–atpakaļpieņemšana, gaidīšana–spēles).
Uzmanību: AI var mehāniski atzīmēt pēkšņas indikatora izmaiņas kā "labu" vai "sliktu". Dažreiz pēkšņs kritums nav uzlabojums, bet gan datu ievades pārtraukšana vai definīcijas maiņa. Jūsu pienākums ir pārbaudīt komentāra cēloņsakarību.

trīs mini futrāļi

1. gadījums — kopsavilkuma paātrināšana. Katru mēnesi kvalitātes darbinieks manuāli interpretēja 18 rādītājus un uzrakstīja 4 lappušu kopsavilkumu; Tas aizņēma 3 stundas. Anonīms nodeva informācijas paneli (tikai skaitļus) AI un lūdza kopsavilkuma projektu. AI iegūtās novirzes un iespējamie skaidrojumi; glabātājs salīdzināja katru numuru ar savu starpliktuvi, izlaboja divus kļūdainus secinājumus un pārstrādāja cēloņsakarības teikumus. Ilgums samazinājās no 3 stundām līdz 45 minūtēm; Tā nav kvalitatīva darba slodze, bet gan sagatavošana pirms AI ir saīsinājusies.

2. gadījums — viltus atgūšana. Uz viena stenda "steidzams vidējais gaidīšanas laiks" samazinājās no 48 minūtēm līdz 22 vienā mēnesī. AI to interpretēja kā "ievērojamu uzlabojumu". Vadītāja kļuva aizdomīga un noskaidroja galveno cēloni: tajā mēnesī tika atjaunināta reģistrācijas sistēma, un "eksāmenu sākuma laiks" tika noteikts citādi. Tātad īstā saķere nebija kritusies; mainījās tikai mērījums. AI plūstošā interpretācija bija maldinoša; Administratora datu kontrole pieķēra lamatas.

3. gadījums — spēļu uztveršana. Vienā slimnīcā par mērķi tika noteikts "ambulatorās klīnikas pārbaudes apmeklējumu skaits 30 dienu laikā", un tas ātri tika palielināts līdz 98 procentiem. Kvalitātes komanda lūdza AI savstarpēji nolasīt šo rādītāju ar saistītajiem rādītājiem (reģistrēšanās biežums, pacientu apmierinātība). Izrādījās, ka tikšanās tika veiktas, bet lielākā daļa netika apmeklēta; Rādītājs labs, faktiskā situācija nav mainījusies. Indikators tika atkārtoti definēts kā "faktiskā kontrole", nevis "dots".

Četras kopējamas veidnes

1) Indikatora komentāra melnraksts:

Jūsu loma: kvalitātes vadītāja palīgs.Zemāk ir anonīms ikmēneša informācijas panelis (tikai cipari):rādītāja nosaukums, šis mēnesis, pagājušais mēnesis, mērķis.Uzdevums: katrā rādītājā norādiet novirzi no mērķa un pagājušo mēnesi, atzīmējiet 3 ievērojamākās novirzes un iesakiet IESPĒJAMOS skaidrojumus.Paskaidrojumus sniedziet kā absolūtu faktu; Uzrakstiet to kā hipotēzi.

2) Cēloņsakarības/datu vaicājums:

"Tūlītējais gaidīšanas laiks" šomēnes samazinājās no 48 līdz 22 minūtēm. Uzskaitiet iespējamos šī krituma iemeslus trīs sadaļās: (1) faktiskais uzlabojums, (2) datu/mērījumu izmaiņas, (3) mērķa izkropļojumi (spēles). Pastāstiet man, kā pārbaudīt katru no tiem. NEIZŅEMIET, kurš no tiem; parādīt kontroles ceļu.

3) saistītais indikatoru pāris:

Katram galvenajam rādītājam manā informācijas panelī iesakiet “līdzsvara/pāra indikatoru”, kas padara tā interpretāciju bīstamu (piemēram, atpakaļuzņemšana LOS). Vienā teikumā paskaidrojiet, kāpēc tie jālasa kopā. Norādiet to tabulā.

4) Valdes kopsavilkums:

Izveidojiet 1 lappuses kopsavilkumu dēlim no šādiem anonīmiem indikatoru datiem: 3 labas ziņas, 3 uzmanības jomas, 3 rīcības ieteikumi. Izmantojiet vienkāršu, vadības valodu. Atzīmējiet katra numura avotu kā [VERIFY], lai es varētu to apstiprināt.

Vāja uzvedne / spēcīga uzvedne

Vāja uzvedne:

Interpretējiet mūsu rādītājus, pastāstiet mums, vai tie ir labi vai slikti.

Nav definīcijas, nav mērķa, nav konteksta; AI ražo mehāniskas un maldinošas etiķetes.

Spēcīga uzvedne:

Zemāk ir anonīma indikatoru diagramma (šomēnes/pagājušajā mēnesī/mērķis). Interpretējiet katru novirzi attiecībā pret mērķi, bet pirms sakāt "labi/slikti", norādiet arī iespējamās datu/definīcijas izmaiņas un spēles iespēju. Izlasiet LOS, izlasiet gaidīšanas laiku ar spēļu indikatoru. Nepieņemiet galīgos spriedumus; Atzīmējiet punktus, kas jāpārbauda.

Indikatora veids

piemērs

Vientuļa komentāra risks

struktūra

Medmāsas/gultas attiecība

Negarantē kvalitāti

Process

Biežums profilakses laikā

Neuzrāda rezultātu

Secinājums

infekcijas biežums

Gaistošs mazā paraugā

efektivitāti

gaidīšanas laiks

Atvērts spēlēm

Biežas kļūdas

  • Skatoties uz vienu rādītāju. Katrs galvenais rādītājs jālasa ar līdzsvara indikatoru.
  • Uzreiz uzskatot pēkšņas pārmaiņas par labu/sliktu. Var būt datu vai definīcijas izmaiņas.
  • Spēļu ignorēšana. Ar no mērķa atkarīgo indikatoru var manipulēt.
  • AI interpretācijas maldināšana ar cēloņsakarību. AI redz attiecības, nevis cēloni.
  • Neapšaubot datu kvalitāti. Labus rādītājus nevar iegūt no sliktiem datiem.
Padoms. Pievienojiet nelielu “līdzsvara indikatoru” savā informācijas panelī blakus katram galvenajam indikatoram un vienmēr pieprasiet AI komentāru ar šo pāri. Skaitlis, kas spīd viens, bieži slēpj savu blāvo pāri.

Rezumējot

Kvalitātes rādītāji mēra organizācijas veselību, bet nepareizi mērījumi rada nepareizu uzvedību. AI ir spēcīgs palīglīdzeklis rādītāju aprēķināšanā, dispersiju apkopošanā un vadības kopsavilkuma uzmetuma sagatavošanā. Bet AI redz attiecības, tas nevar noteikt cēloņsakarību; Pēkšņas izmaiņas var būt datu/definīcijas izmaiņas vai spēles. Izlasiet katru rādītāju ar bilances pāri, vaicājiet datu kvalitāti, pārbaudiet cēloņsakarību. Komentāra un lēmuma galīgais apstiprinājums ir administratoram.

Lietojumprogrammas uzdevums

Saņemiet 5–6 anonīmus rādītājus (šomēnes/pagājušajā mēnesī/mērķis) no savas organizācijas. Pieprasiet komentārus no AI, izmantojot veidni “Indicator comment draft”. Atlasiet indikatoru, kas maina visvairāk, un izvelciet trīs iespējamos skaidrojumus (fakts/dati/spēles), izmantojot veidni "Cēloņsakarība/datu vaicājums", un pierakstiet, kā jūs pārbaudītu katru 5 punktos.

kontrolsaraksts

  • [ ] Vai esmu precizējis rādītāju definīciju (skaitītājs/saucējs/avots)?
  • [ ] Vai es sniedzu datus anonīmi?
  • [ ] Vai es nolasu katru galveno rādītāju ar bilances pāri?
  • [ ] Vai esmu pārbaudījis datu/definīcijas/spēles iespēju pēkšņu izmaiņu gadījumā?
  • [ ] Vai es kā administrators apstiprināju gala komentāru un lēmumu?