Печалби:
- Възможност за дефиниране на показатели за качество и ефективност (SKS, клинично качество, безопасност на пациента) и проектиране на смислено табло за управление с поддръжка на изкуствен интелект
- Възможност за използване на AI за създаване на интерпретация на индикатори, обяснение на отклонението и проект на резюме
- Разбиране, че е отговорност на мениджъра да провери качеството на данните и причинно-следствената връзка зад индикатора и да разпознае риска от игра.
„Не можеш да управляваш това, което не можеш да измериш“ е почти закон в управлението на здравеопазването. Но измерването в здравеопазването има и тъмна страна: ако измервате грешен показател, възнаграждавате грешното поведение и подкопавате безопасността на пациентите. В този модул ще научим как да дефинираме KPI (ключови показатели за ефективност), да ги събираме на табло за управление (табло за управление) и да използваме изкуствен интелект, за да интерпретираме тези показатели. Ограничението е ясно от самото начало: AI изчислява индикатора и създава чернова за тълкуване; Но мениджърът трябва да провери точността на данните, причинно-следствената връзка и риска от игра.
Какъв би бил добър показател?
Класическата рамка за измерване на качеството в здравеопазването разделя индикаторите на три вида. Индикаторът за структура измерва ресурси и инфраструктура (като брой медицински сестри на легло). Индикатор за процес измерва как се извършва работата (като скоростта, с която антибиотичната профилактика се прилага навреме). Индикаторът за резултат измерва какво се случва с пациента (като процент на инфекция, смъртност). Името на рамката за качество в Турция е SKS (здравни стандарти за качество) и определя много задължителни показатели. Важно е тези три типа да се проследяват заедно: ако просто погледнете структурата, тя казва „имаме достатъчно ресурси“, но не означава, че работата се върши добре; Ако просто погледнете процеса, той казва „спазихме правилата“, но това не доказва, че е добро за пациента. Истинската картина на качеството се появява, когато и трите се четат заедно.
Добрият KPI има няколко качества: той е ясно дефиниран (всеки измерва едно и също нещо), измерим, значим за организацията, навременен и труден за манипулиране. Най-голямата опасност е последната. Когато даден индикатор е обвързан с цел, хората понякога намират начин да подобрят индикатора, а не действителното представяне. Това се нарича целево отклоняване или игра; Той е обобщен от известния закон на Гудхарт: „Когато един критерий стане цел, той престава да бъде добър критерий“. Например: когато индикаторът „време за спешно изчакване“ създава натиск, пациентите могат да бъдат поддържани в състояние „записът е отворен, но не се вижда“ и индикаторът може да бъде направен изкуствено добър.
За да се разчете правилно един индикатор, е необходимо да се потърсят заедно отговорите на три въпроса. Първо, откъде идват данните: дали индикаторът се изчислява ръчно или автоматично; Достоверен ли е източникът? Каква е вероятността за липсваща/неправилна регистрация при влизане? Второ, промени ли се дефиницията: ако „времето на изчакване“ се измерва от регистрацията до прегледа миналия месец и от триажа до прегледа този месец, двете числа не са сравними. Трето, с кой индикатор се е преместил: число, което се подобрява самостоятелно, може да е нарушило индикатора за баланс до него. Вземането на решение чрез разглеждане на индикатор, без да се задават тези три въпроса, е като гледане на една рентгенова снимка и лечение на пациент; Изображение без контекст е подвеждащо. Изкуственият интелект не може да зададе тези три въпроса вместо вас; Защото само мениджърът, който познава организацията, знае откъде идват данните, кога се е променила дефиницията и истината на място. Работата на AI е да изчисли индикатора и да изброи възможните обяснения; От вас зависи да проверите кое от тези твърдения е вярно.
Стъпка по стъпка: табло за управление и коментар с AI
- Изберете индикатори. Спазвайте баланса структура/процес/резултат; Не забравяйте да включите индикатори за безопасност на пациента.
- Изяснете дефинициите. Числителят/знаменателят, източникът и периодът на всеки индикатор трябва да бъдат написани.
- Дайте данни анонимно. Само цифри; Няма идентификация на пациента.
- Поискайте чернова на коментар от AI. Обобщете отклоненията, тенденциите и възможните обяснения.
- Причинно-следствена връзка и контрол на данните. За всяко „подобрение/влошаване“: промени ли се качеството на данните, промени ли се дефиницията, реално ли е или е игра?
- Прочетете със свързани индикатори. Един индикатор никога не се оценява изолирано; Разглежда се с двойки (като LOS–реадмисия, чакане–игра).
Внимание: AI може механично да маркира внезапна промяна в индикатор като „добра“ или „лоша“. Понякога внезапният спад не е подобрение, а прекратяване на въвеждането на данни или промяна в дефиницията. Ваша работа е да проверите причинно-следствената връзка на коментара.
три мини калъфа
Случай 1 — Ускоряване на резюмето. Всеки месец служител по качеството интерпретира ръчно 18 индикатора и написва резюме от 4 страници; Това отне 3 часа. Anonymous предаде таблото за управление (само числа) на AI и поиска чернова на резюме. AI извлечени отклонения и възможни обяснения; пазачът сравняваше всяко число с неговия клипборд, коригираше две погрешни заключения и преработваше причинно-следствените изречения. Продължителността намаля от 3 часа на 45 минути; Не качественото натоварване, а предварителната AI подготовка се съкрати.
Случай 2 — Фалшиво възстановяване. На един билборд „средното време за чакане при спешни случаи“ е спаднало от 48 минути на 22 за един месец. AI изтълкува това като „значително подобрение“. Мениджърът стана подозрителен и проучи първопричината: регистрационната система беше актуализирана този месец и „началният час на изпита“ беше дефиниран по различен начин. Така че истинската хватка не беше паднала; само измерването се беше променило. Течното тълкуване на AI беше подвеждащо; Контролът на данните на администратора хвана капана.
Случай 3 — Хващане на игри. В една болница „процентът на записани прегледи в извънболнична клиника в рамките на 30 дни“ беше определен като цел и бързо се увеличи до 98 процента. Екипът по качеството поиска от AI да кръстоса този индикатор със свързаните индикатори (честота на регистрация, удовлетвореност на пациентите). Оказа се, че има уговорки, но повечето от тях не са посетени; Показателят е добър, реалната ситуация не се е променила. Индикаторът беше предефиниран като „действителен контрол“, а не като „предаден“.
Четири копируеми шаблона
1) Проект на коментар на индикатора:
Вашата роля: асистент на мениджъра по качеството. По-долу е анонимното месечно табло (само с числа): име на индикатора, този месец, миналия месец, цел. Задача: посочете отклонението от целта и миналия месец във всеки индикатор, маркирайте 3-те най-забележими отклонения и предложете ВЪЗМОЖНИ обяснения. Представете обясненията като абсолютен факт; Напишете го като хипотеза.
2) Причинно-следствена връзка/заявка за данни:
„Времето за незабавно изчакване“ спадна от 48 на 22 минути този месец. Избройте възможните причини за този спад под три заглавия: (1) действително подобрение, (2) промяна на данните/измерването, (3) изкривяване на целта (игра). Кажете ми как да проверя за всеки един. НЕ РЕШЕТЕ кой; показва контролния път.
3) Свързана двойка индикатори:
За всеки основен индикатор на таблото ми предложете „индикатор за баланс/двойка“, което прави интерпретирането му само по себе си опасно (напр. обратно приемане за LOS). Обяснете с едно изречение защо трябва да се четат заедно. Дайте го в таблица.
4) Резюме на борда:
Направете резюме от 1 страница за дъската от следните анонимни индикаторни данни: 3 добри новини, 3 области на внимание, 3 предложения за действие. Използвайте ясен, управленски език. Маркирайте източника на всеки номер като [ПОТВЪРЖДАВАНЕ], за да мога да го потвърдя.
Слаба подкана / Силна подкана
Слаба подкана:
Интерпретирайте нашите индикатори, кажете ни дали са добри или лоши.
Няма определение, няма цел, няма контекст; AI създава механични и подвеждащи етикети.
Мощна подкана:
По-долу е диаграмата на анонимния индикатор (този месец/миналия месец/цел). Интерпретирайте всяко отклонение спрямо целта, но преди да кажете „добро/лошо“, споменете и възможна промяна на данни/дефиниция и възможност за игра. Прочетете LOS, прочетете времето за изчакване с индикатора за игри. Не правете окончателни преценки; Маркирайте точките за проверка.
Тип индикатор
пример
Риск от самотен коментар
структура
Съотношение медицинска сестра/легло
Не гарантира качество
Процес
Норма по време на профилактика
Не показва резултат
Заключение
процент на инфекция
Летлив в малка проба
ефективност
време на изчакване
Отворено за игри
Често срещани грешки
- Гледайки един индикатор. Всеки основен индикатор трябва да се чете с индикатор за баланс.
- Незабавно разглеждане на внезапната промяна като добро/лошо. Възможно е да има промени в данните или дефиницията.
- Игнориране на игрите. Индикаторът, зависим от целта, може да бъде манипулиран.
- Грешка в интерпретацията на AI за причинно-следствена връзка. AI вижда връзката, а не причината.
- Без да поставя под въпрос качеството на данните. Добрите индикатори не могат да дойдат от лоши данни.
Съвет: Добавете малък „индикатор за баланс“ към таблото си за управление до всеки основен индикатор и винаги изисквайте коментара на AI с тази двойка. Число, което блести само, често крие мрачната си двойка.
В обобщение
Индикаторите за качество измерват здравето на организацията, но грешното измерване поражда грешно поведение. AI е мощна помощ при изчисляване на индикатори, обобщаване на отклонения и изготвяне на проект на резюме за управление. Но AI вижда връзки, не може да установи причинно-следствена връзка; Внезапната промяна може да бъде промяна на данни/дефиниция или игра. Прочетете всеки индикатор с двойка баланс, потърсете качеството на данните, проверете причинно-следствената връзка. Окончателното одобрение на коментара и решението е на администратора.
Задача за приложение
Вземете 5-6 анонимни индикатора (този месец/миналия месец/цел) от вашата организация. Поискайте коментари от AI с шаблона „Чернова на коментар на индикатора“. Изберете индикатора, който се променя най-много и извлечете три възможни обяснения (факт/данни/игра) с шаблона „Причинно-следствена връзка/заявка за данни“ и запишете как бихте проверили всяко в 5 точки.
контролен списък
- [ ] Изясних ли определението за индикатори (числител/знаменател/източник)?
- [ ] Предоставих ли данни анонимно?
- [ ] Да чета ли всеки основен индикатор с балансовата двойка?
- [ ] Проверил ли съм възможността за данни/дефиниция/игра в случай на внезапни промени?
- [ ] Аз, като администратор, одобрих ли окончателния коментар и решение?