Единицы
1. Введение в искусственный интеллект в медицинской лаборатории: роли, границы, валидация и этика 2. Поддержка интерпретации результатов и эталонные диапазоны: проверка эскиза AI 3. Контроль качества и дельта-проверка: аналитическое обнаружение ошибок с помощью ИИ 4. Отслеживание и уведомление о панике/критических значениях: процесс, критичный для безопасности 5. Интеграция ЛИС и поток данных: подключение ИИ в нужном месте 6. Автоматизация рабочих процессов: от приемки проб до выдачи результатов 7. Микроскопия и предварительная оценка изображений: мазок, моча и микробиология 8. Преаналитическая фаза и совместимость образцов: гемолиз, липемия, желтуха. 9. Отчетность и коммуникация: четкий результат для врача и пациента 10. Конфиденциальность данных, KVKK, этика и проверка модели 11. Комплексный рабочий процесс, управление качеством и самоаудит
Единица 3 / 11

Контроль качества и дельта-проверка: аналитическое обнаружение ошибок с помощью ИИ

Прибыль:

  • Возможность контролировать внутренний контроль качества, диаграмму Леви-Дженнингса и правила Вестгарда с поддержкой искусственного интеллекта и интерпретировать нарушения.
  • Возможность установить логику дельта-проверки (сравнение с предыдущим результатом того же пациента) и различать предупреждения искусственного интеллекта по преаналитическим и клиническим причинам.
  • Способность понимать, что выходные данные искусственного интеллекта являются статистическим предупреждением и что анализ первопричин и корректирующие действия принадлежат эксперту.

Самая тихая, но самая важная работа в лаборатории — обеспечение точности измерений. Устройство дает вам значение калия; Но откуда вы знаете, что этот прибор делает точные измерения сегодня, в это время, с этим реагентом? Ответом на этот вопрос является контроль качества (QC): измерение контрольных образцов известной ценности через регулярные промежутки времени и мониторинг того, остаются ли результаты работы устройства в ожидаемом диапазоне. Кроме того, дельта-проверка, которая сравнивает результаты того же пациента сегодня с их результатами в прошлом, является мощной второй линией защиты, которая выявляет такие ошибки, как перепутывание образцов. В обеих областях ИИ может быстро сканировать закономерности и генерировать оповещения; Но что означает предупреждение и что делать, зависит от интерпретации эксперта.

В этом блоке используется логика внутреннего контроля качества, диаграмма Леви-Дженнингса и правила Вестгарда; как настраивается и интерпретируется дельта-проверка; и как безопасно добавить искусственный интеллект в эти процессы. Основной принцип: ИИ выдает статистическое оповещение; Анализ первопричин и корректирующие действия принадлежат эксперту.

Логика внутреннего контроля качества

При внутреннем контроле качества контрольный материал с известным содержанием и ожидаемой ценностью (обычно на нормальном и патологическом уровнях) измеряется вместе с пробами пациентов. Каждое контрольное измерение оценивается на основе рассчитанного среднего значения и стандартного отклонения (SD) для этого аналита. Стандартное отклонение — это статистическая мера того, насколько измерения разбросаны вокруг среднего значения; Небольшое стандартное отклонение указывает на то, что измерение является последовательным (точным).

Стандартным способом визуализации этих измерений является диаграмма Леви-Дженнингса: по горизонтальной оси — время (или порядок управления), по вертикальной оси — контрольное значение; Среднее значение отображается посередине, а линии ±1SD, ±2SD, ±3SD изображаются в виде полос. Контрольные точки должны быть случайным образом распределены внутри этих полос. Определенные закономерности (одна точка падает слишком далеко, множество точек смещаются в одном направлении) указывают на проблему.

Правила Вестгарда используются для систематической оценки этих закономерностей. Наиболее часто используются:

правило

Значение

Типичный комментарий

1-2 секунды

Одна точка за пределами ±2SD

Предупреждение; не только отказ

1-3 секунды

Одна точка за пределами ±3SD

Отказ; вероятность случайной ошибки

2-2 секунды

Две последовательные точки в одном направлении за пределами ±2SD

Отказ; систематическая ошибка (дрейф)

Р-4с

Разница 4SD между двумя элементами управления

Отказ; случайная ошибка

4-1с

Четыре последовательные точки в одном направлении за пределами ±1SD

Предупреждение о дрифте

10-х

Десять последовательных точек находятся по одну сторону от среднего значения

систематический сдвиг

Случайная ошибка – это непредсказуемое единовременное отклонение (например, пузырь воздуха). Систематическая ошибка – это постоянное отклонение в одном и том же направлении (например, калибровочный дрейф, испорченный реагент). Правила Вестгарда помогают различать эти два типа ошибок.

Внимание: предупреждение на 1-2 секунды само по себе не отменяет результат; Но пропущенные 1-2 могут предвещать последующее нарушение 2-2. Не стоит недооценивать предупреждения, следуйте шаблону.

Как добавить ИИ в контроль качества

Искусственный интеллект работает там, где человеческий глаз устает от данных контроля качества: он может сканировать закономерность Леви-Дженнингса для сотен аналитов одновременно, заранее отмечать медленный дрейф, составлять список нарушений правил и создавать контрольный список, который напоминает вам о возможных первопричинах (время калибровки, партия реагентов, обслуживание прибора). Но предложение ИИ «калибровка могла сместиться» — это гипотеза; Задача специалиста — найти истинную первопричину, заменить реагент, откалибровать устройство и повторно оценить результаты лечения пациентов.

Важнейшее правило заключается в том, что при нарушении правила отбраковки Вестгарда результаты пациентов по этому аналиту не публикуются до тех пор, пока проблема не будет решена. ИИ может напомнить об этой блокировке, но ответственность за реализацию лежит на человеке.

Дельта-проверка: сравнение с собственной историей болезни пациента

Дельта-проверка сравнивает текущий результат того же пациента с предыдущим результатом и отмечает неожиданное серьезное изменение. Логика проста: многие аналиты (например, группа крови, гемоглобин, креатинин) не изменяются кардинально за короткое время. Если гемоглобин пациента был 13 г/дл накануне и 8 г/дл сегодня, существует три возможных объяснения: (1) истинное клиническое изменение (кровотечение), (2) преаналитическая ошибка (неправильный пациент, перепутанный образец), (3) аналитическая ошибка. Галочка «Дельта» отмечает эту разницу; Эксперт выясняет, какое объяснение является верным.

Дельта-проверка наиболее полезна при обнаружении перепутанных образцов (неправильная этикетка на неправильной пробирке). Когда несколько параметров пациента неожиданно изменяются одновременно, это сильный сигнал вмешательства.

Внимание при интерпретации проверки Дельта:

  • Не каждое серьезное изменение является ошибкой; Реальные клинические события, такие как кровотечение, диализ, переливание крови, приводят к действительно большим изменениям.
  • Период времени важен: сравнение с результатом, полученным несколько месяцев назад, может ввести в заблуждение.
  • Некоторые аналиты естественным образом колеблются (например, СРБ); Порог дельты следует регулировать в зависимости от аналита.

Слабая подсказка / Сильная подсказка

Слабая подсказка:

Есть ли какие-либо проблемы с этими данными контроля качества? [цифры]

В этом заявлении не уточняется, какие правила следует применять, что означает и стандартное отклонение, или что представляет собой аналит. ИИ делает общий комментарий, но не может правильно применить логику Вестгарда и вместо первопричины дает поверхностные ответы.

Мощная подсказка:

Ваша роль: помощник специалиста лаборатории по подготовке проекта оценки качества. Аналит: Калий. Уровень контроля 2. Целевое среднее значение 6,0 ммоль/л, стандартное отклонение 0,15. Последние 12 контрольных значений: [список]. Задание: (1) подсчитать и показать, на сколько СД находится каждая точка, (2) проверить правила Вестгарда 1-3, 2-2, R-4, 4-1, 10-х одно за другим и записать, какое из них нарушено, (3) напомнить возможные первопричины (калибровка, партия реагента, прибор), если есть нарушение. Представить в виде списка. Решение и корректирующие действия остаются за мной; Вы просто посчитаете и проверите.

Строгая подсказка дает среднее значение/стандартное отклонение, подсчитывает, какие правила следует применить, запрашивает промежуточные расчеты и утверждает, что решение остается за человеком.

три мини-кейса

Случай 1 — Обнаружена систематическая ошибка. В биохимической лаборатории контроль уровня глюкозы стабильно выше среднего в десяти последовательных точках (правило 10-х). ИИ отмечает эту закономерность и выдвигает гипотезу о «новой партии реагентов или отклонении калибровки». Эксперт изучает записи, находит партию реагентов, измененную четыре дня назад, и заново калибрует прибор. За этот период анализируются результаты измерения уровня глюкозы у 340 пациентов. ИИ увидел закономерность, эксперт нашел первопричину.

Случай 2 — Выборка перепутана с проверкой дельты. Гемоглобин у пациента вчера был 12,8 г/дл, сегодня 9,1 г/дл; В то же время его креатинин увеличился с 0,9 до 2,4 мг/дл, а уровень калия увеличился с 4,2 до 5,9 ммоль/л. ИИ сигнализирует о множественных нарушениях дельты. Эксперт видит, что одновременные скачки нескольких параметров предполагают смешивание выборок; проверяет записи и находит ошибку маркировки. Требуется новый образец. Ни одна дельта не спасла закономерность.

Случай 3 — Ложная тревога (реальное изменение). У одного пациента на диализе уровень мочевины снизился со 140 до 45 мг/дл за один день; галочка дельта отмечает большое изменение. ИИ выдает оповещения, но специалист знает, что пациент вчера был на диализе; Это ожидаемое, реальное изменение, а не ошибка. Результат опубликован. Урок: дельта-стимул — это вопросительный знак, клинический контекст дает ответ.

Копируемые шаблоны подсказок

ШАБЛОН КОНТРОЛЯ WESTGARD Аналитик: [имя]. Среднее: [х]. ШД: [х]. Контрольные значения: [список]. Рассчитайте и отобразите (значение - среднее)/SD для каждого значения. Проверьте эти правила одно за другим: 1-2, 1-3, 2-2, R-4, 4-1, 10-x. Для каждого правила напишите «нарушение есть/нет» и причину. При нарушении правила отклонения добавьте предупреждение «НЕ РАЗПУСКАТЬ РЕЗУЛЬТАТЫ ПАЦИЕНТА». Решение за мной.

КОНТРОЛЬНЫЙ СПИСОК ОСНОВНЫХ ПРИЧИН контроля качества (ШАБЛОН) Нарушено правило отклонения контроля качества. Предоставьте мне последовательный контрольный список для расследования первопричин: партия реагента/срок годности, время калибровки, состояние контрольного материала, техническое обслуживание прибора, зонд/пипетка, температура окружающей среды. Напишите одним предложением, что проверять по каждому пункту. У меня есть последний комментарий.

ШАБЛОН ДЕЛЬТА-ПРОВЕРКИАнонимный пациент. Аналитик: [имя]. Предыдущий результат ([дата]): [x]. Текущий: [y]. Рассчитайте абсолютное и процентное изменение. Какая из трех возможных причин этого изменения может соответствовать: истинному клиническому изменению, преаналитической ошибке (вмешивающейся) или аналитической ошибке? Перечислите мне, какую дополнительную информацию мне нужно проверить для принятия решения. Диагностика/принятие решения.

ШАБЛОН НЕСКОЛЬКИХ ДЕЛЬТА-ШАБЛОНОВ предоставит предыдущие и текущие значения для нескольких аналитов одного и того же пациента. Отметьте, какие аналиты имеют неожиданные большие изменения. Если одновременно неожиданно изменится более одного аналита, предупредите о «возможной путанице проб» и напишите, что мне следует проверить для подтверждения. Данные: [список].

Распространенные ошибки

  • Принятие 1-2-секундного предупреждения за отказ. 1-2 секунды – предупреждение; Сам по себе он не отменяет результата, но ему необходимо следовать.
  • Опубликовать результат пациента с нарушением КК. Если правило отклонения нарушено, соответствующие результаты сохраняются до тех пор, пока не будет найдена основная причина.
  • Слепо считая предупреждение о дельте ошибкой. Такие условия, как диализ, переливание крови, кровотечение, приводят к действительно большим изменениям; контекст принимается во внимание.
  • Принятие гипотезы о первопричине ИИ за доказательство. «Реагент мог сместиться» — это гипотеза; Истинная причина выявляется путем записи и обследования.
  • Примем дельта-порог одинаковым для всех аналитов. Биологическая изменчивость каждого аналита различна; Порог устанавливается в зависимости от аналита.
Совет: передавая данные контроля качества в YZ, обязательно укажите среднее значение и стандартное отклонение и попросите его показать промежуточные расчеты. «На каком расстоянии СД?» Пусть ИИ рассчитает вопрос и проверит его у вас в голове; это улавливает как ошибку ИИ, так и вашу.

В заключение

Контроль качества заключается в обеспечении правильности измерений устройством; Дельта-проверка — это способ выявить ошибки на уровне выборки и пациента. Диаграмма Леви-Дженнингса и правила Вестгарда систематизируют контроль качества; различает случайную и систематическую ошибку. Искусственный интеллект может быстро сканировать эти закономерности и генерировать предупреждения и гипотезы об основных причинах, но в случае нарушения правила отклонения результат блокировки, поиска основной причины и корректирующих действий принадлежит эксперту. Предупреждения при проверке дельты представляют собой вопросительные знаки; Клинический контекст и обследование дают ответ.

Задача приложения

Возьмите последние 12 значений контроля качества (со средним значением и стандартным отклонением) для аналита и оцените AI с помощью шаблона «Westgard Control». Самостоятельно проверьте расстояния SD, рассчитанные AI. Затем выберите два рассчитанных по времени результата для пациента, следуйте шаблону «Дельта-проверка» и оцените три возможные причины изменения, используя свои собственные клинические знания, и запишите, какую дополнительную информацию вы бы проверили.

контрольный список

  • [ ] Для контроля качества я указал в подсказке среднее значение и стандартное отклонение; Я проверил промежуточные счета.
  • [ ] Я четко изложил правила Вестгарда, которые будут применяться.
  • [ ] Я подтвердил, что сохраню результаты пациентов в случае нарушения правила отклонения.
  • [ ] Я оценил дельта-предупреждение наряду с реальной вероятностью клинических изменений.
  • [ ] Я проверил выборку на наличие путаницы при множественных нарушениях дельты.
  • [ ] Я подтвердил гипотезу о первопричине ИИ путем записи/исследования.