Vienība 3 / 11

Strukturēti ziņojumi un ziņojuma projekts: radiologs pārbauda AI projektu

Ieguvumi:

  • Izprotiet, kāpēc strukturēti ziņojumi (standarta virsraksti, veidnes, vispārpieņemtais glosārijs) ir drošāki par brīvu tekstu un kā AI paātrina šīs veidnes.
  • Spēja izmantot mākslīgo intelektu, lai atrastu rezultātu konsekvenci, trūkstošo apgabalu un valodas korekciju, kā arī spēja nodrošināt klīnisko interpretāciju un gala ziņojumu kā radiologs
  • Spēja atpazīt risku, ka mākslīgais intelekts ziņojumam pievieno/sagatavo atklājumus (halucinācijas) un pārbaudīt katru teikumu, saskaņojot to ar attēlu

Radioloģijas ziņojums ir viens no nozīmīgākajiem dokumentiem pacienta klīniskajā ceļojumā. Ķirurgs pieņem lēmumu par operāciju, onkologs sastāda ķīmijterapijas plānu, ģimenes ārsts pieņem lēmumu par nosūtīšanu, pamatojoties uz jūsu ziņojumā norādītajiem teikumiem. Tāpēc nepietiek ar to, ka ziņojums ir precīzs; Tam jābūt saprotamam, pilnīgam un konsekventam. Brīvā teksta ziņošana ir elastīga, taču bīstami elastīga: steigā radiologs var izlaist virsrakstu “videnes zarns”, aizmirst mērījumu vai izmantot neskaidru valodu, ko klīnicists interpretētu atšķirīgi. Strukturēta atskaite samazina šo risku: izmantojot standarta virsrakstus, obligātos laukus un parasto vārdnīcu, tas nodrošina, ka katrs pārskats tiek izdots ar tādu pašu ietvaru un pilnīgumu.

Mākslīgais intelekts paātrina šo ietvaru: ievieto atradumus atbilstošos virsrakstos, atgādina par trūkstošo lauku, izlabo valodu, pārbauda konsekvenci starp atradumu un secinājumu un izveido kontūru, kas ietaupa jūsu minūtes. Taču vienības pamatprincips paliek nemainīgs: AI rada melnrakstus; Radiologs sniedz klīnisko interpretāciju un gala ziņojumu. Katru melnraksta teikumu nevar parakstīt, nesaskaņojot to ar attēlu. Nepārbaudīts melnraksts ir neparakstīts ziņojums.

Kāpēc strukturēti ziņojumi ir drošāki?

Brīvā tekstā katrs radiologs raksta savā stilā; Ir viegli izlaist tēmu, aizmirst novērtēt sistēmu vai lietot tādus izteicienus kā “varbūt”, “nevar izslēgt”, “iespējams”, kas nozīmē dažādas lietas. Strukturētajā ziņojumā pārskats tiek virzīts fiksētā skeletā:

  • Klīniskā informācija: Indikācija, vēsture, jautājums.
  • Tehnika: modalitāte, protokols, kontrasts, kvalitāte.
  • Rezultāti: Sistemātisks novērtējums pa orgāniem/sistēmām (viena rinda katrai sistēmai).
  • Secinājums (iespaids): konstatējumu kopsavilkums, kas atbild uz klīnisko jautājumu.
  • Ieteikums: Novērošana, papildu pārbaude, salīdzināšanas ieteikums.

Šis ietvars nodrošina trīs lietas: pilnīgumu (obligātos laukus nevar atstāt tukšus), konsekvenci (katrs ziņojums tiek lasīts vienā un tajā pašā struktūrā) un kopīgu valodu (standarta termini klīnicistam sniedz to pašu nozīmi). Strukturētā ziņošana un AI pastiprina viena otru, jo AI var automātiski aizpildīt šo skeletu un atzīmēt tukšās vietas.

Izmērs

brīvs teksts

Strukturēts + AI melnraksts

Vietas trūkuma risks

Augsts (nosaukumu var izlaist)

Zems (obligāts lauka brīdinājums)

Konsekvence

Atšķiras atkarībā no radiologa

Standarta skelets

Kopīga valoda ar klīnicistu

Mainīga terminoloģija

standarta vārdnīca

ātrumu

Lēns (pareizrakstība no nulles)

Ātri (rediģēts melnraksts)

Halucināciju risks

Nav (cilvēku rakstnieks)

Jā (AI var kompensēt) — nepieciešama pārbaude

galīgā atbildība

radiologs

radiologs

Uzmanību: pēdējā rinda ir vienāda abās kolonnās. Konfigurācija un AI paātrina pārskatu, bet nedeleģē atbildību.

Halucinācijas: vismānīgākais risks

Tekstu ģenerējošie valodu modeļi (LLM - lielais valodas modelis, mākslīgais intelekts, kas rada tekošu tekstu dabiskajā valodā) dažkārt ideālā teikumā ziņojumā ieraksta atradumu, kuram attēlā nav ekvivalenta, gluži it kā tas būtu īsts. To sauc par halucinācijām. Piemēram, vēdera dobuma CT skenēšanā var iekļaut teikumu "12 mm vienkārša cista 6. aknu segmentā"; Tomēr šajā pārbaudē cistas nav. Teikums izskatās tik dabisks, ka to var parakstīt nogurusi acs nemanot. Notiek arī pretējais: modelis var izmest reālu atradumu no melnraksta (nepietiekams ziņojums).

Tātad melnraksta apstiprināšana nav vienvirziena. Radiologs uzdod divus jautājumus: (1) Vai katram skices teikumam ir ekvivalents attēlā? (iznīcinot safabricēšanu) un (2) Vai visi nozīmīgie attēla atradumi ir iekļauti manuskriptā? (pabeidz trūkstošo). Ziņojumu var parakstīt tikai tad, kad abi ir pabeigti.

Uzmanību! Valodas modeļa raitums nepierāda tā precizitāti. Neatkarīgi no tā, cik profesionāli tas izskatās, ne katrs atraduma teikums var tikt iekļauts ziņojumā, nesaskaņojot to ar attēlu. Halucinācijas ir nepatiesas, kas šķiet drošas.

trīs mini futrāļi

1. gadījums — precīzs ziņojums paātrināts. Radiologs aizpilda strukturētu krūškurvja CT veidni ar AI. Modelis ievieto konstatējumus virsrakstos, brīdinot “videsvide nav novērtēts”; Radiologs piebilst, ka joma. Ziņojuma laiks samazinās no 9 minūtēm līdz 4 minūtēm. Radiologs katru teikumu apstiprina un paraksta ar attēlu. Šeit AI palielināja pilnīgumu un ātrumu, un lēmums palika radiologa ziņā.

2. gadījums — noķertas halucinācijas. Uz vēdera MRI skices YZ raksta "8 mm cistisks bojājums aizkuņģa dziedzera astē". Radiologs saskaņo šo teikumu ar attēlu; Aizkuņģa dziedzera aste ir pilnīgi normāla, tāda bojājuma nav. Izņem teikumu. Ja tas nebūtu apstiprināts, pacients būtu pakļauts nevajadzīgai MRI novērošanas ķēdei un vairākus mēnešus ilgam satraukumam. Pārbaudē no ziņojuma tika izslēgts izdomājums.

3. gadījums — nepilnīga konstatācija pabeigta. Smadzeņu MRI projektā modelis nekad nekonstatēja klīniski nozīmīgu nelielu akūtu infarktu (audu bojājumus jaunas asinsvadu oklūzijas dēļ). Pārbaudot, vai katrs attēlā redzamais atradums ir skicē, radiologs difūzijas sērijā redz gaišo laukumu un pievieno atradumu. AI atstāts nepabeigts; Radiologa sistemātiskā nolasīšana aizpildīja robu. Šis gadījums parāda, ka pārbaude nav tikai “pārpalikuma atsijāšana”, bet arī “deficīta aizpildīšana”.

Vāja uzvedne / spēcīga uzvedne

Vāja uzvedne:

Uzrakstiet krūškurvja CT ziņojumu, pacients klepo.

Bez modalitātes detaļām, bez atradumiem, bez veidnēm un bez robežām; modelis aizpilda nepilnības ar izdomājumiem, un halucināciju risks ir visaugstākais.

Spēcīga uzvedne:

Jūsu loma: asistents, kas sagatavo radiologam strukturētu PROGRAMMU. Neveiciet diagnozi, neuzskatiet, ka ziņojums ir pabeigts. Sagatavojiet melnrakstu TIKAI no maniem zemāk sniegtajiem secinājumiem; nepievienojiet nekādus konstatējumus, kas nav sniegti; Ja laukam nav datu, ierakstiet "[nav sniegti dati — aizpildiet radiologs]", neveidojiet tos. Virsraksti: Klīniskā informācija, Tehnika, Secinājumi (pamatojoties uz sistēmu), Secinājumi, Ieteikums. Beigās uzskaitiet ievadi, uz kuriem balstās katrs izklāstā ietvertais konstatējumu paziņojums. Pacients: 55 gadus vecs vīrietis, hronisks klepus, 30 pacgadu smēķēšana. Modalitāte: bezkontrasta krūškurvja CT. Atradumi: 9 mm spikulēts mezgliņš labajā augšējā daivā aizmugurē; videnes limfmezgls nav patoloģiska izmēra; nav pleiras izsvīduma; Kaulu struktūras ir dabiskas.

Spēcīgā pretenzijas veidne kopā nodrošina ierobežojumu, ražošanas aizliegumu un avota izsekojamību.

Kopējamas uzvedņu veidnes

STRUKTURĒTA PROJEKTA VEINE.Jūsu loma: asistents, kas sagatavo radiologa PROJEKTU. Neveic diagnozi, neparaksti. Izveidojiet strukturētu izklāstu tikai no manis sniegtajiem atklājumiem. Virsraksti: Klīniskā informācija, Tehnika, Secinājumi (pēc sistēmas/orgāna), Secinājums, Ieteikums. Laukā, kas nav dati, ierakstiet "[radiologs aizpildiet]", neizdomājiet. Modalitāte: [rakstīt]. Rezultāti: [vasara].

HALLUCINĀCIJAS AUDITA VEIDNE sniegs jums ziņojuma projektu. Numurējiet katru atraduma teikumu un blakus tam ierakstiet "avots: [pamatojoties uz]". Apkopojiet teikumus, kuriem nav līdzvērtīga ievade, atsevišķā sarakstā "TIEK PĀRBAUDĪTS / IESPĒJAMS viltojums". Melnraksts: [rakstīt]

SECINĀJUMU-SECINĀJUMU SASKAŅAS VEIDNE sniegs jums ziņojuma sadaļas Secinājumi un Secinājumi. Uzskaitiet svarīgos punktus, kas ir ietverti secinājumos, bet nav iekļauti secinājumā, un apgalvojumus, kas ir ietverti secinājumos un kuriem nav pamata Atzinumā. Mērķis: norādīt radiologam uz neatbilstību, nevis to labot. Ziņojums: [rakstīt]

VALODAS UN SKAIDRĪBAS VEIDNE sniegs jums ziņojuma projektu. Uzlabot tikai attiecībā uz VALODU un SKAIDRĪBU: atzīmējiet neskaidras frāzes, iesakiet standarta terminoloģiju. PIEVIENOT vai NOŅEMT atradumus; MAINĪT klīnisko nozīmi. Atzīmējiet izmaiņas kā "ieteikums", gala lēmumu pieņem radiologs. Melnraksts: [rakstīt]

Biežas kļūdas

  • Melnraksta parakstīšana bez saskaņošanas. Katrs konstatējumu paziņojums jāapstiprina ar attēlu; Raidums nav precizitāte.
  • Vienkārši šķirojiet lieko un nemeklējiet trūkumus. Modelis var samazināt konstatējumus; Tāpat būtu jāpārbauda, ​​vai katrs attēlā redzamais atradums ir iekļauts melnrakstā.
  • Atskaites pieprasīšana, nesniedzot datus modelim. Viņš aizpilda nepilnības ar daiļliteratūru; Halucināciju risks eksplodē.
  • Secinājumu sadaļas atstāšana neatbilstoši konstatējumiem. Ja slēdzienā nonāk kaut kas, kas nav iekļauts atradumos, klīnicists maldās.
  • Neviennozīmīga valoda, nevis standarta terminoloģija. Frāzes, piemēram, “nevar izslēgt” klīnicisti saprot atšķirīgi; Jāizmanto parastā vārdnīca.
Padoms. Lasot kontūru, turiet pildspalvu otrādi: jautājiet "kur es to redzu attēlā?" katram teikumam. jautāt. Ja jums nav atbildes, teikums nevar iekļūt ziņojumā. Šis vienīgais jautājums izrauj lielāko daļu halucināciju, pirms tās pat sasniedz paraksta stadiju.

Rezumējot

Strukturēti ziņojumi — standarta virsraksti, obligātie lauki, kopīgs glosārijs — sniedz pārskatus, kas ir pilnīgāki, konsekventāki un runā tajā pašā valodā, ko izmanto ārsts nekā brīvs teksts. Mākslīgais intelekts paātrina šo ietvaru: ievieto atradumus, atgādina par trūkstošo apgabalu, koriģē valodu, pārbauda atradumu un secinājumu konsekvenci. Bet AI veido melnrakstus, nevis ziņojumus. Vismānīgākais risks ir halucinācijas: modele raitā teikumā rada atradumu, kas nav attēlā. Radiologs pārbauda divus veidus — vai katram skices teikumam ir pievienots attēls, vai katrs attēlā redzamais atradums ir iekļauts skicē — un parakstās tikai tad, kad šie divi ir pabeigti. Klīniskā interpretācija un gala ziņojums vienmēr ir radiologa ziņā.

Lietojumprogrammas uzdevums

Izvēlieties modalitāti no savas rutīnas (krūšu kurvja CT, vēdera MRI utt.) un uzrakstiet šai modalitātei strukturētu veidnes skeletu (vismaz 5 virsraksti, līniju atrašana pēc sistēmas). Pēc tam palūdziet izveidot kontūru, izmantojot veidni "Strukturētā kontūra" ar atradumu saraksta paraugu. Pēc tam palaidiet veidni “Halucināciju audits” un pārbaudiet, vai uztvērāt teikumu, kas tika apzināti pievienots/izdomāts melnrakstā. Visbeidzot atzīmējiet katru kontūras teikumu ar jautājumu “kur attēlā?”

kontrolsaraksts

  • [ ] Es izmantoju strukturētu veidņu virsrakstus (klīniskie, tehniskie, secinājumi, secinājums, ieteikums).
  • [ ] Modelim sniedzu tikai faktiskos atradumus; Es neatstāju nevienu atstarpi.
  • [ ] Katru melnraksta teikumu saskaņoju ar attēlu (noņemu lieko).
  • [ ] Esmu pārbaudījis, vai katrs svarīgais attēlā redzamais atradums ir melnrakstā (pabeidza trūkstošo).
  • [ ] Es pārbaudīju, vai sadaļas “Atklājumi” un “Secinājumi” ir saskaņotas.
  • [ ] Es esmu aizstājis neviennozīmīgo formulējumu ar standarta terminoloģiju.
  • [ ] Es neesmu parakstījis nevienu nepārbaudītu teikumu; Man ir gala ziņojums.