Dobici:
- Sposobnost da se objasni kako se na radiološkim slikama uspostavljaju tokovi rada detekcije, segmentacije i prioriteta podržani umjetnom inteligencijom
- Sposobnost odvajanja izlaznih podataka modela (toplotna mapa, vjerovatnoća, mjerenje) od odluke radiologa i pozicioniranja ih u ulogu podrške
- Sposobnost validacije rezultata modela slike s osjetljivošću/specifičnošću, lažno pozitivnim opterećenjem i kliničkim kontekstom
Radiologija je najzrelija oblast primjene umjetne inteligencije u biomedicinskom inženjerstvu. Rendgen (rendgenski snimak), kompjuterizovana tomografija (CT; CT na engleskom, kombinujući rendgenske rezove snimljene iz različitih uglova) i magnetna rezonanca (MR; MRI na engleskom, snimanje tkiva jakim magnetnim poljem i radio talasima) daju milione slika svakog dana. Radiologu su potrebne godine stručnosti da protumači ove slike. Umjetna inteligencija doprinosi ovom procesu detekcijom (skretanjem pažnje na nalaz), segmentacijom (crtanje granica strukture; segmentacija na engleskom) i prioritizacijom (stavljanje hitnih slučajeva na početak reda; trijaža na engleskom). U ovoj jedinici ćemo vidjeti kako su ovi tokovi posla postavljeni i — što je najvažnije — kako je izlaz pozicioniran kao ulaz, a ne zamjena za odluku radiologa.
Kao inženjer, vaš posao je često da razvijete model, integrišete ga, potvrdite i nadgledate njegove performanse sa kliničkim timom. Dijagnozu postavlja radiolog. AI ne postavlja dijagnozu; skreće pažnju, meri, sortira.
Koraci radiološkog AI toka rada
Korak 1 — Podaci i prethodna obrada. Slike dolaze kao DICOM (Digitalna slika i komunikacija u medicini; standardni fajl i komunikacijski format za medicinske slike). prethodna obrada; To uključuje otvaranje prozora (podešavanje kontrasta slike), ponovno uzorkovanje (promjena veličine rezova na standardnu veličinu) i smanjenje šuma. Ovaj korak je siguran i pogodan za automatizaciju.
Korak 2 — Detekcija i segmentacija. Uzorak označava područje koje odgovara plućnom čvoru, prijelomu ili krvarenju. Izlaz je obično u obliku ocjene vjerovatnoće i toplotne mape (sloj koji bojom prikazuje područja na kojima je koncentrisana pažnja modela). U segmentaciji, model crta granice piksela organa ili lezije; Ovo se koristi za merenje zapremine.
Korak 3 — Odredite prioritete. Ako se otkrije hitan nalaz (npr. krvarenje u mozgu), slučaj se prenosi na radnu listu. Ovdje nije cilj promijeniti radiologa, već osigurati da se kritični slučaj vidi ranije.
Korak 4 — Procjena radiologa. Rezultati modela se predstavljaju radiologu kao sloj preporuke. Radiolog prihvata, odbija ili menja. Konačan izvještaj i dijagnoza pripada radiologu.
Korak 5 — Verifikacija i praćenje. Jednom kada je model na terenu, njegove performanse se stalno prate; Stope lažno pozitivnih i lažno negativnih prate se odvojeno na različitim uređajima i grupama pacijenata.
Osjetljivost, specifičnost i lažno pozitivno opterećenje
Postoje dvije osnovne metrike za evaluaciju modela slike. Osetljivost je stopa otkrivanja onih koji su zaista bolesni: visoka osetljivost znači manje propuštenih nalaza. Specifičnost je stopa kojom precizno eliminišemo istinski zdrave: visoka specifičnost znači manje lažnih alarma. Postoji ravnoteža između ovo dvoje; Ako snizite prag i otkrijete više nalaza, lažni alarmi se povećavaju.
Kritički koncept u klinici je teret lažnih pozitivnih rezultata: ako model prečesto kaže "sumnjivo", radiolog mora svaki put isključiti ove oznake i nakon nekog vremena upozorenja ne shvata ozbiljno (zamor od upozorenja). Stoga, ne treba procijeniti samo osjetljivost modela, već i broj lažnih pozitivnih rezultata u stvarnom toku rada.
Tri mini slučaja: prema brojevima
Slučaj 1 — Vrijeme ušteđeno određivanjem prioriteta. Model prioriteta krvarenja u CT-u mozga implementiran je u bolnici. Prosječno vrijeme za slučaj krvarenja koje treba prvi put vidjeti radiolog smanjilo se sa 28 minuta na 8 minuta. Međutim, model nije uspio uhvatiti propušteno malo subarahnoidalno krvarenje; stoga su svi slučajevi ponovo podvrgnuti potpunom radiološkom očitavanju. Model je ubrzao sortiranje, ali nije eliminisao čitanje.
Slučaj 2 — Lažno pozitivno opterećenje. Model detekcije plućnih nodula proizveo je u prosjeku 6 “sumnjivih” znakova po pacijentu kada je bio pokrenut s niskim pragom za povećanje osjetljivosti na 94%; Najviše su to bili vaskularni preseci i benigna žarišta. U roku od dvije sedmice radiolozi su počeli ignorirati znakove. Kada je prag ponovo podešen i broj ocjena smanjen na 1,5 po pacijentu, model je ponovo postao koristan.
Slučaj 3 — Pomak na terenu. Model detekcije loma izveden je sa 91% osjetljivosti na digitalnim rendgenskim aparatima u bolnici A, ali je pao na 72% u bolnici B koristeći prijenosne uređaje drugog proizvođača. Kvalitet slike i pozicioniranje bili su različiti. Model se ne može smatrati pouzdanim bez dalje validacije na svakom uređaju i populaciji u kojoj će se koristiti.
Slaba prompt / jaka prompt
Napomena: Upute u nastavku služe za konfiguriranje tekstualnog izvještaja ili toka posla, a ne za tumačenje same slike. Dijagnostika slike je rad potvrđenog kliničkog softvera i radiologa.
Slab upit:
Pogledajte ovaj rendgenski izvještaj i recite mi da li je pacijent bolestan.[izvještaj]
Snažan upit:
Vaša uloga: Vi ste asistent u toku rada radiologije (VI NISTE DIJAGNOSTIKA). Tekst anonimnog radiološkog izvještaja strukturirajte na sljedeći način: - Tabelirajte nalaze, mjerenja i anatomske lokacije. - Zadržite nejasne/negativne izjave ("ne može se isključiti") kakve jesu, ne činiti konačne. - Nemojte dodavati nikakve nalaze kojih nema u tekstu. - Sakupite "preporuke/nastavne" rečenice u poseban odjeljak. - Na kraju navedite 3 tačke koje radiolog treba da potvrdi. Anonimna prijava: [tekst]
Snažan model brze veze drži model podalje od interpretacije i fokusira se na konfiguraciju; Poželjno je zadržati dvosmislenost, jer je u jeziku radiologije ključna razlika između „ne može se isključiti“ i „dostupno je“.
Četiri predloška koji se mogu kopirati
1) Izvještaj o konfiguraciji:
Podijelite sljedeći anonimni radiološki izvještaj u sljedeće naslove: Indikacija, Tehnika, Nalazi, Zaključak, Preporuka. Držite se teksta, nemojte dodavati komentare. Izvještaj: [tekst]
2) Provjera konzistentnosti mjerenja:
Navedite sva numerička mjerenja (mm, cm, HU) u ovom izvještaju i označite konfliktne ili nefiziološke vrijednosti. Izvještaj: [tekst]
3) Model plana evaluacije:
Napišite nacrt plana evaluacije za model detekcije slike: osjetljivost, specifičnost, lažno pozitivan/pacijent, analiza podgrupe (uređaj, starost), skup eksterne validacije. Označite tačke kliničkog odobrenja odvojeno.
4) Lažno pozitivna trijažna nota:
Klasificirajte sljedeću listu izlaza detekcije kao "visok/niski prioritet radiologa"; Napišite obrazloženje za svaki razred. Navedite da odluku prepuštate radiologu. Lista: [izlazi]
Uloga modela: Po vrsti nalaza
Pronalaženje tipa
AI doprinos
kritičnost
verifikacija
Određivanje prioriteta hitnog krvarenja
visoko
veoma visoko
Radiolog kompletno čitanje
Detekcija plućnih nodula
visoko
visoko
Prag + protokol praćenja
Starost kostiju/mjerenje
visoko
srednje
Stručna kontrola
Segmentacija volumena organa
visoko
srednje
Ručna provjera uzorka
Konfiguracija izvještaja (tekst)
visoko
nisko
Potvrda radiologa
Savjet: Nikada se nemojte oslanjati na jedan postotak tačnosti kada procjenjujete model prikaza. Tražite zajedno osjetljivost, specifičnost, lažno pozitivno opterećenje i učinak podgrupe; "Na kojem uređaju i grupi pacijenata ste testirali model?" pitanje otkriva većinu problema.
Oprez: Toplotna mapa ne garantuje „zašto“ je model odlučio na način na koji je odlučio; To samo pokazuje gdje je vaša pažnja usmjerena. Ponekad model daje tačan odgovor iz pogrešnog razloga (na primjer, gledajući u marker na slici). Izlaz objašnjivosti također zahtijeva validaciju.
Uobičajene greške
- Oslanjajući se na jednu metriku. Visoka ukupna preciznost može prikriti nisku osjetljivost u kritičnoj podgrupi.
- Ne mjeri lažno pozitivno opterećenje. Model koji proizvodi previše signala stvara zamor stimulansa i napušta se.
- Provjerite model na jednom uređaju i koristite ga bilo gdje. Pomjeranje polja je najčešći uzrok neuspjeha AI slike.
- Greška toplotna mapa kao dokaz. Mapa pažnje nije objašnjenje; Tačan odgovor može biti zasnovan na pogrešnom razlogu.
- Eliminacija radiologa. Model daje prioritete i označava; Dijagnoza i nalaz pripadaju radiologu.
Ukratko
- Radiološki AI; On proizvodi vrijednost kroz otkrivanje, segmentaciju i određivanje prioriteta, a ne zamjenjuje dijagnozu.
- Postoji ravnoteža između osjetljivosti i specifičnosti; Lažno pozitivno opterećenje je kritična metrika u klinici.
- Modeli moraju proći vanjsku validaciju (promjenu domene) na svakom uređaju i populaciji u kojoj će se koristiti.
- Toplotne karte pokazuju pažnju, ali ne garantuju objašnjenje; ne može se uzeti kao dokaz.
- Konačna dijagnoza i izvještaj pripada radiologu; AI je sloj podrške.
Zadatak aplikacije
Odaberite postojeći (ili hipotetički) scenario detekcije slike. Napišite okvir za evaluaciju za ovaj model: navedite koje metrike (osjetljivost, specifičnost, lažno pozitivan/pacijent), koje podgrupe (uređaj, starost, spol) i koji vanjski set za validaciju ćete koristiti. Zatim označite tačnu tačku u toku rada na kojoj je radiolog donio odluku i objasnite u paragrafu kako je izlaz modela unet u tu odluku.
kontrolna lista
- [ ] Mogu razlikovati uloge radiološke AI u detekciji, segmentaciji i određivanju prioriteta.
- [ ] Mogu zajedno procijeniti osjetljivost, specifičnost i lažno pozitivno opterećenje.
- [ ] Znam šta je pomeranje polja i zašto je potrebna eksterna validacija.
- [ ] Shvatio sam da toplotna karta nije objašnjenje i potrebna je provjera.
- [ ] Mogu pozicionirati izlaz modela kao input za odluku radiologa, a ne kao zamenu za njega.