Qligħ:
- Kapaċità li tispjega l-kunċetti ta 'pożittiv falz u negattiv falz b'eżempji mid-dentistrija u tevalwa l-konsegwenzi kliniċi tagħhom fuq il-pazjent.
- Kapaċità li taqra indikaturi bħall-punteġġ ta' kunfidenza tal-AI, is-sensittività u l-ispeċifiċità f'livell bażiku u tiddeċiedi kemm għandu piż l-output
- Kapaċità li jiġi stabbilit protokoll li jikkonferma kull sejba radjografika tal-AI b'korrelazzjoni klinika, immaġini addizzjonali, u t-tieni opinjoni tat-tabib meta meħtieġ
Fl-unità preċedenti, rajna kif jaħdmu l-għodod tar-radjografija AI. F’din l-unità naslu fil-qalba tal-kwistjoni: kemm huma preċiżi dawn l-għodod, meta jmorru ħażin, u x’inhuma l-konsegwenzi ta’ dawn l-iżbalji għall-pazjent? Għax jekk għodda hijiex "tgħin" jew "perikoluża" mhux determinat minn meta taħdem sew, iżda minn x'jiġri meta tmur ħażin. Il-fehim taż-żewġ tipi ta 'żbalji bażiċi ta' AI fid-dentistrija — pożittivi foloz u negattivi foloz — huwa prerekwiżit għal użu sigur.
Żewġ tipi bażiċi ta 'żbalji
Pożittiv falz: Meta l-AI timmarka xi ħaġa bħala eżistenti meta fil-fatt ma teżistix. Per eżempju, juri sinna b'saħħitha bħala "tħassir". Ir-riżultat: ansjetà bla bżonn, eżami ulterjuri bla bżonn, u anke r-riskju ta 'telf ta' tessut b'saħħtu minħabba trattament mhux korrett.
Negattiv falz: Meta l-AI "tinjora" xi ħaġa li fil-fatt seħħet, jiġifieri, ma tindikahiex. Per eżempju, billi tevita leżjoni perjapikali eżistenti (żona infjammatorja fil-ponta ta 'l-għeruq). Riżultat: patoloġija nieqsa, dewmien fit-trattament, progressjoni tal-marda. Ħafna drabi dan huwa l-iżball l-aktar perikoluż fid-dentistrija; għaliex jekk it-tabib jafda l-AI u jgħid "ċar", il-patoloġija reali tipproċedi skiet.
Attenzjoni: Sempliċement għax l-AI ma tindika xejn MA jfissirx "kollox tajjeb". Negattiv falz huwa dejjem possibbli. L-eżami kliniku u l-qari tat-tabib ma jistgħu jinqabżu taħt l-ebda ċirkostanza.
Sensittività u speċifiċità: żewġ indikaturi ewlenin
Żewġ numri jiġbru fil-qosor il-prestazzjoni tal-vettura:
- Sensittività: Ir-rata tal-qbid ta’ dawk li huma tassew morda. Sensittività għolja tnaqqas negattiv falz. Ifisser "Hu ma jitlifx il-marda".
- Speċifiċità: Ir-rata li biha dawk tassew b'saħħithom jitqiesu b'mod preċiż bħala "nodfa". Speċifiċità għolja tnaqqas il-pożittivi foloz. Ifisser "Hu ma jqajjem allarm għal xejn."
Dawn it-tnejn spiss ikunu f'kontradizzjoni ma' xulxin. Jekk tissettja għodda wisq "sensittiva" (tindika kull suspett) se titlef inqas patoloġiji iżda tagħti ħafna allarmi foloz. Jekk issettjaha wisq "selettiva", l-allarmi foloz huma mnaqqsa iżda r-riskju li titlef il-patoloġija reali jiżdied. Klinikament, sensittività għolja ħafna drabi hija ppreferuta fid-dentistrija - għaliex it-telf ta 'leżjoni hija aktar riskjuża minn allarm vojt. Iżda l-aħħar kelma hija mill-ġdid fl-eżami kliniku.
kunċett
X'miżuri
X'jipprovdi li tkun għolja?
Sensittività
Aqbad il-pazjent
Negattivi foloz jonqsu
l-ispeċifiċità
Tindif tas-saħħa
Il-pożittivi foloz jonqsu
Punteġġ ta' kunfidenza
Il-"kunfidenza" tal-mudell f'dak il-kampjun
Tip għall-klassifikazzjoni/limitu biss
Tip: Jekk għodda turik biss punteġġ ta' kunfidenza, staqsi lill-manifattur għall-valuri ta' sensittività/speċifiċità wara dak il-punteġġ. Dawn il-valuri huma sinifikanti f'liema popolazzjoni u kif jiġu ttestjati.
Protokoll ta' validazzjoni: għal kull sejba
Ivverifika kull sejba tar-radjografija AI b'dawn il-passi:
- Korrelazzjoni klinika: Is-sejba taqbel mas-sintomi u l-eżami tal-pazjent?
- Immaġini addizzjonali: Konferma b'perijapikali, bitewing jew CBCT jekk meħtieġ.
- Tqabbil maż-żmien: Qabbel mar-radjografiji preċedenti u evalwa l-bidla, jekk ikun hemm.
- It-tieni opinjoni tat-tabib: Opinjoni tal-kollega f'każijiet dubjużi jew ta' riskju għoli.
- Rekord: Ikteb id-deċiżjoni, ir-raġuni, u r-rwol tal-AI b'mod ċar fit-tabella tal-pazjent.
Mini każ 1: L-ispiża ta 'pożittiv falz
L-għodda AI tindika "snien" fl-ewwel molar t'isfel f'pazjent ta '34 sena b'kunfidenza ta' 88%. Fuq eżami kliniku, is-snien huwa intatt, l-ebda kateter ma jiddaħħal, u l-pazjent m'għandux ilmenti. It-tabib jikkonferma b'film tal-gidma: m'hemm l-ebda snien, il-marka hija dovuta għad-dell radjografiku ta 'restawr (mili). Kieku t-tabib kien jiddependi direttament fuq l-AI u intervjena, kien ikun hemm telf ta 'tessut b'saħħtu. Pożittivi foloz ġew evitati hawnhekk biss mill-kontroll kliniku tat-tabib.
Mini każ 2: Il-periklu ta 'negattiv falz
Pazjent ta’ 62 sena jilmenta b’milja vaga fix-xedaq t’isfel. L-AI ma timmarka xejn fl-iskan panoramiku. It-tabib żagħżugħ huwa meħlus, "AI qal li huwa nadif." It-tabib anzjan jinsisti u jitlob għal eżami kliniku u CBCT; Fit-truf ta' l-għeruq tidher leżjoni li AI qbiżt. Lezzjoni: Is-silenzju tal-AI qatt mhu dijanjosi; Is-suspett kliniku dejjem jieħu preċedenza.
Każ żgħir 3: Effett tal-issettjar tal-limitu
Klinika tittestja l-limitu tal-immarkar tal-vettura. Meta l-limitu jitbaxxa għal 50%, l-għodda tagħti 900 sinjal kull xahar; 25% biss minn dawn huma klinikament sinifikanti, il-bqija huma pożittivi foloz — it-tobba huma megħlub. Meta l-limitu jiżdied għal 80%, in-numru ta 'markaturi jinżel għal 320, is-sinifikat jiżdied għal 55%, iżda żewġ leżjonijiet bikrija veri jibqgħu taħt il-limitu u jaħarbu. Il-klinika ssib bilanċ fil-limitu ta '70% u tpoġġi żoni ta' punteġġ baxx fuq il-lista ta '"reviżjoni". Lezzjoni: l-ebda limitu wieħed mhu perfett; L-għajn tat-tabib tagħlaq il-lakuni.
Mudelli kopjabbli
Uża mingħajr ma żżid l-ID tal-pazjent reali.
Rwol: Kowċ tal-konferma (mhux dijanjostiku). Kompitu: Ipproduċi lista ta' kontroll ta' verifika għas-sejba tar-radjografija AI li ġejja: mistoqsijiet ta' korrelazzjoni klinika, immaġini addizzjonali li jistgħu jiġu rrakkomandati, intestaturi ta' dijanjosi differenzjali, oġġetti ta' nota għar-reġistrazzjoni. Deċiżjoni finali BIL-KITBA. Sejba: [anonimu]
Rwol: Tip ta' żball deskrittiv.Kompitu: Iddetermina jekk ix-xenarju li ġej għandux ir-riskju ta' pożittiv falz jew negattiv falz u spjega r-riżultat kliniku probabbli lill-pazjent. Irrakkomanda x'azzjoni għandu jieħu t-tabib. Xenarju: [ikteb]
Rwol: Deskrittur indikatur. Kompitu: Jinterpreta b'lingwaġġ sempliċi l-informazzjoni dwar is-sensittività, l-ispeċifiċità u l-popolazzjoni tat-test ipprovduta minn manifattur; Elenka mistoqsijiet biex nistaqsi jekk dawn il-valuri jaqblux mal-profil tal-pazjent tagħna. Valuri: [pejst]
Rwol: Kittieb tat-talba għat-tieni opinjoni. Kompitu: Abbozza messaġġ qasir, professjonali u anonimizzat li jitlob it-tieni opinjoni radjografika mingħand kollega. Tinkludix l-identifikazzjoni tal-pazjent. Kuntest: [sejba anonima]
Pront dgħajjef / Pront qawwi
Dgħajjef: "AI qal 90%, dan mhux immuffat ċert?"
Għaliex huwa dgħajjef: Jiżbalja l-punteġġ ta 'kunfidenza għall-evidenza, taqbeż il-validazzjoni klinika, u jiddelega d-deċiżjoni lill-AI.
Qawwija: "Għal dan il-qasam li l-AI mmarkat b'90% kunfidenza, liema passi kliniċi u radjografiċi għandi nsegwi biex nikkonferma jew neskludi d-dijanjosi ta 'snien? Ikkunsidra wkoll il-possibbiltà ta' pożittiv falz."
Għaliex hija qawwija: Ma tqisx il-punteġġ bħala prova assoluta, tneħħi l-passi ta 'verifika u tqis il-possibbiltà ta' żball.
Preġudizzju ta 'awtomazzjoni: l-aktar riskju insidjuż
Pożittivi foloz u negattivi foloz huma żbalji tekniċi; Iżda l-aktar riskju insidjuż huwa min-naħa tal-bniedem: il-preġudizzju tal-awtomazzjoni. Din hija t-tendenza li nafdaw l-output ta 'għodda aktar mill-ġudizzju tagħna stess. Peress li l-għodda tirriżulta li hija "l-aktar preċiża" maż-żmien, it-tabib jista 'jieqaf jistaqsiha u jsegwi bl-addoċċ in-numru żgħir ta' każijiet kritiċi fejn l-għodda mhix preċiża. Il-paradoss huwa dan: aktar ma taħdem aħjar l-għodda, aktar l-attenzjoni tal-bniedem tirriskja l-atrofija u l-iżbalji rari aktar perikolużi jsiru.
Il-mod prattiku biex tegħleb dan il-preġudizzju huwa li twaqqaf il-fluss tax-xogħol f'format "li l-ewwel, it-tieni għodda": aqra l-immaġni lilek innifsek l-ewwel, ħu d-deċiżjoni tiegħek, imbagħad qabbilha mal-AI. Għalhekk, minflok ma tiggwidak, l-għodda ssir it-tieni opinjoni li tikkumplimenta l-qari tiegħek. B'mod regolari nistaqsi wkoll "Seta' l-AI kienet żbaljata f'dan il-każ?" Tistaqsi, iżżomm l-attenzjoni ħajja. Li tistaqsi din il-mistoqsija hija l-aktar difiża b'saħħitha kontra l-preġudizzju tal-awtomazzjoni, anke meta l-għodda għandha punteġġ ta 'fiduċja għoli.
Każ mini 4: Atrofija tal-attenzjoni
Fi klinika waħda, l-għodda AI taħdem b'mod preċiż ħafna għal xhur, u t-tobba gradwalment jibdew jaċċettaw l-output tagħha mingħajr ma jistaqsu. Ġurnata waħda l-vettura tgħaddi "naddaf" leżjoni reali li tidher atipika; Minħabba l-fiduċja li saret drawwa, l-ewwel tabib lanqas jinduna biha. Fortunatament, eżami kliniku bir-reqqa li jsir fuq l-ilment persistenti tal-pazjent jiżvela l-leżjoni. Il-klinika mbagħad tinforza r-regola "l-ewwel qari tat-tabib, imbagħad AI". Lezzjoni: is-suċċess tal-għodda m'għandux jissostitwixxi l-attenzjoni tal-bniedem; il-fluss tax-xogħol għandu jiżgura dan.
Żbalji komuni
- Jitnaqqsu n-negattiv falz u jqisu s-silenzju tal-AI bħala "b'saħħithom."
- Interpretazzjoni tal-punteġġ ta' kunfidenza indipendentement mis-sensittività/speċifiċità.
- Tuża l-għodda mingħajr ma tkun taf li ġiet ittestjata f'popolazzjoni differenti mill-profil tal-pazjent tiegħek stess.
- Mhux qed tfittex it-tieni opinjoni f'sejbiet ta' riskju għoli.
- Mhux tikteb ir-rwol tal-AI u r-raġuni għad-deċiżjoni fit-tabella tal-pazjent.
Fil-qosor
Għodod tar-radjografija AI jagħmlu żewġ tipi ta 'żbalji: pożittiv falz (li juri dak li m'hemmx) u negattiv falz (nieqes dak li hemm). Fid-dentistrija, negattiv falz ħafna drabi huwa aktar perikoluż minħabba li t-tabib jista 'j jafda u jitlef il-patoloġija. Is-sensittività u l-ispeċifiċità huma essenzjali biex wieħed jifhem dawn l-iżbalji; Il-punteġġ ta' fiduċja waħdu mhuwiex evidenza. Kull sejba għandha tiġi kkonfermata b'korrelazzjoni klinika, immaġini addizzjonali, paragun tal-ħin u, meta meħtieġ, it-tieni opinjoni, u d-deċiżjoni u r-raġunament għandhom jiġu rreġistrati.
Kompitu ta' applikazzjoni
Agħżel 3 eżempji reali mill-arkivju tiegħek stess (anonimu): wieħed fejn l-AI għamlet pożittiv falz, wieħed fejn għamlet negattiv falz, wieħed fejn kien korrett. Għal kull wieħed, ikteb it-tip ta 'żball, ir-riżultat kliniku, u l-passi ta' verifika korretti. Dawwar ir-riżultat f'"protokoll ta' validazzjoni radjografika AI" ta' paġna waħda biex jiġi implimentat fil-klinika tiegħek.
lista ta' kontroll
- [ ] Kapaċi niddistingwi l-kunċetti ta' pożittiv falz u negattiv falz b'eżempji.
- [ ] Kapaċi ninterpreta s-sensittività u l-ispeċifiċità fuq livell bażiku.
- [ ] Inwettaq il-korrelazzjoni klinika u l-pass tal-immaġni addizzjonali għal kull sejba.
- [ ] Niġi t-tieni opinjoni f'sitwazzjoni ta' riskju għoli.
- [ ] Nirrekordja d-deċiżjoni, ir-raġunament tagħha, u r-rwol tal-AI fit-tabella tal-pazjent.