Guadagni:
- Capacità di distinguere aree di utilizzo tipiche e limiti modalità-specifici delle applicazioni dell'intelligenza artificiale in diverse modalità (grafia, TC, RM, mammografia)
- Capacità di valutare il ruolo dell'intelligenza artificiale come secondo lettore e le implicazioni cliniche delle soglie decisionali in campi ad alto impatto come la mammografia e la TC dell'ictus
- Comprendere che le prestazioni possono diminuire (spostamento della distribuzione) quando la popolazione e il dispositivo su cui viene addestrata l’intelligenza artificiale in ciascuna modalità vengono spostati oltre
L’intelligenza artificiale non è solo una cosa in radiologia; Per ciascuna modalità (metodo di imaging), comporta uno strumento diverso, una potenza diversa e un limite diverso. Un modello di radiografia del torace e un modello di TC per ictus risolvono problemi completamente diversi e generano modelli di errore diversi. In questa unità tratteremo le cinque aree più comuni – radiografia del torace, TC, RM, mammografia e ictus – con usi e insidie specifici della modalità. L'obiettivo è utilizzare ogni strumento per il lavoro giusto, con i giusti limiti.
Il principio fondamentale non cambia ma assume un nuovo volto in ciascuna modalità: ogni modello viene addestrato su un dispositivo specifico, un protocollo specifico e una popolazione di pazienti specifica. Quando queste condizioni vengono superate, le prestazioni potrebbero diminuire; Questo si chiama spostamento della distribuzione. La diagnosi appartiene al radiologo, che è il primo lettore, non il secondo lettore.
Utilizzo e limiti per modalità
Radiografia polmonare (raggi X): i dati più abbondanti sono qui; i modelli generano indicatori per pneumotorace, consolidamento (riempimento infiammatorio del polmone), nodulo, versamento pleurico (liquido interpleurico) e dimensioni del cuore. I suoi punti di forza sono la velocità e la scansione; il suo punto debole sono gli elevati falsi positivi dovuti alla sovrapposizione di strutture (osso, vaso, ombra del seno) e la tendenza a non notare piccoli noduli.
TC (tomografia computerizzata): grazie all'immagine in sezione trasversale, i modelli sono potenti per embolia, sanguinamento, nodulo, frattura, volume dell'organo. La sua forza è la misurazione tridimensionale; Il punto debole è l'elevata sensibilità allo spessore del protocollo/della sezione e alla fase di contrasto: le prestazioni variano a seconda dei protocolli.
MRI (risonanza magnetica): il contrasto dei tessuti molli è elevato; Esistono modelli per la diffusione dell'ictus, lesione della prostata, lesioni cerebrali, cartilaginea. Il suo punto debole è che c’è troppa diversità tra dispositivo e sequenza: un modello perde affidabilità al di fuori della sequenza su cui è stato addestrato.
Mammografia: un campo ad alto impatto; I modelli fungono da secondi lettori per masse e microcalcificazioni. Il suo punto di forza è ridurre gli errori di screening del cancro al seno; Il suo punto debole è il degrado delle prestazioni nel tessuto mammario denso e il sovraccarico di richiamo dei falsi positivi.
Ictus (TC cerebrale/angio-TC/perfusione): questa è l'area critica in termini di tempo; i modelli forniscono segnali rapidi di occlusione dei grandi vasi (LVO), segni precoci di ischemia e sanguinamento, accelerando le decisioni sul trattamento (trombectomia). I suoi punti deboli sono gli artefatti da movimento e l'affidabilità limitata nei risultati precoci/deboli.
modalità
Utilizzo tipico dell'IA
lato forte
Limite specifico della modalità
Radiografia del polmone
Pneumotorace, nodulo, flag di versamento
velocità, scansione
Sovrapposizione, alti falsi positivi
IT
Embolia, sanguinamento, nodulo, volume
Misurazione 3D
Sensibile alla fase di protocollo/contrasto
risonanza magnetica
Diffusione dell'ictus, prostata, cervello
tessuto molle
Diversità di sequenza/dispositivo
mammografia
Massa, microcalcificazione (2° lettore)
Ridurre l'incontinenza
Caduta nel seno denso, richiama il carico
TAC dell'ictus
LVO, ischemia, bandiera sanguinante
risparmio di tempo
Artefatto, reperto precoce/debole
Ruolo del secondo lettore e soglia decisionale
In campi ad alto impatto come la mammografia e l’ictus, l’IA è spesso posizionata come un secondo lettore: il radiologo legge, poi ciò che l’IA segna viene rivisto (o viceversa). Ciò offre la possibilità di cogliere ciò che il singolo radiologo ha mancato. Ma ci sono due rischi. Innanzitutto, l'area non contrassegnata dall'IA è considerata "pulita" (bias di automazione). In secondo luogo, la conseguenza clinica della soglia decisionale: se la soglia è bassa nella mammografia, ci saranno più richiami (e biopsie non necessarie, ansia); Se è alto, la perdita aumenta. Questa soglia è fissata dalla filosofia di screening dell'istituzione e dall'interpretazione del radiologo; non è un'impostazione predefinita tecnica.
Attenzione: solo perché un modello funziona bene in una modalità non significa che funzionerà bene in un'altra modalità o su un dispositivo/protocollo diverso della stessa modalità. Se il modello è addestrato per la "radiografia polmonare", le sue prestazioni potrebbero differire nella radiografia portatile per terapia intensiva. L'ambito di utilizzo è sempre limitato all'ambito per il quale il modello è stato omologato.
tre mini custodie
Caso 1 – La mammografia guadagna secondi lettori. Un radiologo legge normalmente una mammografia di screening. YZ come secondo lettore contrassegna un gruppo di microcalcificazioni in una regione. Il radiologo si guarda indietro e vede un ammasso molto debole; Con l'imaging aggiuntivo, viene rilevato un carcinoma duttale in situ precoce (cancro al seno in stadio iniziale). L’intelligenza artificiale ha impedito la fuga come “secondo occhio”; Il radiologo ha dato la diagnosi.
Caso 2 – Guadagno del tempo di corsa. In un'angiografia TC cerebrale di emergenza, l'IA segnala un'occlusione di grandi vasi (LVO) entro 2 minuti e attiva la squadra di ictus. Il radiologo conferma, il paziente viene portato a trombectomia; Il tempo door-to-ago è notevolmente ridotto. Ma nella stessa settimana, il modello perde una debole ischemia precoce; Il radiologo lo coglie con la propria lettura. L’intelligenza artificiale ha portato velocità, ma il primo lettore è rimasto il radiologo.
Caso 3: spostamento della distribuzione. Un modello di radiografia del torace funziona perfettamente su apparecchiature fisse in un grande ospedale. Quando lo stesso modello viene utilizzato sui dispositivi portatili di un reparto di terapia intensiva, esplodono i falsi positivi: esposizione diversa, scarsa qualità e ombre delle apparecchiature sovrapposte confondono il modello. Il team si rende conto che sta utilizzando il modello su grafici portatili senza convalida locale e restringe il campo di applicazione. Lezione: le prestazioni cambiano quando cambia il dispositivo/protocollo.
Prompt debole / Prompt forte
Suggerimento debole:
Questo modello di risonanza magnetica è buono? Dovremmo usarlo?
Nessun dettaglio sulla modalità, sequenza, popolazione e uso previsto; Arriva una risposta generale e rischiosa.
Suggerimento potente:
Il tuo ruolo: consulente CO nella selezione dell'IA specifica per modalità. Il processo decisionale; Pensa alle domande che dovrei porre. Stiamo considerando un modello di lesione MRI della prostata. Considerare: (1) su quali sequenze/dispositivo/intensità del campo magnetico è stato addestrato il modello, corrisponde al nostro, (2) in quale popolazione è stato convalidato, (3) è un secondo lettore o un ausilio diagnostico, (4) è al limite noto in casi densi/atipici, (5) è il rischio di utilizzarlo senza convalida locale. La decisione finale spetta all’istituzione.
Il forte suggerimento mette in discussione la conformità specifica per la modalità, la popolazione e la convalida locale.
Modelli di prompt copiabili
MODELLO DI CONFORMITÀ ALLA MODALITÀ Il tuo ruolo: ASSISTENTE. Ti fornirò un modello AI e le informazioni sul nostro dispositivo/protocollo. Confrontare il nostro con la modalità, il dispositivo, la sequenza/protocollo e la popolazione su cui è stato addestrato il modello; Elencare le differenze a rischio di deriva della distribuzione e valutare se è necessaria una verifica locale. La decisione spetta all'istituzione. Informazioni: [scrivere]
MODELLO DI DISCIPLINA DEL SECONDO LETTOREProducimi una lista di controllo che manterrà la mia disciplina di lettura quando utilizzo l'IA del secondo lettore: dovrei leggere prima me stesso, come proteggo l'area che l'IA non contrassegna, come confermo il voto dell'AI, come evito il pregiudizio dell'automazione. Modalità: [scrivere]
MODELLO DI RISULTATO SOGLIA DECISIONALE Ti fornirà uno scenario di soglia decisionale in una modalità (ad esempio mammografia). Spiegare le conseguenze cliniche dell'abbassamento/innalzamento della soglia del richiamo, della biopsia non necessaria, dell'evasione e dell'ansia. Ricordaci che la soglia è fissata dalla filosofia di screening dell'istituzione. Sceneggiatura: [scrivi]
MODELLO DI PROMEMORIA LIMITE MODALITÀ Ti fornirò una modalità e un compito AI. Elencare le tipiche fonti di errore specifiche di questa modalità (ad esempio, sovrapposizione nella radiografia del torace, differenza di sequenza nella risonanza magnetica, artefatto nella TC ictus) e i punti ai quali il radiologo dovrebbe prestare particolare attenzione. Modalità/compito: [scrivere]
Errori comuni
- Utilizzo di un modello specifico della modalità in un'altra condizione. Il modello di dispositivo stazionario si comporta diversamente in quello portatile; l'ambito deve essere preservato.
- Contare come "pulito" ciò che il secondo lettore non ha contrassegnato. Pregiudizio dell'automazione; La loro lettura dovrebbe essere protetta.
- Confondere la soglia decisionale con un'impostazione ingegneristica. La soglia è un equilibrio clinico; È regolato dalla filosofia di scansione.
- Ignorando la differenza sequenza/protocollo. I modelli RM/CT perdono affidabilità al di fuori del protocollo su cui sono stati addestrati.
- Diffusione senza verifica locale. La deriva della distribuzione degrada silenziosamente le prestazioni.
Suggerimento: prima di utilizzare un nuovo modello specifico per la modalità, porre tre domande: "Su quale dispositivo/protocollo/popolazione è stato addestrato questo modello? Il nostro gli somiglia? Lo abbiamo convalidato sui nostri dati?" Se tutti e tre non sono soddisfacenti, il modello non è un acceleratore ma un rischio nascosto.
In sintesi
L'intelligenza artificiale è uno strumento diverso in ciascuna modalità: screening rapido nella radiografia del torace ma falso positivo a causa della sovrapposizione; Misurazione 3D potente ma sensibilità del protocollo in CT; Forza dei tessuti molli ma diversità di sequenza nella risonanza magnetica; il secondo lettore riduce l'abduzione ma ricorda l'onere nella mammografia; Guadagno di tempo nella corsa ma limite degli artefatti. In campi ad alto impatto come la mammografia e l’ictus, l’intelligenza artificiale diventa il secondo lettore, ma il primo lettore è sempre il radiologo e la soglia decisionale è un equilibrio clinico. Quando il dispositivo, il protocollo e la popolazione su cui viene addestrato ciascun modello vengono spostati fuori portata, le sue prestazioni diminuiscono (spostamento della distribuzione); quindi l'ambito deve essere mantenuto e deve essere eseguita la convalida locale.
Compito dell'applicazione
Scegli una modalità nella tua routine (radiografia, TC, risonanza magnetica, mammografia o ictus). Utilizzando il modello "Modality Limit Reminder", annotare almeno tre fonti tipiche di errore AI specifiche per quella modalità e punti di particolare attenzione per il radiologo. Quindi valuta un modello che stai considerando per quella modalità con il modello “Modality Fit”: il dispositivo/protocollo/popolazione su cui è addestrato corrisponde al tuo, è richiesta la convalida locale? Se è previsto il ruolo di secondo lettore, adatta l'elenco "Disciplina del secondo lettore" alla tua routine.
lista di controllo
- [ ] Ho appreso la modalità, il dispositivo, il protocollo e la popolazione su cui è stato addestrato il modello.
- [ ] Ho valutato la compatibilità con le mie condizioni (rischio di deriva della distribuzione).
- [ ] Utilizzo il modello solo nella misura in cui è stato approvato.
- [ ] Mantengo la mia lettura indipendente nel ruolo di secondo lettore.
- [ ] Capisco che la soglia decisionale è un equilibrio clinico ed è stabilita dalla filosofia di screening.
- [ ] Considero le tipiche fonti di errore specifiche della modalità (artefatti, sovrapposizioni, differenze di sequenza).
- [ ] Non mi propago in condizioni nuove senza convalida locale.