Κέρδη:
- Δυνατότητα εξήγησης του τρόπου με τον οποίο οι ροές εργασίας ανίχνευσης, τμηματοποίησης και ιεράρχησης που υποστηρίζονται από τεχνητή νοημοσύνη καθιερώνονται σε ακτινολογικές εικόνες
- Δυνατότητα διαχωρισμού των εξόδων του μοντέλου (θερμικός χάρτης, πιθανότητα, μέτρηση) από την απόφαση του ακτινολόγου και τοποθέτηση τους σε ρόλο υποστήριξης
- Δυνατότητα επικύρωσης εξόδων μοντέλων εικόνας με ευαισθησία/εξειδίκευση, ψευδώς θετική επιβάρυνση και κλινικό πλαίσιο
Η ακτινολογία είναι ο πιο ώριμος τομέας εφαρμογής της τεχνητής νοημοσύνης στη βιοϊατρική μηχανική. Η ακτινογραφία (ακτινογραφία), η υπολογιστική τομογραφία (CT, CT στα αγγλικά, που συνδυάζει τομές ακτίνων Χ που λαμβάνονται από διαφορετικές γωνίες) και ο μαγνητικός συντονισμός (MR, MRI στα αγγλικά, απεικόνιση ιστού με ισχυρό μαγνητικό πεδίο και ραδιοκύματα) παράγουν εκατομμύρια εικόνες κάθε μέρα. Χρειάζονται χρόνια εμπειρίας για έναν ακτινολόγο για να ερμηνεύσει αυτές τις εικόνες. Η τεχνητή νοημοσύνη συμβάλλει σε αυτή τη διαδικασία με ανίχνευση (έστρεψη της προσοχής σε ένα εύρημα), τμηματοποίηση (σχεδιασμός των ορίων μιας δομής, τμηματοποίηση στα αγγλικά) και ιεράρχηση (θέση επειγόντων περιπτώσεων στην αρχή της ουράς, διαλογή στα αγγλικά). Σε αυτή την ενότητα, θα δούμε πώς ρυθμίζονται αυτές οι ροές εργασίας και — το πιο σημαντικό — πώς η έξοδος τοποθετείται ως είσοδος και όχι ως αντικατάσταση της απόφασης του ακτινολόγου.
Ως μηχανικός, η δουλειά σας είναι συχνά να αναπτύσσετε το μοντέλο, να το ενσωματώνετε, να το επικυρώνετε και να παρακολουθείτε την απόδοσή του με την κλινική ομάδα. Ο ακτινολόγος κάνει τη διάγνωση. Το AI δεν κάνει διάγνωση. εφιστά την προσοχή, μέτρα, ταξινομεί.
Βήματα της ροής εργασίας ραδιολογικής τεχνητής νοημοσύνης
Βήμα 1 — Δεδομένα και προεπεξεργασία. Οι εικόνες διατίθενται ως DICOM (Ψηφιακή Απεικόνιση και Επικοινωνίες στην Ιατρική, τυπικό αρχείο και μορφή επικοινωνίας για ιατρικές εικόνες). Προεπεξεργασία; Σε αυτά περιλαμβάνονται η δημιουργία παραθύρων (ρύθμιση της αντίθεσης της εικόνας), η επαναδειγματοληψία (αλλαγή μεγέθους κομματιών σε τυπικό μέγεθος) και η μείωση του θορύβου. Αυτό το βήμα είναι ασφαλές και κατάλληλο για αυτοματισμό.
Βήμα 2 — Ανίχνευση και τμηματοποίηση. Το μοτίβο σηματοδοτεί την περιοχή που αντιστοιχεί σε πνευμονικό οζίδιο, κάταγμα ή αιμορραγία. Η έξοδος είναι συνήθως με τη μορφή μιας βαθμολογίας πιθανότητας και ενός χάρτη θερμότητας (ένα στρώμα που δείχνει με χρώμα τις περιοχές όπου συγκεντρώνεται η προσοχή του μοντέλου). Στην κατάτμηση, το μοντέλο σχεδιάζει τα όρια των εικονοστοιχείων ενός οργάνου ή μιας βλάβης. Χρησιμοποιείται για μέτρηση όγκου.
Βήμα 3 — Δώστε προτεραιότητα. Εάν εντοπιστεί ένα επείγον εύρημα (π.χ. εγκεφαλική αιμορραγία), το περιστατικό παρουσιάζεται στη λίστα εργασιών. Ο στόχος εδώ δεν είναι να αλλάξει ο ακτινολόγος, αλλά να διασφαλιστεί ότι η κρίσιμη περίπτωση θα εμφανιστεί νωρίτερα.
Βήμα 4 — Αξιολόγηση ακτινολόγου. Τα αποτελέσματα του μοντέλου παρουσιάζονται στον ακτινολόγο ως στρώμα συστάσεων. Ο ακτινολόγος δέχεται, απορρίπτει ή αλλάζει. Η τελική αναφορά και διάγνωση ανήκει στον ακτινολόγο.
Βήμα 5 — Επαλήθευση και παρακολούθηση. Μόλις το μοντέλο είναι στο πεδίο, η απόδοσή του παρακολουθείται συνεχώς. Τα ποσοστά ψευδώς θετικών και ψευδώς αρνητικών παρακολουθούνται χωριστά σε διαφορετικές συσκευές και ομάδες ασθενών.
Ευαισθησία, ιδιαιτερότητα και ψευδώς θετική επιβάρυνση
Υπάρχουν δύο βασικές μετρήσεις για την αξιολόγηση του μοντέλου εικόνας. Η ευαισθησία είναι ο ρυθμός ανίχνευσης όσων είναι πραγματικά άρρωστοι: υψηλή ευαισθησία σημαίνει λιγότερα χαμένα ευρήματα. Η ειδικότητα είναι ο ρυθμός με τον οποίο εξαλείφουμε με ακρίβεια τα πραγματικά υγιή: υψηλή ειδικότητα σημαίνει λιγότερους ψευδείς συναγερμούς. Υπάρχει μια ισορροπία μεταξύ αυτών των δύο. Εάν χαμηλώσετε το όριο και εντοπίσετε περισσότερα ευρήματα, οι ψευδείς συναγερμοί αυξάνονται.
Μια κρίσιμη ιδέα στην κλινική είναι το βάρος των ψευδών θετικών: εάν το μοντέλο λέει "ύποπτο" πολύ συχνά, ο ακτινολόγος πρέπει να αποκλείει αυτές τις σημαίες κάθε φορά και μετά από λίγο δεν παίρνει στα σοβαρά τις ειδοποιήσεις (κόπωση συναγερμού). Επομένως, δεν πρέπει να αξιολογείται μόνο η ευαισθησία ενός μοντέλου, αλλά και ο αριθμός των ψευδώς θετικών στην πραγματική ροή εργασίας.
Three Mini Cases: By the Numbers
Περίπτωση 1 — Χρόνος που εξοικονομείται με ιεράρχηση προτεραιοτήτων. Ένα μοντέλο ιεράρχησης αιμορραγίας σε CT εγκεφάλου εφαρμόστηκε σε νοσοκομείο. Ο μέσος χρόνος για τις περιπτώσεις αιμορραγίας για πρώτη φορά από τον ακτινολόγο μειώθηκε από 28 λεπτά σε 8 λεπτά. Ωστόσο, το μοντέλο απέτυχε να καταγράψει μια χαμένη μικρή υπαραχνοειδή αιμορραγία. Επομένως, όλες οι περιπτώσεις υποβλήθηκαν και πάλι σε πλήρη ακτινολογική ανάγνωση. Το μοντέλο επιτάχυνε την ταξινόμηση, αλλά δεν απέκλεισε την ανάγνωση.
Περίπτωση 2 — Εσφαλμένη θετική επιβάρυνση. Ένα μοντέλο ανίχνευσης όζων πνεύμονα παρήγαγε κατά μέσο όρο 6 «ύποπτα» σημάδια ανά ασθενή όταν εκτελούνταν με χαμηλό ουδό για αύξηση της ευαισθησίας στο 94%. Οι περισσότερες από αυτές ήταν αγγειακές τομές και καλοήθεις εστίες. Μέσα σε δύο εβδομάδες, οι ακτινολόγοι άρχισαν να αγνοούν τα σημάδια. Όταν το κατώφλι αναπροσαρμόστηκε και ο αριθμός των βαθμών μειώθηκε σε 1,5 ανά ασθενή, το μοντέλο έγινε ξανά χρήσιμο.
Περίπτωση 3 — Μετατόπιση πεδίου. Ένα μοντέλο ανίχνευσης κατάγματος εκτελέστηκε με ευαισθησία 91% σε ψηφιακά μηχανήματα ακτίνων Χ στο νοσοκομείο Α, αλλά έπεσε στο 72% στο νοσοκομείο Β χρησιμοποιώντας φορητές συσκευές από διαφορετικό κατασκευαστή. Η ποιότητα και η θέση της εικόνας ήταν διαφορετικές. Το μοντέλο δεν μπορεί να θεωρηθεί αξιόπιστο χωρίς περαιτέρω επικύρωση για κάθε συσκευή και πληθυσμό στον οποίο θα χρησιμοποιηθεί.
Αδύναμη προτροπή / Ισχυρή προτροπή
Σημείωση: Τα παρακάτω μηνύματα προτρέπονται για τη διαμόρφωση μιας αναφοράς κειμένου ή ροής εργασίας, όχι για την ερμηνεία της ίδιας της εικόνας. Η διάγνωση εικόνων είναι έργο εγκεκριμένου κλινικού λογισμικού και ακτινολόγου.
Αδύναμη προτροπή:
Κοιτάξτε αυτήν την αναφορά ακτινογραφίας και πείτε μου εάν ο ασθενής είναι άρρωστος.[αναφορά]
Ισχυρή προτροπή:
Ο ρόλος σας: Είστε βοηθός ροής εργασιών ακτινολογίας (ΔΕΝ ΕΙΣΤΕ ΔΙΑΓΝΩΣΤΙΚΟΣ). Δομήστε το κείμενο της ανώνυμης έκθεσης ακτινολογίας ως εξής: - Καταγράψτε τα ευρήματα, τις μετρήσεις και τις ανατομικές θέσεις. - Διατηρήστε τις ασαφείς/αρνητικές δηλώσεις ("δεν μπορεί να αποκλειστεί") ως έχουν, μην κάνετε οριστικές. - Μην προσθέτετε ευρήματα που δεν υπάρχουν στο κείμενο. - Συλλέξτε προτάσεις «σύστασης/παρακολούθησης» σε ξεχωριστή ενότητα. - Στο τέλος αναφέρετε 3 σημεία που πρέπει να επιβεβαιώσει ο ακτινολόγος. Ανώνυμη αναφορά: [κείμενο]
Το ισχυρό μοντέλο προτροπής κρατά το μοντέλο μακριά από την ερμηνεία και εστιάζει στη διαμόρφωση. Είναι επιθυμητό να διατηρηθεί η ασάφεια, γιατί στη γλώσσα της ακτινολογίας η διαφορά μεταξύ "δεν μπορεί να αποκλειστεί" και "είναι διαθέσιμο" είναι καθοριστική.
Τέσσερα αντιγράψιμα πρότυπα
1) Διαμόρφωση αναφοράς:
Διαχωρίστε την ακόλουθη ανώνυμη έκθεση ακτινολογίας στις ακόλουθες επικεφαλίδες: Ένδειξη, Τεχνική, Ευρήματα, Συμπέρασμα, Σύσταση. Μείνετε στο κείμενο, μην προσθέτετε σχόλια. Αναφορά: [κείμενο]
2) Έλεγχος συνέπειας μέτρησης:
Καταγράψτε όλες τις αριθμητικές μετρήσεις (mm, cm, HU) σε αυτήν την αναφορά και σημειώστε αντικρουόμενες ή μη φυσιολογικές τιμές. Αναφορά: [κείμενο]
3) Πρότυπο σχέδιο αξιολόγησης:
Γράψτε ένα προσχέδιο σχεδίου αξιολόγησης για ένα μοντέλο ανίχνευσης εικόνας: ευαισθησία, ειδικότητα, ψευδώς θετικά/ασθενής, ανάλυση υποομάδας (συσκευή, ηλικία), σύνολο εξωτερικής επικύρωσης. Σημειώστε ξεχωριστά τα σημεία κλινικής έγκρισης.
4) Εσφαλμένη θετική σημείωση διαλογής:
Ταξινομήστε την ακόλουθη λίστα εξόδων ανίχνευσης ως "υψηλή/χαμηλή προτεραιότητα ακτινολόγου". Γράψτε το σκεπτικό για κάθε τάξη. Δηλώστε ότι αφήνετε την απόφαση στον ακτινολόγο. Λίστα: [εκροές]
Ρόλος του μοντέλου: Ανά τύπο ευρήματος
Εύρεση τύπου
συνεισφορά AI
κρισιμότητα
επαλήθευση
Επείγουσα ιεράρχηση αιμορραγίας
ψηλά
πολύ ψηλά
Ακτινολόγος πλήρης ανάγνωση
Ανίχνευση όζων πνεύμονα
ψηλά
ψηλά
Κατώφλι + πρωτόκολλο παρακολούθησης
Οστική ηλικία/μέτρηση
ψηλά
μεσαίο
Έλεγχος από ειδικούς
Τμηματοποίηση όγκου οργάνου
ψηλά
μεσαίο
Μη αυτόματη επαλήθευση δείγματος
Διαμόρφωση αναφοράς (κείμενο)
ψηλά
χαμηλά
Επιβεβαίωση ακτινολόγου
Συμβουλή: Μην βασίζεστε ποτέ σε ένα μόνο ποσοστό ακρίβειας κατά την αξιολόγηση ενός μοντέλου οθόνης. Ζητήστε ευαισθησία, ειδικότητα, ψευδώς θετική επιβάρυνση και απόδοση υποομάδας μαζί. "Σε ποια συσκευή και ομάδα ασθενών δοκιμάσατε το μοντέλο;" Η ερώτηση αποκαλύπτει τα περισσότερα προβλήματα.
Προσοχή: Ο χάρτης θερμότητας δεν εγγυάται το "γιατί" το μοντέλο αποφάσισε όπως το έκανε. Απλώς δείχνει πού εστιάζεται η προσοχή σας. Μερικές φορές το μοντέλο δίνει τη σωστή απάντηση για τον λάθος λόγο (για παράδειγμα, κοιτάζοντας έναν δείκτη στην εικόνα). Το αποτέλεσμα επεξηγηματικότητας απαιτεί επίσης επικύρωση.
Συνήθη λάθη
- Βασιζόμενοι σε μία μόνο μέτρηση. Η υψηλή συνολική ακρίβεια μπορεί να κρύψει τη χαμηλή ευαισθησία σε μια κρίσιμη υποομάδα.
- Μη μέτρηση του ψευδώς θετικού φορτίου. Το μοντέλο που παράγει πάρα πολλά σήματα δημιουργεί ερεθιστική κόπωση και εγκαταλείπεται.
- Επαληθεύστε το μοντέλο σε μία μόνο συσκευή και χρησιμοποιήστε το οπουδήποτε. Η μετατόπιση πεδίου είναι η πιο κοινή αιτία αποτυχίας της τεχνητής νοημοσύνης εικόνας.
- Παρεξήγηση του χάρτη θερμότητας ως αποδεικτικό στοιχείο. Ο χάρτης προσοχής δεν είναι μια εξήγηση. Η σωστή απάντηση μπορεί να βασίζεται σε λάθος λόγο.
- Εξάλειψη του ακτινολόγου. Το μοντέλο δίνει προτεραιότητα και επισημαίνει. Η διάγνωση και η αναφορά ανήκουν στον ακτινολόγο.
Συνοπτικά
- Ακτινολογικό AI; Παράγει αξία μέσω ανίχνευσης, τμηματοποίησης και ιεράρχησης και δεν υποκαθιστά τη διάγνωση.
- Υπάρχει μια ισορροπία μεταξύ ευαισθησίας και ειδικότητας. Η ψευδώς θετική επιβάρυνση είναι μια κρίσιμη μέτρηση στην κλινική.
- Τα μοντέλα πρέπει να υποβάλλονται σε εξωτερική επικύρωση (μετατόπιση τομέα) σε κάθε συσκευή και πληθυσμό στον οποίο θα χρησιμοποιηθούν.
- Οι χάρτες θερμότητας δείχνουν προσοχή αλλά δεν εγγυώνται εξήγηση. δεν μπορεί να θεωρηθεί ως αποδεικτικό στοιχείο.
- Η τελική διάγνωση και αναφορά ανήκει στον ακτινολόγο. Το AI είναι ένα επίπεδο υποστήριξης.
Εργασία εφαρμογής
Επιλέξτε ένα υπάρχον (ή υποθετικό) σενάριο ανίχνευσης εικόνας. Γράψτε ένα πλαίσιο αξιολόγησης για αυτό το μοντέλο: προσδιορίστε ποιες μετρήσεις (ευαισθησία, ειδικότητα, ψευδώς θετικά/ασθενής), ποιες υποομάδες (συσκευή, ηλικία, φύλο) και ποιο εξωτερικό σύνολο επικύρωσης θα χρησιμοποιήσετε. Στη συνέχεια, σημειώστε το ακριβές σημείο στη ροή εργασίας όπου ο ακτινολόγος πήρε μια απόφαση και εξηγήστε σε μια παράγραφο πώς εισήχθη η έξοδος του μοντέλου σε αυτήν την απόφαση.
λίστα ελέγχου
- [ ] Μπορώ να διακρίνω τους ρόλους ανίχνευσης, τμηματοποίησης και ιεράρχησης της ραδιολογικής τεχνητής νοημοσύνης.
- [ ] Μπορώ να αξιολογήσω την ευαισθησία, την ειδικότητα και την ψευδώς θετική επιβάρυνση μαζί.
- [ ] Γνωρίζω τι είναι η μετατόπιση πεδίου και γιατί απαιτείται εξωτερική επικύρωση.
- [ ] Συνειδητοποίησα ότι ο χάρτης θερμότητας δεν αποτελεί εξήγηση και απαιτείται επαλήθευση.
- [ ] Μπορώ να τοποθετήσω την έξοδο του μοντέλου ως είσοδο στην απόφαση του ακτινολόγου, αντί να την αντικαταστήσω.