Κέρδη:
- Δυνατότητα διαίρεσης ερευνών ικανοποίησης ασθενών και σχολίων δωρεάν κειμένου σε θέματα και εκτέλεσης ανάλυσης συναισθημάτων με υποστήριξη τεχνητής νοημοσύνης
- Δυνατότητα παραγωγής πρακτικών πληροφοριών και σχεδίων βελτίωσης από κείμενα παραπόνων και προτάσεων
- Δυνατότητα εντοπισμού παγίδων όπως μεροληψία δειγματοληψίας, αυτόματο σφάλμα ετικέτας συναισθήματος και προστασία απορρήτου πριν από την ερμηνεία
Οι ασθενείς δεν έρχονται μόνο για να βελτιωθούν. Επίσης βιώνουν και θυμούνται πώς τους φέρθηκαν, πόσο καιρό περίμεναν και σε ποιον μπορούσαν να πουν τα προβλήματά τους. Η ικανοποίηση των ασθενών είναι τόσο ηθική ευθύνη όσο και διάσταση απόδοσης που επηρεάζει τη φήμη του ιδρύματος και, σε ορισμένες περιπτώσεις, την αποζημίωση του. Ωστόσο, τα δεδομένα ικανοποίησης έρχονται συχνά σε δύο μορφές: έρευνες που μετρώνται με αστέρια/αξιολογήσεις και κριτικές ελεύθερης μορφής. Χρειάζεται χρόνος για να διαβάσετε εκατοντάδες δωρεάν σχόλια ένα προς ένα. Εδώ είναι ισχυρή η τεχνητή νοημοσύνη: διαχωρίζει εκατοντάδες κείμενα σε θέματα, εξάγει συναισθηματικό τόνο και συνοψίζει εξέχοντα παράπονα και επαίνους. Σε αυτήν την ενότητα θα δούμε πώς να το κάνουμε αυτό, αλλά το πιο σημαντικό, πώς να αποφύγουμε την εσφαλμένη ανάγνωση. Όριο: Η τεχνητή νοημοσύνη συνοψίζει κείμενο και εξάγει θέματα. αλλά η αυτόματη ετικέτα συναισθημάτων μπορεί να είναι εσφαλμένη, το δείγμα μπορεί να είναι προκατειλημμένο — η γενίκευση και η απόφαση ανήκει στον διευθυντή.
Βασικές έννοιες της εξόρυξης κειμένου
Μερικοί όροι: Η εξόρυξη κειμένου είναι η διαδικασία αυτόματης εξαγωγής προτύπων και νοημάτων από γραπτά κείμενα. Η ανάλυση συναισθήματος είναι η αυτόματη ταξινόμηση του θετικού/αρνητικού/ουδέτερου τόνου ενός κειμένου. Η εξαγωγή θέματος/θέματος είναι η ομαδοποίηση πολλαπλών σχολίων σε κοινά θέματα (καθαριότητα, αναμονή, επικοινωνία, τιμή). Το NPS (Net Promoter Score) είναι ένας δείκτης αφοσίωσης που βασίζεται στην ερώτηση "Θα μας προτείνατε;" Είναι χρήσιμο να σκεφτείτε δεδομένα ικανοποίησης σε δύο ξεχωριστές διαστάσεις: η ποσοτική διάσταση (αξιολογήσεις, NPS) σας δίνει την απάντηση στην ερώτηση "πόσο". Η ποιοτική διάσταση (δωρεάν σχόλια) φέρει την απάντηση στο ερώτημα «γιατί». Και τα δύο θα ήταν ημιτελή χωριστά. Όταν διαβάζετε μαζί, βλέπετε τόσο το μέγεθος του προβλήματος όσο και την πηγή του.
Αυτά τα οχήματα έχουν μια ισχυρή αλλά επικίνδυνη πλευρά. Η ανάλυση συναισθημάτων σκοντάφτει στις λεπτότητες της γλώσσας. Η πρόταση "Τέλεια, περίμενα 3 ώρες ξανά" μπορεί να φαίνεται θετική όταν την κοιτάξουμε λέξη προς λέξη επειδή περιέχει "υπέροχα". Ωστόσο, είναι ειρωνικό. Το "It wasn't bad" περιέχει άρνηση. Οι καταλήξεις και οι ιδιωματισμοί στα τουρκικά το κάνουν ακόμα πιο δύσκολο. Ο δεύτερος κίνδυνος είναι η δειγματοληψία μεροληψίας: η έρευνα καλύπτεται γενικά από άτομα που είναι είτε πολύ ικανοποιημένα είτε πολύ θυμωμένα. Η σιωπηλή πλειοψηφία στη μέση είναι αόρατη. Επομένως, η εικόνα που τραβάει η τεχνητή νοημοσύνη είναι η γνώμη "των συγγραφέων", όχι "όλων των ασθενών".
Η πραγματική αξία αυτών των εργαλείων δεν είναι στον αριθμό, αλλά στην κατεύθυνση. Η βαθμολογία με αστέρι σας λέει "ικανοποίηση 3,8" αλλά δεν σας λέει τι να διορθώσετε. Το δωρεάν κείμενο σας λέει ακριβώς τι σας ενοχλεί. Η δουλειά του AI είναι να μετατρέψει αυτήν την ακατέργαστη αφήγηση σε διαχειρίσιμους τίτλους: Δεν μπορείτε να διαβάσετε 600 σχόλια, αλλά μπορείτε να μετατρέψετε την πρόταση "30 τοις εκατό των σχολίων αναφέρουν σύγχυση δρομολόγησης" σε πράξη. Ωστόσο, αυτή η μείωση συνεπάγεται επίσης απώλεια: μια εντυπωσιακή, μοναδική αλλά σημαντική προειδοποίηση ασφάλειας από έναν μόνο ασθενή μπορεί να χαθεί στο «μικρό θέμα του 2 τοις εκατό». Επομένως, εκτός από την ποσοτική περίληψη, είναι απαραίτητο να ελέγχονται επιπλέον μεμονωμένα σχόλια που σηματοδοτούν την ασφάλεια ή σοβαρά παράπονα. Ο αριθμός δείχνει τη μεγάλη εικόνα και το μεμονωμένο σχόλιο δείχνει την κρίσιμη εξαίρεση.
Βήμα προς βήμα: Ανάλυση σχολίων με AI
- Ανωνυμοποίηση. Καταργήστε αναγνωριστικά όπως όνομα, όνομα ιατρού, αριθμός δωματίου από τα σχόλια.
- Χωρίστε το ανά θέμα. Ζητήστε από το AI να ομαδοποιήσει τα σχόλια σε κοινά θέματα. Εσείς καθορίζετε τον αριθμό των τίτλων.
- Βγάλτε τον συναισθηματικό τόνο αλλά επαληθεύστε τον. Λάβετε το θετικό/αρνητικό ποσοστό για κάθε θέμα. Στη συνέχεια, διαβάστε μόνοι σας τα δείγματα σχολίων.
- Διορατικότητα στη δράση. Επιλέξτε το πιο συχνό και δημοφιλές θέμα. Συντάσσεται συγκεκριμένη πρόταση βελτίωσης.
- Έλεγχος δείγματος. Πόσοι το έγραψαν, ποιοι το έγραψαν, είναι αντιπροσωπευτικό; Κάντε τη γενίκευση σύμφωνα με αυτό το όριο.
- Διευθυντική απόφαση. Η απόφαση βελτίωσης και η ιεράρχηση ανήκουν στον διαχειριστή. Το AI απλώς προετοιμάζει τη διορατικότητα.
Προσοχή: Ένας αριθμός όπως "78 τοις εκατό θετικός" που δίνεται από το AI μπορεί να έχει παρεξηγήσει την ειρωνεία και την άρνηση. Φροντίστε να διαβάσετε μόνοι σας μερικές ακατέργαστες κριτικές για κάθε θέμα και να ελέγξετε αν η ετικέτα ταιριάζει με την πραγματικότητα.
τρεις μίνι θήκες
Περίπτωση 1 — Κρυφό θέμα. Ένα νοσοκομείο συγκέντρωνε 640 δωρεάν σχόλια το μήνα. κανείς δεν μπορούσε να τα διαβάσει όλα. Η μονάδα δικαιωμάτων ασθενών έδωσε τα ανώνυμα σχόλια στην YZ και τα ανέθεσε στο θέμα. Το μεγαλύτερο αρνητικό θέμα δεν ήταν ο «χρόνος αναμονής» όπως αναμενόταν, αλλά η «σύγχυση δρομολόγησης» (οι ασθενείς δεν μπορούσαν να καταλάβουν σε ποιον όροφο να πάνε). Με μια απλή σήμανση και διευθέτηση του προσωπικού καθοδήγησης, αυτό το θέμα μειώθηκε σημαντικά σε δύο μήνες. Το AI έκανε ορατό το κρυφό θέμα. Η λύση ανήκε στην ομάδα.
Περίπτωση 2 — Παγίδα ειρωνείας. Μια μονάδα ήταν ευχαριστημένη με τη σύνοψη «82 τοις εκατό θετική» της AI και είπε στη διοίκηση ότι «η ικανοποίηση είναι υψηλή». Ο αξιωματικός ποιότητας διάβασε δείγματα σχολίων: Ειρωνικές προτάσεις όπως "Καταπληκτικό, μπήκα σε 2 ώρες μετά την ώρα του ραντεβού" θεωρήθηκαν θετικές. Το πραγματικό θετικό ποσοστό ήταν χαμηλότερο. Ο χειριστής βαθμολόγησε την ετικέτα AI διαβάζοντας με το χέρι αρκετές δεκάδες σχόλια και διόρθωσε την παρουσίαση.
Περίπτωση 3 — Μεροληψία δειγματοληψίας. Σε ένα εξωτερικό ιατρείο, μόνο 45 άτομα απάντησαν στην ηλεκτρονική έρευνα και τα περισσότερα ήταν πολύ αρνητικά. Ένας διευθυντής πανικοβλήθηκε ότι «η πολυκλινική έχει χρεοκοπήσει». Ο αναλυτής υπενθύμισε ότι αυτά τα 45 άτομα ήταν ένα μικρό και προκατειλημμένο κομμάτι από τους 3.200 ασθενείς εκείνο τον μήνα και ότι οι θυμωμένοι άνθρωποι ανταποκρίθηκαν περισσότερο στην έρευνα. Αντί για πανικό, ξεκίνησε ένα αντιπροσωπευτικό exit poll. Η πραγματική εικόνα ήταν πολύ πιο ισορροπημένη.
Τέσσερα πρότυπα με δυνατότητα αντιγραφής
1) Εξαγωγή θέματος:
Ο ρόλος σας: βοηθός αναλυτή εμπειρίας ασθενών. Παρακάτω είναι ανώνυμα σχόλια ασθενών ανεξάρτητων επαγγελματιών (χωρίς όνομα/όνομα ιατρού). Εργασία: χωρίστε τα σχόλια σε 6-8 κοινά θέματα (π.χ. αναμονή, επικοινωνία, καθαρισμός, παραπομπή, χρέωση). Δώστε πόσα σχόλια είχατε για κάθε θέμα και δώστε 2 δείγματα εισαγωγικών. Μην κάνετε τα σχόλια. Απλά χρησιμοποιήστε αυτό που σας δίνω.
2) Συναίσθημα + ειδοποίηση επικύρωσης:
Αφαιρέστε τη θετική/αρνητική/ουδέτερη αναλογία για κάθε θέμα. ΑΛΛΑ επισημάνετε ότι η ειρωνεία, η άρνηση και οι σαρκαστικές εκφράσεις μπορεί να παραπλανήσουν την ετικέτα συναισθημάτων και αναφέρετε τα 5 σχόλια για τα οποία δεν είστε σίγουροι ξεχωριστά ως "ελέγχονται χειροκίνητα". Παρουσιάζοντας ως ακριβές ποσοστό. δώστε περίπου.
3) Διορατικότητα προσανατολισμένη στη δράση:
Επιλέξτε το πιο συχνό και πιο αρνητικό θέμα. Για αυτό το θέμα: μια περίληψη της πιθανής βασικής αιτίας, 3 βελτιώσεις που μπορούν να εφαρμοστούν βραχυπρόθεσμα και ο εκτιμώμενος αντίκτυπος/κόστος του καθενός. Δηλώστε ότι αυτή είναι μια πρόταση και η απόφαση εναπόκειται στον διευθυντή.
4) Δείγμα σημείωσης ελέγχου:
Σε αυτήν την ανάλυση, ο συνολικός αριθμός των απαντήσεων [N] είναι ο αριθμός των ασθενών σε αυτήν την περίοδο [M]. Γράψτε μου μια προειδοποιητική σημείωση σχετικά με την αντιπροσωπευτικότητα του δείγματος: εάν το ποσοστό ανταπόκρισης είναι χαμηλό ή οι θυμωμένοι ασθενείς υπερεκπροσωπούνται, εξηγήστε τους κινδύνους γενίκευσης των αποτελεσμάτων σε 4 σημεία.
Αδύναμη προτροπή / Ισχυρή προτροπή
Αδύναμη προτροπή:
Πείτε μου αν αυτά τα σχόλια είναι καλά ή κακά, ποιο ποσοστό είναι ικανοποιημένο.
Χωρίς θέματα, χωρίς επαλήθευση, χωρίς προειδοποιήσεις δείγματος. Επιστρέφει ένα μόνο παραπλανητικό ποσοστό.
Ισχυρή προτροπή:
Παρακάτω είναι [N] ανώνυμα σχόλια ασθενών, αριθμός ασθενών εκείνη τη στιγμή [M]. Διαχωρίστε τα σχόλια ανά θέμα, δώστε κατά προσέγγιση συναισθηματικό τόνο για κάθε θέμα, αλλά σημειώστε εάν είναι αβέβαια λόγω ειρωνείας/άρνησης. Σχεδιάστε μια πρόταση για βελτίωση στο πιο καίριο θέμα και προσθέστε μια προειδοποιητική σημείωση σχετικά με την αντιπροσωπευτικότητα του δείγματος.
βήμα
Συνεισφορά του AI
ανθρώπινος έλεγχος
Διαχωρισμός θεμάτων
Ομαδοποιεί εκατοντάδες σχόλια
Έχουν νόημα οι τίτλοι;
ετικέτα συναισθημάτων
Παράγει γρήγορο τόνο
Έλεγχος ειρωνείας/άρνησης
διορατικότητα
Προσχέδιο βελτίωσης
Εφαρμογή, κόστος
γενίκευση
Παρέχει περίληψη
Είναι το δείγμα αντιπροσωπευτικό;
Συνήθη λάθη
- Αποδοχή της ταμπέλας του συναισθήματος όπως είναι. Η ειρωνεία και η άρνηση είναι παραπλανητικές. Διαβάστε τα παραδείγματα.
- Γενίκευση από μικρό/προκατειλημμένο δείγμα. 45 θυμωμένα σχόλια δεν αντιπροσωπεύουν όλους τους ασθενείς.
- Παράκαμψη της ανωνυμοποίησης. Τα σχόλια μπορεί να περιλαμβάνουν το όνομα του γιατρού/ασθενούς. αφαιρέστε το.
- Εστιάζοντας μόνο στα αρνητικά. Τα θετικά θέματα δείχνουν επίσης τι θα προστατεύσετε.
- Λάθος διορατικότητα για απόφαση. Η απόφαση και η προτεραιότητα για βελτίωση ανήκει στον μάνατζερ.
Συμβουλή: Στο τέλος κάθε ανάλυσης, διαβάστε μόνοι σας 15-20 τυχαία σχόλια και συγκρίνετε τα με την ετικέτα του AI. Αυτή η συνήθεια «βαθμονόμησης» των 10 λεπτών παγιδεύει την ειρωνεία και την άρνηση και σας διδάσκει πόσο να εμπιστεύεστε τη σύντομη τεχνητή νοημοσύνη.
Συνοπτικά
Τα δεδομένα ικανοποίησης ασθενών παρέχονται τόσο σε παρτιτούρες όσο και σε δωρεάν κείμενο και η τεχνητή νοημοσύνη είναι πολύ ισχυρή στο να αναλύει εκατοντάδες σχόλια σε θέματα και να τα συνοψίζει. Αλλά η αυτόματη ετικέτα συναισθημάτων σφάλλει στην πλευρά της ειρωνείας και της άρνησης. Η δειγματοληψία έρευνας είναι συχνά μεροληπτική. Επομένως, η έξοδος AI δεν μπορεί να γενικευτεί χωρίς επαλήθευση με ακατέργαστες ερμηνείες και μέγεθος δείγματος. Διατηρείται η ανωνυμία, προετοιμάζεται η διορατικότητα. Όμως η απόφαση και η προτεραιότητα για βελτίωση ανήκει πάντα στον μάνατζερ.
Εργασία εφαρμογής
Αποκτήστε ένα ανώνυμο σύνολο σχολίων (20-30 σχόλια, πραγματικά ή υποθετικά). Ζητήστε από την τεχνητή νοημοσύνη για το θέμα και τον τόνο με τα πρότυπα "Συμπεράσματα θέματος" και "Ειδοποίηση συναισθήματος + επικύρωσης". Στη συνέχεια, διαβάστε μόνοι σας τουλάχιστον 10 ανεπεξέργαστα σχόλια και συγκρίνετε τα με την ετικέτα του AI. Γράψτε σε πόσα από αυτά βρίσκετε λάθος λόγω ειρωνείας/άρνησης και αντιπροσωπευτικότητας του δείγματος σε 5 στοιχεία.
λίστα ελέγχου
- [ ] Έχω ανωνυμοποιήσει σχόλια (χωρίς όνομα ασθενούς/γιατρού);
- [ ] Έχω βαθμονομήσει την ετικέτα συναισθήματος με ακατέργαστα σχόλια;
- [ ] Έχω εξετάσει το μέγεθος του δείγματος και την προκατάληψη;
- [ ] Έχω ψάξει για θετικά και αρνητικά θέματα;
- [ ] Έχω αφήσει την απόφαση βελτίωσης και την προτεραιότητα στον διευθυντή;