Κέρδη:
- Δυνατότητα επαλήθευσης της αυθεντικότητας της πηγής (επίπεδο 1) και της πιστότητας περιεχομένου (επίπεδο 2) χωριστά
- Δυνατότητα αναγνώρισης παραμόρφωσης αντιστοιχίζοντας τις παραθέσεις με την κύρια πηγή και αφαιρώντας τις από το πλαίσιο
- Δυνατότητα διατήρησης της ακεραιότητας των παραπομπών διορθώνοντας πληροφορίες αποτύπωσης, σελίδας και εκτύπωσης
Αναφέραμε τον κίνδυνο κατασκευασμένων πηγών στην προηγούμενη ενότητα. Σε αυτήν την ενότητα, θα το πάμε ένα βήμα παραπέρα και θα μετατρέψουμε τα θέματα της επαλήθευσης πηγής (η διαδικασία ανεξάρτητης επιβεβαίωσης ότι ένα απόσπασμα, μια αναφορά ή ένας ισχυρισμός υπάρχει πράγματι στην καθορισμένη πηγή, στην καθορισμένη μορφή) και την ακεραιότητα της αναφοράς (την αρχή ότι κάθε αναφορά σε ένα έργο είναι γνήσια, με τη σωστή αναφορά και χρησιμοποιείται πιστά στο πλαίσιο) σε μια συστηματική μέθοδο. Η αξία ενός έργου στους ανθρωπιστικούς και κοινωνικούς τομείς εξαρτάται σε μεγάλο βαθμό από την αξιοπιστία των πηγών του. Στην εποχή της τεχνητής νοημοσύνης, αυτό έχει γίνει ακόμη πιο κρίσιμο, επειδή υπάρχει πλέον ο κίνδυνος όχι μόνο να «αναφέρεται λάθος η πηγή» αλλά και να «παρουσιάζεται η πηγή ως πραγματική όταν δεν υπάρχει καθόλου».
Σε αυτήν την ενότητα, θα καθορίσουμε τα βήματα της επαλήθευσης παραπομπών, τη συμπεριφορά δημιουργίας αναφορών της τεχνητής νοημοσύνης, τον έλεγχο "πιστότητας περιεχομένου" και ένα σύστημα ελέγχου που προστατεύει την ακαδημαϊκή αξιοπιστία.
Δύο ξεχωριστά επίπεδα ελέγχου ταυτότητας
Η επαλήθευση πηγής θέτει δύο διαφορετικές ερωτήσεις ξεχωριστά.
Επίπεδο 1 — Είναι η πηγή πραγματική; Υπάρχει πραγματικά αυτό το άρθρο, βιβλίο, σελίδα; Είναι σωστός ο συγγραφέας, το έτος και το περιοδικό; Αυτό είναι το κυνήγι κατασκευής-πηγής της προηγούμενης μονάδας και επιλύεται με ανεξάρτητο έλεγχο καταλόγου.
Επίπεδο 2 — Είναι το περιεχόμενο πιστό; Ακόμα κι αν η πηγή είναι πραγματική, η γνώμη, το απόσπασμα ή τα δεδομένα που της αποδίδονται εμφανίζονται όντως έτσι σε αυτήν την πηγή; Η τεχνητή νοημοσύνη μπορεί να αποδώσει μια λανθασμένη άποψη σε μια πραγματική πηγή: μπορεί να αποδώσει σε ένα υπάρχον βιβλίο μια πρόταση που δεν υπάρχει σε αυτό το βιβλίο ή μια διατριβή που στην πραγματικότητα δεν υπερασπίζεται ο συγγραφέας. Αυτό είναι το δεύτερο και πιο ύπουλο λάθος γιατί περνάει τον πρώτο έλεγχο επειδή η πηγή είναι πραγματική.
Μια παραπομπή που δεν περνά και από τα δύο επίπεδα δεν πρέπει να εισέρχεται στην εργασία σας.
Συμβουλή: Όταν επαληθεύετε ένα απόσπασμα, ελέγξτε αυτά τα τρία πράγματα μαζί: (1) υπάρχει πηγή, (2) το απόσπασμα εμφανίζεται αυτολεξεί σε αυτήν την πηγή, (3) το απόσπασμα έχει αφαιρεθεί από τα συμφραζόμενα και το νόημά του έχει αλλάξει; Ο τρίτος έλεγχος είναι αυτός που παραλείπεται πιο συχνά και είναι από όπου προέρχονται οι μεγαλύτερες στρεβλώσεις.
Βήματα επαλήθευσης
1. Καταγράψτε το αποτύπωμα. Συγγραφέας, τίτλος, έτος, τόπος δημοσίευσης — αντιστοιχίστε τα όλα σε μια αξιόπιστη βάση δεδομένων. Διορθώστε ή απορρίψτε τυχόν ετικέτες που δεν ταιριάζουν.
2. Μεταβείτε στην κύρια πηγή. Επιβεβαιώστε μια γνώμη ή ένα απόσπασμα απευθείας από το αρχικό κείμενο, όχι από μια δευτερεύουσα περίληψη. Δείτε με τα μάτια σας την πηγή του ισχυρισμού «Είπε κι έτσι».
3. Αντιστοιχίστε ακριβώς το απόσπασμα. Κάθε πρόταση σε εισαγωγικά πρέπει να αναφέρεται αυτολεξεί στην πηγή. Η τεχνητή νοημοσύνη παράγει συχνά «στενές αλλά όχι ακριβείς» εισαγωγικά. Ακόμη και μια αλλαγή λέξης ακυρώνει το απόσπασμα.
4. Ελέγξτε το πλαίσιο. Τι σημαίνει το απόσπασμα στο αρχικό του πλαίσιο; Αυτό υπερασπίζεται ο συγγραφέας ή μεταφέρει και αντικρούει μια αντίθετη άποψη; Ένα απόσπασμα που βγαίνει εκτός πλαισίου μπορεί να οδηγήσει τον συγγραφέα να πει ακριβώς το αντίθετο.
5. Ασφαλίστε τη σελίδα και εκτυπώστε. Οι αριθμοί σελίδων ποικίλλουν σε διαφορετικές εκδόσεις. Σημειώστε ποια έκδοση χρησιμοποιήσατε.
Προσοχή: Η πιο επικίνδυνη παραμόρφωση είναι να βγάλεις μια πραγματική πρόταση από έναν πραγματικό συγγραφέα εκτός πλαισίου. Για παράδειγμα, παραθέτοντας μια άποψη που ένας φιλόσοφος άνοιξε με «κάποιος μπορεί να ισχυριστεί...» και μετά διέψευσε, σαν να ήταν δική του διατριβή. Μην χρησιμοποιείτε εισαγωγικά χωρίς να διαβάσετε την παράγραφο που περιβάλλει το απόσπασμα.
τρεις μίνι θήκες
Περίπτωση 1 — Πραγματική πηγή, ψεύτικο απόσπασμα. Ένας ερευνητής θέλησε να χρησιμοποιήσει ένα απόσπασμα του AI που βασίστηκε σε ένα βιβλίο που υπήρχε στην πραγματικότητα. Όταν άνοιξε το βιβλίο και κοίταξε τη σχετική σελίδα, η πρόταση ήταν «κοντή» αλλά όχι ακριβής και οι δύο λέξεις κλειδιά ήταν διαφορετικές. Αυτή η διαφορά άλλαξε την έμφαση της πρότασης. Ο ερευνητής χρησιμοποίησε το κατά λέξη κείμενο. Το επίπεδο 1 πέρασε (η πηγή είναι πραγματική), αλλά υπήρξε πρόβλημα με το επίπεδο 2 (πιστότητα περιεχομένου).
Περίπτωση 2 — Παράθεση εκτός πλαισίου. Ένας μαθητής ανέκτησε μια πρόταση από ένα άρθρο ηθικής μέσω AI: ο συγγραφέας φαινόταν να υποστηρίζει μια συγκεκριμένη άποψη. Όταν ο μαθητής διάβασε την αρχική παράγραφο, είδε ότι ο συγγραφέας κατασκεύασε αυτήν την πρόταση για να μεταφέρει μια αντίθετη άποψη και στη συνέχεια τη διέψευσε αμέσως. Το απόσπασμα είχε τον συγγραφέα να λέει ακριβώς το αντίθετο. Ο έλεγχος περιβάλλοντος απέτρεψε σοβαρή παραμόρφωση.
Περίπτωση 3 — Διαφορά πίεσης. Ένας φοιτητής διδάκτορας βασίστηκε στον αριθμό σελίδας που έδωσε η AI. Όταν ο σύμβουλός του έλεγξε, η σελίδα δεν ταιριάζει. επειδή το AI χρησιμοποίησε την αρίθμηση μιας διαφορετικής έκδοσης. Ο μαθητής διόρθωσε την έκδοση που χρησιμοποιούσε και επαλήθευσε ξανά όλους τους αριθμούς σελίδων. 1 διαφορά έκδοσης είχε μετατοπίσει όλες τις αναφορές.
Αδύναμη προτροπή / Ισχυρή προτροπή
Αδύναμη προτροπή:
Βρείτε μου ένα απόσπασμα και μια πηγή για αυτή τη γνώμη.
Αυτή η προτροπή παράγει τόσο κατασκευασμένη πηγή όσο και εκτός πλαισίου/λανθασμένη προσφορά, αποκρύπτοντας το βάρος της επαλήθευσης.
Ισχυρή προτροπή:
Ο ρόλος σας: σχολαστικός ελεγκτής παραπομπών. Θα σας δώσω ένα κείμενο και τις παραπομπές του. Για κάθε απόσπασμα: 1) Σημειώστε εάν το απόσπασμα εμφανίζεται αυτολεξεί στο κείμενο (εάν όχι, πείτε "δεν ταιριάζει"). 2) Δείξτε τις 2 προτάσεις που περιβάλλουν το απόσπασμα ώστε να μπορώ να δω το πλαίσιο. 3) Υποδείξτε εάν ο συγγραφέας χρησιμοποίησε αυτήν την πρόταση για να υπερασπιστεί ή να εκφράσει μια αντίθετη άποψη. ΜΗΝ κατασκευάζετε πηγές. απλώς δουλέψτε με το κείμενο που δίνω. Κείμενο και εισαγωγικά: [επικόλληση]
Αυτή η προτροπή ελέγχει την αντιστοίχιση ένας προς έναν, το πλαίσιο και τη διάκριση άμυνας/μεταφοράς — καλύπτοντας και τα τρία επίπεδα.
Τέσσερα πρότυπα με δυνατότητα αντιγραφής
1) Ακριβής αντιστοίχιση προσφοράς:
Παρακάτω δίνω ένα κείμενο πηγής και ένα απόσπασμα υποψηφίου. Πείτε μου αν το απόσπασμα εμφανίζεται αυτολεξεί (λέξη προς λέξη) στην πηγή. Εάν όχι, σημειώστε τις λέξεις που είναι διαφορετικές. Προσθήκη σχολίου. Πηγή: [κείμενο] Υποψήφια προσφορά: [παραπομπή]
2) Έλεγχος πιστότητας περιβάλλοντος:
Προσδιορίστε, στο πλαίσιο της πηγής, εάν το παρακάτω απόσπασμα είναι γνώμη του ίδιου του συγγραφέα ή άποψη που εκφράζει/επικρίνει. Δείξτε τις προτάσεις πριν και μετά το απόσπασμα. Εξηγήστε πώς μπορεί να παραμορφωθεί το νόημά του εάν αφαιρεθεί από τα συμφραζόμενα. Πηγή: [κείμενο] Παράθεση: [απόσπασμα]
3) Λίστα επαλήθευσης παραπομπών:
Για την ακόλουθη αναφορά, εμφανίζεται μια λίστα ελέγχου ως λίστα ελέγχου όλων των πεδίων που πρέπει να ελέγξω στον μεμονωμένο κατάλογο (συγγραφέας, τίτλος, έτος, εκδότης/περιοδικό, τόμος/τεύχος, σελίδα, έκδοση, DOI). SENεπιβεβαίωση της γνησιότητάς του· απλά δώστε τα βήματα ελέγχου. Παραπομπή: [αποτύπωμα]
4) Ακρίβεια παραγράφου:
Παρακάτω δίνω ένα κείμενο-πηγή και την παράφρασή μου. Είναι η παράφραση πιστή στο νόημα της πηγής ή προσθέτει/αφαιρεί μια απόχρωση; Αν όχι, δείξτε πού αποκλίνει. Βασιστείτε μόνο στην πηγή. Πηγή: [κείμενο] Παράγραφος: [κείμενο]
Πίνακας επιπέδων ελέγχου ταυτότητας
έλεγχος
Ερώτηση
Πώς να επαληθεύσετε
Κίνδυνος εάν παραλειφθεί
πραγματικότητα της πηγής
Υπάρχει;
Ανεξάρτητος κατάλογος
απόδοση φάντασμα
ακρίβεια αποτύπωσης
Είναι σωστό το αποτύπωμα;
Ταίριασμα με κατάλογο
λάθος αναφορά
Απόσπασμα κυριολεξία
Είναι το ίδιο λέξη προς λέξη;
Σύγκριση με πρωτότυπο
κατασκευασμένο απόσπασμα
Πιστότητα περιβάλλοντος
Διατηρείται το νόημα;
Διαβάζοντας την παράγραφο του περιβάλλοντος
αντίστροφη παραμόρφωση
Σελίδα/εκτύπωση
Είναι σωστός ο αριθμός;
Διόρθωση της εκτύπωσης
Αναφορές για καγιάκ
Συνήθη λάθη
- Θεωρώντας το απόσπασμα ως αληθινό μόνο και μόνο επειδή η πηγή είναι πραγματική. Ένας πόρος που περνάει το επίπεδο 1 μπορεί να αποτύχει στο επίπεδο 2 (περιεχόμενο). Ελέγξτε και τα δύο ξεχωριστά.
- Δεν διαβάζει το πλαίσιο. Η χρήση του αποσπάσματος χωρίς να δει το περιβάλλον του μπορεί να οδηγήσει τον συγγραφέα να πει το αντίθετο.
- Παρεξηγώντας το απόφθεγμα "σχεδόν" ως κυριολεκτικό. Αν αλλάξει έστω και μία λέξη, τα εισαγωγικά είναι άκυρα. Είτε πάρτε το κατά λέξη είτε μετατρέψτε το σε παραφράσεις.
- Χωρίς έλεγχο της παράφρασης. Υποθέτοντας ότι η δική σας παράφραση είναι πιστή στην πηγή. Η προσθήκη/αφαίρεση αποχρώσεων είναι επίσης παραμόρφωση.
- Εμπιστευόμαστε τυφλά τον αριθμό της σελίδας. Οι διαφορές εκτύπωσης μετατοπίζουν τους αριθμούς. Διορθώστε την πίεση που χρησιμοποιείτε.
Συνοπτικά
Η επαλήθευση πηγής αποτελείται από δύο ξεχωριστά επίπεδα: εάν η πηγή είναι αυθεντική και εάν το περιεχόμενο έχει μεταδοθεί πιστά. Η τεχνητή νοημοσύνη παράγει σφάλματα και στα δύο επίπεδα — μη αυθεντικές πηγές και προβολές που αποδίδονται εσφαλμένα σε πραγματικές πηγές. Για ασφαλή απόδοση, καταγράψτε το byline, μεταβείτε στην κύρια πηγή, αντιστοιχίστε το απόσπασμα κατά λέξη, διαβάστε το περιεχόμενο και καρφιτσώστε την έκδοση. Η πιο ύπουλη διαστρέβλωση είναι να βγάλεις μια πραγματική πρόταση εκτός πλαισίου. Η ακεραιότητα των παραπομπών είναι το θεμέλιο της ακαδημαϊκής σας αξιοπιστίας στις ανθρωπιστικές επιστήμες. Το AI μπορεί να το επιταχύνει, αλλά εσείς είστε ο εγγυητής.
Εργασία εφαρμογής
- Ζητήστε από το AI να δημιουργήσει μια παράγραφο με 3 εισαγωγικά για ένα θέμα.
- Για κάθε απόσπασμα, μεταβείτε στην πηγή και ελέγξτε την λέξη προς λέξη με το πρότυπο «ταύτιση εισαγωγικών κατά λέξη».
- Εξετάστε το πλαίσιο τουλάχιστον ενός αποσπάσματος με το πρότυπο "έλεγχος πιστότητας περιβάλλοντος": είναι η γνώμη του ίδιου του συγγραφέα;
- Παραφράστε ένα απόσπασμα με τα δικά σας λόγια και ελέγξτε την πιστότητά του με το πρότυπο "ακρίβεια παράφρασης".
- Επιβεβαιώστε τον αριθμό σελίδας μιας αποτύπωσης σύμφωνα με την έκδοση που χρησιμοποιείτε.
λίστα ελέγχου
- [ ] Επιβεβαίωσα την αυθεντικότητα κάθε πόρου (επίπεδο 1) στον ανεξάρτητο κατάλογο.
- [ ] Έλεγξα την πιστότητα περιεχομένου (επίπεδο 2) κάθε προσφοράς στο πρωτότυπο.
- [ ] Έχω επιβεβαιώσει ότι τα εισαγωγικά μέσα στα εισαγωγικά είναι κυριολεκτικά.
- [ ] Διάβασα το πλαίσιο των εισαγωγικών και βεβαιώθηκα ότι δεν υπήρχαν παραμορφώσεις.
- [ ] Έχω ελέγξει ότι οι παράγραφοι μου είναι πιστές στην πηγή.
- [ ] Διόρθωσα τους αριθμούς σελίδων σύμφωνα με την έκδοση που χρησιμοποίησα.