Nyereség:
- Lehetőség a forrás hitelességének (1. réteg) és a tartalom hűségének (2. réteg) külön-külön történő ellenőrzésére
- Képes a torzítás felismerésére azáltal, hogy az idézeteket pontosan illeszti az elsődleges forráshoz, és kiemeli őket a kontextusból
- Lehetőség a hivatkozás integritásának megőrzésére az impresszum, az oldal és a nyomtatási információk rögzítésével
Az előző egységben érintettük a koholt források veszélyét. Ebben az egységben egy lépéssel tovább lépünk, és szisztematikus módszerré alakítjuk át a forrásellenőrzés (az idézet, hivatkozás vagy állítás független igazolásának folyamata, hogy a megadott forrásban, a megadott formában valóban létezik) és az idézet integritása (az az elv, hogy a műben minden hivatkozás valódi, helyes hivatkozással és a kontextushoz hűen kerül felhasználásra). A bölcsészettudományi és szociális területeken végzett munka értéke nagyban függ a források megbízhatóságától. A mesterséges intelligencia korában ez még kritikusabbá vált, mert ma már fennáll annak a veszélye, hogy nemcsak „tévesen idézzük a forrást”, hanem „valósnak mutatjuk be a forrást, amikor egyáltalán nem létezik”.
Ebben az egységben a hivatkozás-ellenőrzés lépéseit, az AI idézetgenerálási viselkedését, a "tartalomhűség"-ellenőrzést és az akadémiai megbízhatóságot védő vezérlőrendszert határozzuk meg.
Két külön hitelesítési réteg
A forrásellenőrzés két különböző kérdést tesz fel külön-külön.
1. réteg – Valódi a forrás? Valóban létezik ez a cikk, könyv, oldal? Helyes a szerző, az évszám és a folyóirat? Ez az előző egység gyártási forráskeresése, és független katalógusvezérléssel oldják meg.
2. réteg – Hű a tartalom? Még ha valós is a forrás, valóban így jelenik meg abban a forrásban a hozzá tulajdonított vélemény, idézet vagy adat? A mesterséges intelligencia hamis nézetet tulajdoníthat egy valós forrásnak: egy létező könyvnek tulajdoníthat egy olyan mondatot, amely nem létezik abban a könyvben, vagy olyan tézist, amelyet a szerző valójában nem véd meg. Ez a második és alattomosabb hiba, mert átmegy az első ellenőrzésen, mert a forrás valódi.
Olyan idézet, amely nem megy át mindkét rétegen, nem kerülhet be a munkájába.
Tipp: Az idézet ellenőrzésekor ellenőrizze együtt ezt a három dolgot: (1) van-e forrás, (2) az idézet szó szerint szerepel-e abban a forrásban, (3) az idézet kiragadt-e a szövegkörnyezetből, és megváltozott-e a jelentése? A harmadik ellenőrzés a leggyakrabban kihagyott, és innen erednek a legnagyobb torzítások.
Ellenőrzési lépések
1. Katalógusba vétele az impresszum. Szerző, cím, év, megjelenés helye – mindezt egy megbízható adatbázisban párosítsa össze. Javítsa ki vagy dobja el a nem egyező címkéket.
2. Lépjen az elsődleges forráshoz. Erősítsen meg véleményt vagy idézetet közvetlenül az eredeti szövegből, ne egy másodlagos összefoglalóból. Nézze meg saját szemével az "Így és így szólt" állítás forrását.
3. Pontosan egyeztesse az idézetet! Minden idézőjelbe tett mondatot szó szerint kell idézni a forrásban. Az AI gyakran „közeli, de nem pontos” idézeteket állít elő; Még egy szóváltás is érvényteleníti az idézetet.
4. Ellenőrizze a kontextust. Mit jelent az idézet eredeti szövegkörnyezetében? A szerző ezt védi, vagy ellentétes nézetet közvetít és cáfol? A szövegkörnyezetből kiragadott idézet arra késztetheti a szerzőt, hogy ennek éppen az ellenkezőjét mondja.
5. Rögzítse az oldalt és nyomtasson. Az oldalszámok a különböző kiadásokban eltérőek; Jegyezze fel, melyik kiadást használta.
Vigyázat: A legveszélyesebb torzítás az, ha egy valódi szerző valódi mondatát kiragadjuk a szövegkörnyezetből. Például egy olyan vélemény idézése, amelyet egy filozófus azzal nyitott, hogy "valaki azt állíthatja...", majd megcáfolt, mintha ez a saját tézise lenne. Ne használjon idézőjeleket az idézet körüli bekezdés elolvasása nélkül.
három mini tok
1. eset – Valódi forrás, hamis idézet. Egy kutató egy AI által adott idézetet akart használni, amely egy valóban létező könyven alapult. Amikor kinyitotta a könyvet, és megnézte a megfelelő oldalt, a mondat „közeli” volt, de nem pontos, és a két kulcsszó különbözött; Ez a különbség megváltoztatta a mondat hangsúlyát. A kutató a szó szerinti szöveget használta. Az 1. réteg sikeres volt (a forrás valódi), de probléma lépett fel a 2. réteggel (tartalomhűség).
2. eset – A szövegkörnyezetből kiragadott idézet. Egy diák mesterséges intelligencia segítségével kikeresett egy mondatot egy etikai cikkből: úgy tűnt, hogy a szerző egy bizonyos nézetet képvisel. Amikor a tanuló elolvasta az eredeti bekezdést, látta, hogy a szerző úgy alkotta meg ezt a mondatot, hogy ezzel ellentétes nézetet közvetítsen, majd azonnal megcáfolta azt. Az idézetben a szerző pont az ellenkezőjét mondta. A kontextus-ellenőrzés megakadályozta a súlyos torzításokat.
3. eset – Nyomáskülönbség. Egy doktorandusz az AI által megadott oldalszámra támaszkodott. Amikor a tanácsadója ellenőrizte, az oldal nem egyezik; mert az AI egy másik kiadás számozását használta. A diák kijavította az általa használt kiadást, és újraellenőrizte az összes oldalszámot. Az 1 kiadás eltérése minden hivatkozást eltolt.
Gyenge felszólítás / Erős felszólítás
Gyenge felszólítás:
Keressen idézetet és forrást ehhez a véleményhez.
Ez a felszólítás kitalált forrást és kontextuson kívüli/téves idézetet is eredményez, eltakarva az ellenőrzés terhét.
Erőteljes felszólítás:
Az Ön szerepe: aprólékos idézet-ellenőrző. Adok egy szöveget és annak hivatkozásait. Minden idézetnél: 1) Jelölje meg, hogy az idézet szó szerint szerepel-e a szövegben (ha nem, mondja azt, hogy "nem egyezik"). 2) Mutasd meg az idézet körüli 2 mondatot, hogy lássam a szövegkörnyezetet. 3) Jelezze, hogy a szerző ezt a mondatot arra használta-e, hogy megvédje vagy ellentétes nézetet közvetítsen. NE gyártson forrásokat; csak dolgozzon az általam megadott szöveggel. Szöveg és idézetek: [beillesztés]
Ez a prompt szabályozza az egy az egyhez illeszkedést, a kontextust és a védekezés/átadás megkülönböztetését – mindhárom rétegre kiterjedően.
Négy másolható sablon
1) Pontos árajánlat egyezés:
Az alábbiakban egy forrásszöveget és egy jelölt idézetet adok. Mondja meg, hogy az idézet szó szerint (szóról szóra) szerepel-e a forrásban. Ha nem, jelölje meg a különböző szavakat. Megjegyzés hozzáadása.Forrás: [szöveg] Idézetjelölt: [idézet]
2) Kontextushűség ellenőrzése:
Döntse el a forrás összefüggésében, hogy az alábbi idézet a szerző saját vagy általa megfogalmazott/kritikus vélemény-e. Mutasd meg az idézet előtti és utáni mondatokat! Magyarázza el, hogyan torzulhat el jelentése, ha kiragadjuk a szövegkörnyezetből. Forrás: [szöveg] Idézet: [idézet]
3) Hivatkozás-ellenőrző lista:
A következő idézetnél egy ellenőrzőlista jelenik meg ellenőrzőlistaként, amely tartalmazza az összes olyan mezőt, amelyet az egyes katalógusban ellenőriznem kell (szerző, cím, évszám, kiadó/folyóirat, kötet/kiadás, oldal, kiadás, DOI). SENhitelességének megerősítése; csak adja meg az ellenőrzési lépéseket. Idézet: [impresszum]
4) Bekezdéspontosság:
Az alábbiakban megadom a forrásszöveget és a parafrázisomat. Hű-e a parafrázis a forrás jelentéséhez, vagy hozzáad/kivon egy árnyalatot? Ha nem, mutasd meg, hol tér el. Csak a forrásra hagyatkozzon.Forrás: [szöveg] Bekezdés: [szöveg]
Hitelesítési rétegek táblázata
irányítani
kérdés
Hogyan ellenőrizhető
Kihagyás esetén kockázatot jelent
forrás valóság
van?
Független katalógus
szellemtulajdonítás
lenyomat pontossága
Helyes a lenyomat?
Katalógussal egyező
rossz hivatkozás
Idézet szó szerintiség
Szóról szóra ugyanaz?
Összehasonlítás az eredetivel
kitalált idézet
Kontextushűség
Megőrződött a jelentés?
A környezetvédelmi bekezdés elolvasása
inverz torzítás
Oldal/nyomtatás
Helyes a szám?
A nyomat rögzítése
Kajak referenciák
Gyakori hibák
- Az idézetet csak azért igaznak tekintve, mert a forrás valódi. Az 1. réteget áthaladó erőforrás meghibásodhat a 2. rétegben (tartalom); Ellenőrizze mindkettőt külön-külön.
- Nem olvasni a szövegkörnyezetet. Ha az idézetet anélkül használja, hogy látná a környezetét, az író az ellenkezőjét állíthatja.
- A "közel" idézet szó szerintinek tévesztése. Ha csak egy szó is megváltozik, az idézőjel érvénytelen; Vedd szó szerint, vagy alakítsd át parafrázisokká.
- Nem ellenőrzi a parafrázist. Feltéve, hogy a saját parafrázisod hű a forráshoz; Az árnyalat hozzáadása/eltávolítása is torzítás.
- Vakon bízva az oldalszámban. A nyomtatási különbségek eltolják a számokat; Rögzítse a használt nyomást.
Összefoglalva
A forrásellenőrzés két különálló rétegből áll: a forrás hiteles-e és a tartalom hűséges továbbítása. A mesterséges intelligencia mindkét rétegben hibákat produkál – nem hiteles források és tévesen valódi forrásoknak tulajdonított nézetek. A biztonságos forrásmegjelölés érdekében katalogizálja a szerzői sort, lépjen az elsődleges forráshoz, szó szerint párosítsa az idézetet, olvassa el a szövegkörnyezetet, és rögzítse a kiadást. A legálomosabb torzítás az, ha egy valódi mondatot kiszakítunk a szövegkörnyezetből. Az idézet integritása a bölcsészettudományi tudományok tudományos hitelességének alapja; A mesterséges intelligencia felgyorsíthatja ezt, de te vagy a kezes.
Pályázati feladat
- A mesterséges intelligencia készítsen egy bekezdést 3 idézettel egy témáról.
- Minden idézetnél keresse meg a forrást, és ellenőrizze szóról szóra a „szó szerinti idézetegyeztetés” sablonnal.
- Vizsgáld meg legalább egy idézet szövegkörnyezetét a "kontextushűség-ellenőrzés" sablonnal: ez a szerző saját véleménye?
- Átfogalmazzon egy idézetet saját szavaival, és ellenőrizze annak hűségét a „parafrázis pontossága” sablonnal.
- Erősítse meg az impresszum oldalszámát az Ön által használt kiadásnak megfelelően.
ellenőrző lista
- [ ] A független katalógusban minden forrás (tier 1) hitelességét ellenőriztem.
- [ ] Az eredetiben minden idézet tartalmi hűségét (2. réteg) ellenőriztem.
- [ ] Megerősítettem, hogy az idézeteken belüli idézetek szó szerintiek.
- [ ] Elolvastam az idézetek szövegkörnyezetét, és meggyőződtem arról, hogy nincsenek torzítások.
- [ ] Ellenőriztem, hogy a bekezdéseim forráshűek-e.
- [ ] Az oldalszámokat az általam használt kiadásnak megfelelően javítottam.