Ẹyọ 10 / 11

Ìmúdájú, Hallucination, àti Ìdánilójú Ìjìnlẹ̀

Awọn anfani:

  • Agbara lati ni oye pe hallucination jẹ atorunwa ninu awoṣe ede ati yan ọna ijẹrisi ti o yẹ fun iru iṣelọpọ kọọkan.
  • Ṣe idanwo awọn iye to ṣe pataki ni awọn ọna ominira meji pẹlu triangulation ati ki o maṣe dapo lorun pẹlu deede
  • Agbara lati lo akoyawo, wiwa kakiri, iduroṣinṣin data ati ojuse eniyan gẹgẹbi ipilẹ ti iduroṣinṣin ti imọ-jinlẹ

Gbolohun kan tun pada leralera jakejado module yii: “AI ṣe agbejade, awọn eniyan rii daju.” Ninu ẹyọ yii, a yi gbolohun naa pada si eto kan. Ero ni lati ṣe idanimọ hallucination (gbigbe alaye eke / ti iṣelọpọ pẹlu ede ti o ni igboya), eyiti o jẹ ihuwasi ti o lewu julọ ti AI, lati fi idi ọna ijerisi kan pato fun iru iṣẹjade kọọkan, ati lati gbe gbogbo awọn wọnyi sinu ilana ti iduroṣinṣin ti imọ-jinlẹ (iṣotitọ, akoyawo, wiwa kakiri). Ijade AI ti ko ni idaniloju ni kemistri kii ṣe aṣiṣe nikan; Ó lè jẹ́ ṣíṣe àdánwò kan tó ń bú gbàù, ẹnì kan tí wọ́n jẹ́ májèlé, tàbí kí wọ́n fà á sẹ́yìn.

Kini idi ti hallucination jẹ eyiti ko le ṣe?

Awọn ti o tobi ede awoṣe gbe awọn "tókàn julọ seese ọrọ"; O ṣe ifọkansi ni ohun ti o ṣee ṣe, kii ṣe ohun ti o jẹ otitọ. Nitorinaa o le kun iwuwo molikula kan, DOI, tabi aaye gbigbo pẹlu iye kan ti o “dabi pe o bọgbọnmu” - laisi ṣayẹwo boya o jẹ gidi. Hallucination kii ṣe aiṣedeede, ṣugbọn abajade ti iseda ti imọ-ẹrọ yii. Ojutu kii ṣe lati “gbiyanju lati ṣatunṣe” awoṣe, ṣugbọn lati kọ ikarahun afọwọsi ni ayika iṣelọpọ kọọkan.

Apakan ti o buruju julọ ti hallucination ni ede igboya rẹ. Iwọn molikula ti ko tọ ni a gbekalẹ pẹlu igbẹkẹle kanna bi ọkan ti o pe. Nitorina "wo ni igboya" ko tumọ si "tọ."

Ifarabalẹ: Bawo ni pipe ati igboya ti AI sọrọ lori koko-ọrọ kan ko ni ibatan si deede ti alaye yẹn. Fluency idaniloju; Orisun ominira nikan ni o pinnu deede.

Ifọwọsi nipasẹ iru iṣẹjade ni kemistri

Kọọkan o wu iru ni o ni awọn oniwe-ara ijerisi ọna. Dipo ki o ṣe iranti ofin kan, lo ohun elo ti o yẹ fun iṣelọpọ:

Ojade iru

Ọna ijerisi

ọkọ ayọkẹlẹ

iwuwo molikula, agbekalẹ

Tun ṣe iṣiro lati agbekalẹ

RDKit / pẹlu ọwọ

SMILES / igbekale

Parse + canonicalize

RDKit

Itọkasi / DOI

Yanju ni database

doi.org, Crossref

Iduroṣinṣin ti ara (kn, pKa)

Itọkasi database

PubChem, iwe afọwọkọ

isiro isiro

Kọ + ṣiṣe koodu

Python

lenu / ipo

Litireso ìmúdájú

Reaxys, nkan

aabo nipe

SDS/GHS

SDS osise

Iyanu julọ.Oniranran

Olona-imọ + eniyan

Esiperimenta julọ.Oniranran

Yi tabili jẹ kosi kan ni ṣoki ti yi module: kọọkan kuro ni ọkan kana.

Triangulation: awọn ọna ominira mẹta

Ilana ijẹrisi ti o lagbara julọ ni “triangulation”: de ni ipari kanna ni awọn ọna ominira mẹta. Fun apẹẹrẹ, fun iwuwo molikula: (1) kini YZ sọ, (2) Iṣiro RDKit, (3) iṣiro pẹlu ọwọ lati agbekalẹ. Ti o ba ti awọn mẹta ni lqkan, igbekele ga; Ti ẹnikan ba ṣinapa, duro ki o ṣe iwadii. Maṣe gbekele orisun kan ni kemistri; Wa o kere ju awọn ọna ominira meji.

Igbese nipa igbese: ijerisi bisesenlo

  1. Ṣe iyasọtọ iṣẹjade: Ṣe o jẹ nọmba kan, eto, iyasọtọ, iṣeduro aabo?
  2. Yan ọpa ti o yẹ: Gba ọna ijẹrisi ti o yẹ fun iru iṣẹjade lati tabili loke.
  3. Ṣe iṣiro / ṣawari ni ominira: Ṣiṣe ọkọ ni ominira ti AI; afiwe esi.
  4. Ti iyapa ba wa, da duro: Ti awọn iye ko ba baramu, maṣe tẹsiwaju laisi iwadii eyi ti o tọ.
  5. Fi ami rẹ silẹ: Ṣe igbasilẹ ohun ti o rii daju ati bii (iṣotitọ imọ-jinlẹ).
  6. Pato aidaniloju: Samisi nkan ti a ko le rii daju bi “aiṣeduro”, maṣe tọju rẹ.

Mẹrin daakọ awọn awoṣe

1) Ijẹrisi ti ara ẹni:

O kan fun iṣẹjade atẹle yii: [OUTPUT]. Iṣẹ-ṣiṣe: Ṣe akojọ nọmba kọọkan/iṣeduro otitọ ti iṣelọpọ yii lori laini lọtọ. Fun idaniloju kọọkan: "bawo ni o ṣe le rii daju ni ominira?" ọna kikọ (eyi ti ọpa / database). MAA ṢE sọ pe otitọ ni ẹtọ; kan fun ọna kan lati mọ daju o.

2) Iṣakoso onigun mẹta:

Mo fẹ lati ṣayẹwo iwuwo ti moleku wọnyi ni awọn ọna mẹta: [SMILES].Iṣẹ: 1) Ṣe agbekalẹ agbekalẹ molikula.2) Ṣe afihan atomu iṣiro iwuwo molikula nipasẹ atomu (idasi ti eroja kọọkan). Ti awọn mẹta ko ba ni lqkan, kilo.

3) Isamisi aibikita:

Ọpọlọpọ awọn ibeere otitọ ni o wa ninu ọrọ atẹle: [TEXT] Iṣẹ-ṣiṣe: Fi aami ipele igbẹkẹle si ẹgbẹ kọọkan: [VERIFIED] / [VERIFIED] / [UNCERTAIN].Maṣe samisi ohunkohun [VERIFIED] ti o ko ba ni idaniloju.

4) Ibeere irekọja aitasera:

Emi yoo beere ibeere kanna ni awọn ọna oriṣiriṣi meji; Wo boya awọn idahun rẹ wa ni ibamu. Ibeere A: Kini agbekalẹ molikula ti yellow

Ailagbara kiakia / Alagbara kiakia

Alailagbara:

Kọ si isalẹ ohun gbogbo ti o mọ nipa yi yellow.

AI aibikita dapọ mọ daju ati alaye ti a ṣe; Koyewa eyi ti o jẹ gidi.

Lagbara:

Pese alaye nipa agbo-ara yii, ṣugbọn fi aami si ibeere kọọkan gẹgẹbi: [DETERMINISTIC - ti a rii daju nipasẹ irinse] fun apẹẹrẹ. agbekalẹ molikula,[EXPERIMENTAL - quote need] f.eks. yo ojuami,[UNCERTAIN - ko daju] .Maṣe kọ eyikeyi awọn ẹtọ ti ko ni aami.

Iyatọ: A fi agbara mu AI lati samisi aidaniloju tirẹ; A jẹ ki iṣẹ ijẹrisi naa le gbero.

Iduroṣinṣin ijinle sayensi: otitọ ati wiwa kakiri

Ijerisi kii ṣe igbesẹ imọ-ẹrọ nikan, o jẹ ọran ihuwasi. Iduroṣinṣin imọ-jinlẹ nbeere:

  • Itumọ: Maṣe fi ara pamọ pe o nlo AI; Pato ni ibamu si ilana atẹjade / ijabọ rẹ.
  • Itọpa: Ṣe igbasilẹ ohun ti o jade wa lati AI ati bii o ṣe jẹri.
  • Iduroṣinṣin data: awọn abajade “Ẹwa” pẹlu AI, sisọnu awọn olutaja laisi idalare jẹ ẹtan.
  • Ojuse: Iwọ ni iduro fun abajade ikẹhin; “AI sọ bẹ” kii ṣe awawi.
Imọran: Gba lati ibẹrẹ pe o ko le lo gbolohun ọrọ “AI sọ bẹ” ninu ijabọ kan tabi aabo. Gbigbawọle yii laifọwọyi mu iwa ti ijẹrisi gbogbo iṣelọpọ wa.

mini igba

Ọran 1 - Triangulation mu aṣiṣe kan. Ọmọ ile-iwe ṣayẹwo iwuwo molikula ni awọn ọna mẹta: YZ sọ 178.2, iṣiro afọwọṣe fun 180.16, RDKit fun 180.16. Awọn ọna ominira meji ni ṣoki ati imukuro AI. Ẹkọ: Awọn ijẹrisi ominira meji ni ipalọlọ ṣẹgun abajade eke kan.

Ọran 2 - Ede ailewu, alaye ti ko tọ. AI kowe ni igboya pupọ pe iṣesi kan “ṣiṣẹ lairotẹlẹ ni iwọn otutu yara.” Àwọn ìwé ìkẹ́kọ̀ọ́ náà fi hàn pé èyí ń béèrè pé kí wọ́n móoru àti àmújáde. Ọmọ ile-iwe gbẹkẹle orisun, kii ṣe ede ailewu. Ẹkọ: fluency kii ṣe deede.

Ọran 3 - Ti gba akoyawo. Ni apakan ọna ti iwe rẹ, oluwadii kan sọ ni kedere ninu awọn igbesẹ ti o lo AI (atunṣe ọrọ, kikọ koodu) ati kọwe pe o ni ominira ni idaniloju gbogbo awọn esi nọmba. Ilana referee lọ laisiyonu. Ẹkọ: akoyawo n gbe igbẹkẹle duro, fifipamọ ṣẹda eewu.

Awọn aṣiṣe ti o wọpọ

  • Gbẹkẹle ede ailewu. Ohun orin igboya AI kii ṣe itọkasi deede.
  • Gbẹkẹle orisun kan. Gbigba iṣẹjade ẹyọkan laisi triangulation.
  • Ko yiya sọtọ awọn o wu iru. Ni ironu pe Mo “ṣayẹwo” nọmba naa, ikasi, ati iṣeduro aabo pẹlu ọna kanna.
  • Ìbòmọlẹ aidaniloju. Ijabọ nkan ti a ko le rii daju bi ẹnipe o daju.
  • Nọmbafoonu awọn lilo ti AI. Aini ti akoyawo undermines ijinle sayensi iyege.
  • Aṣoju ojuse. Àwáwí “AI sọ bẹ́ẹ̀” kò yẹ; Ojuse naa wa pẹlu eniyan naa.

Ni akojọpọ

  • Hallucination jẹ atorunwa ninu awoṣe ede; Ojutu ni lati kọ ikarahun afọwọsi ni ayika iṣelọpọ kọọkan.
  • Kọọkan o wu iru ni o ni awọn oniwe-ara ijerisi ọna; lẹtọ awọn o wu ati ki o lo awọn yẹ ọpa.
  • Triangulation (awọn ọna ominira meji) jẹ iṣakoso ti o lagbara julọ; Maṣe gbekele orisun kan.
  • Fífẹ́fẹ́ àti èdè ìdánilójú kò ní í ṣe pẹ̀lú ìpéye.
  • Iduroṣinṣin ti imọ-jinlẹ nilo akoyawo, wiwa kakiri, iduroṣinṣin data ati ojuse eniyan.

Ohun elo iṣẹ-ṣiṣe

Ni imomose gbejade ọpọlọpọ awọn abajade ni igba AI: iwuwo molikula kan, itọkasi kan, igbagbogbo ti ara, ẹtọ aabo, iṣiro nọmba kan. Ṣayẹwo ọkọọkan ni ominira pẹlu ọna ti o tọ (wo tabili). Gbiyanju lati yẹ o kere ju ọkan hallucination. Lẹhinna mura “matrix afọwọsi”: awọn abajade awọn ori ila, awọn ọwọn (iye AI / iye ominira / ṣe o ni lqkan / bawo ni MO ṣe rii daju). Bawo ni iwọ yoo ṣe jabo igba yii ni awọn ofin ti iduroṣinṣin ti imọ-jinlẹ?

akojọ ayẹwo

  • [] Mo loye idi ti hallucination jẹ eyiti ko le ṣe.
  • [] Mo ṣe iyasọtọ iṣẹjade kọọkan ni ibamu si iru rẹ ati rii daju pẹlu ọna ti o yẹ.
  • [] Mo ṣe triangulation (awọn ọna ominira meji) lori awọn iye to ṣe pataki.
  • [] Mo gbẹkẹle orisun, kii ṣe ede ailewu.
  • [] Mo samisi ohun ti a ko le fi idi mulẹ bi “aidaniloju”.
  • [] Mo wa ni gbangba ni lilo AI mi ati pe ara mi ni jiyin fun abajade.