Bölüm 10 / 11

Model näbellilik, tassyklamak we kalibrleme

Girdeji:

  • Ansambl, duýgurlyk derňewi, kesişme barlagy we kör synag bilen näbelliligi ölçemek we habar bermek ukyby
  • Gowy / meýdan esasynda bölüp, maglumatlaryň syzmagynyň öňüni almak we habar berlen takyklygyň hakyky umumylaşdyrmany görkezýändigini üpjün etmek.
  • Emeli intellektiň ynam balyny ygtybarlylyk diagrammasy bilen kalibrlemek we ähtimallyk hökmünde bölünmedik baly ulanmazlyk düzgünini ulanmak ukyby

Bu modulyň her bölüminde gaýtalanýan tema bar: geofizikada "anyk jogaplar" ýok, diňe näbellilik bilen çäklendirilen modeller. Bu bölüm bu temany tertibe öwürýär. Model näbelliligi, şol bir maglumatlary düşündirip bilýän we her modelde ynam aralygy göterýän dürli ýerasty modelleriň bolmagydyr. Barlamak, bir modeliň ýa-da AI çykyşynyň dogrudygyny garaşsyz subutnamalar bilen synagdan geçirýär. Kalibrleme, model tarapyndan berlen ynam / ähtimallyk bahalarynyň hakyky netijelere laýyk gelmegini üpjün etmekdir. Bu bölümde emeli intellektiň (AI) näbelliligi ölçäp we gizläp biljekdigini öwreneris; we berk barlamak-kalibrleme çarçuwasynyň näme üçin AI-ni ygtybarly edýändigini göreris.

Näbelliligiň çeşmeleri

Geofiziki näbellilik birnäçe gatlakdan gelýär:

  • Maglumatlaryň näbelliligi: Ölçeg sesi, çäkli örtük, kalibrleme ýalňyşlygy.
  • Model näbelliligi (polizemiýa): Birden köp ýerasty gurluşyň şol bir maglumatlara ýerleşdirilmegi.
  • Usul / parametr näbelliligi: Işlemek, terslik we kadalaşdyrmak saýlawlary netijäni üýtgedýär.
  • AI-e mahsus näbellilik: Modeliň ynamly bolmak ukyby, ýöne okuw paýlanyşynyň (paýlanyş çalşygy) daşyna çykanda şowsuz.

Gowy geofizikiň işi bu näbelliligi ýok etmek däl-de, ony ölçemek, habarlaşmak we daraltmak. AI muny aňsatlaşdyryp biler (birnäçe ssenariýa döredip biler), ýöne ýekeje ynamly jogap bermek arkaly aňsatlyk bilen gizläp biler.

Näbelliligi ölçemegiň ýollary

Birnäçe amaly gural:

  1. Ansambl: Dürli başlangyçlar, parametrler ýa-da modeller bilen köp işleýär; Netijeleriň ýaýramagy näbellilik berýär.
  2. Duýgurlyk derňewi: Girişi üýtgetmek (parametr, maglumatlaryň bir bölegi) we netijäniň näçeräk üýtgeýändigini görmek.
  3. Çekişme: Maglumatlary böleklere bölmek, bir bölegi bilen türgenleşmek we beýleki bölegi bilen synag etmek; Umumylaşdyrma güýjüni ölçeýär.
  4. Kör synag: Modeliň okuwda görmedik garaşsyz guýy / meýdançasy bilen synag.
  5. Abilhtimal çykyş: Netijäni ýekeje baha däl-de paýlamak / ynam aralygy hökmünde bermek.
Maslahat: AI netije berende, hemişe soraň: "Bu netijäni üýtgetmek üçin girişde näme we näçeräk hereket etmeli?" Eger kiçijik parametr üýtgemegi bilen netije tersine bolsa, bu netije gowşak we näbellilik ýokary.

Kalibrleme: ynam baly dogrymy?

AI modelleri köplenç ynam / ähtimallyk berýär (“90% kemçilik”). Calöne bu san kalibrlenmedik bolsa ýalňyşdyr: model "90%" diýilýän ýagdaýlaryň 60% -inde dogrydyr. Kalibrleme bu sanlary hakyky netije derejesine deňlemekdir. Iş ýüzünde ygtybarlylyk diagrammasy çyzylýar: gowy kalibrlenen model "90%" diýlende hakykatdanam 90% dogry. Geofizikada, karar üçin esas goýmazdan ozal, AI ynam balyny garaşsyz maglumatlar bilen kalibrlemek zerurdyr.

Üns beriň: precokary takyklyk gowy kalibrleme bilen deň däl. Bir model, adatça takyk, ýöne özüne aşa ynamly bolup biler; Möhüm kararlarda möhüm zat, "95%" diýlende hakykatdanam ygtybarly bolmagydyr. Ygtybarlylyk balyny ähtimallyk hökmünde kabul etmäň.

Barlamagyň altyn düzgünleri

Ygtybarly barlamak üçin: (1) Garaşsyzlyk - synag maglumatlary okuw / sazlamak işine asla päsgel bermeli däldir (maglumatlaryň syzmagy - netijäni ýokarlandyrýar). (2) Kör synag - modeliň görmeýän meýdany / guýusy. (3) Fiziki yzygiderlilik - netije fizika we geologiýa ters gelmeli däldir. (4) Köpeltmek - şol bir giriş bilen şol bir netije we başga biri tarapyndan öndürilip bilner. (5) Resminamalar - haýsy maglumatlaryň, haýsy parametriň, haýsy model wersiýasynyň ulanylandygyny ýazga alyň.

üç sany kiçi halat

1-nji hadysa - Maglumatlaryň syzmagy. Bir topar, facies klassifikatorynyň 94% takyklyk berendigini habar berdi. Gözleg, şol bir guýudan goňşy nusgalaryň okuwda we synagda (maglumatlaryň syzmagy) gatnaşandygyny görkezdi. Guýy döwülende takyklyk 71% -e çenli azaldy - bu hakyky umumylaşdyrma. Syzmak, modeli öňküsinden has gowy görkezdi.

2-nji hadysa - Özüňe aşa ynamly model. Bir näsazlygy anyklaýjy, alamatlaryna "95% ynam" berdi. Ygtybarlylyk diagrammasy "95%" bellikleriň hakykatdanam 70% takykdygyny görkezdi. Model kalibrlenenden soň, ynam ballary reallaşdy we teswirçiler her bir belgä näçeräk ynanjakdyklaryny dogry düzdüler.

3-nji hadysa - Çala öwrülişik. Agyrlyk modeli gaty ynandyryjy görünýärdi. Duýgurlyk derňewi esasy gurluşyň kadalaşdyryş agramy 20% üýtgän mahaly ýitip gidendigini görkezdi: gurluş maglumatlardan däl-de, parametr saýlamasyndan. Topar gurluşy “pes ynam” diýip bellediler we goşmaça maglumatlary soradylar.

Göçürip boljak dört şablon

1) Näbellilik ölçeg meýilnamasy:

Siziň roluňyz: geofiziki näbellilik geňeşçisi. Mende [terslik / klassifikasiýa / çaklama] netijesi bar. Näbelliligi ölçemek üçin haýsy usullary (ansambl, duýgurlyk, kesişme, iň kör) ulanýaryn? Her kimiň maňa aýdýanlaryny we netijäni nädip habar bermelidigini düşündiriň.

2) Kalibrlemäni barlamak:

AI modelim ynam / ähtimallyk balyny berýär. Bu balyň kalibrlenendigini ýa-da ýokdugyny nädip barlamaly? Ygtybarlylyk diagrammasyny nädip düzmeli, "özüňe aşa ynam" ýa-da "aşa seresaplylyk" tanap, balyň hakyky netije derejesine nädip sazlamaly?

3) Maglumatlaryň syzdyrylyşy:

Geofiziki klassifikator taýýarladym. Maglumatlaryň syzmak howpuny nädip tapmaly we öňüni almaly (şol bir guýy / meýdan nusgalary okuwyň we synagyň içine girýär)? Guýy / meýdan boýunça aýralygy nädip düzmeli? Habar berlen takyklygyň hakyky umumylaşdyrmany görkezýändigini nädip bilerin?

4) Netijäniň gowşaklygy synagy:

Mende terslik / model netijesi bar. Bu netijäniň näderejede gowşakdygyna düşünmek isleýärin. Haýsy parametrleri üýtgetmek bilen we esasy gurluş näçeräk üýtgeýär? Gurluşyň maglumatlardan ýa-da parametrlerden / jaýdan gelýändigini nädip tapawutlandyryp bilerin? Duýgurlyk protokolyny beriň.

Gowşak haýyş / Güýçli haýyş

Gowşak haýyş:

Modelimiň ýokary takyklygy barmy.

Trutheke-täk hakykat belgisi; syzmagy kalibrlemäni we umumylaşdyrmagy gizleýär, ýalan ynam berýär.

Güýçli haýyş:

Siziň roluňyz: modeli tassyklamak boýunça hünärmen. Giriş: [klassifikator N-ni gowy döredýär, ynam ballary]. Wezipe: (1) maglumatlaryň syzmagyna garşy esasly paýlamagy teklip etmek; (2) kör guýyny barlamak; (3) ynam görkezijisini ygtybarlylyk diagrammasy bilen kalibrlemek; (4) netijäniň parametrlere näderejede duýgurdygyny barlaň. Trutheke-täk hakykat belgisine azalmak; Umumylaşdyrma, kalibrleme we gowşaklygy aýratynlykda habar beriň.

Syzmak, kör synag, kalibrleme we duýgurlyk haýyşy barlagy dogruçyl edýär.

Näbellilik gurallary

ulag

Ol näme bilen ölçenýär?

Esasy töwekgelçilik

çykyş

ansambly

Modeliň ýaýramagy

Hasap bahasy

Aralygy / paýlanyşy

Duýgurlyk

Parametriň täsiri

Geçirilen giriş

Gowşaklyk

haç tassyklamasy

umumylaşdyrmak

maglumatlaryň syzmagy

hakyky takyklyk

kör synag

garaşsyz üstünlik

Synag toplumy ýeterlik däl

ynam

Kalibrleme

hakykata ynan

özüňe aşa ynam

deňleşdirilen ähtimallyk

Adaty ýalňyşlyklar

  • Maglumatlaryň syzmagyna üns bermeýär. Dogrulygy ýokarlandyrýar; Guýy / meýdan boýunça bölüň.
  • Kalibrlemän ynam balyny ulanmak. “90%” aslynda 90% bolup bilmez.
  • Trutheke-täk hakykat belgisine bil baglamak. Umumylaşdyrmak we kalibrlemek iki dürli zat.
  • Gowşaklygy barlamazlyk. Parametr tarapyndan ýitirilen gurluş hakyky maglumat däl.
  • Näbellilik barada habar bermezlik. Netijäni ynam aralygy bolmazdan hödürlemek ýalňyşdyr.

Gysgaça

Näbellilik geofizikanyň gutulgysyz hakykatydyr; iş ony ölçemek, habarlaşmak we daraltmakdyr. AI muny ansambl, duýgurlyk we ähtimallyk çykyşy bilen ýeňilleşdirýär, ýöne ýekeje ynamly jogap bilen gizläp bilýär. Gaty çarçuwa; maglumatlaryň syzmagynyň öňüni almak, kör synag bilen umumylaşdyrmagy ölçemek, ynam balyny kalibrlemek we netijäniň näzikligini barlamak. Bölünmedik ynam, tassyklanmadyk hakykat we gizlin näbellilik üç howply illuziýa. Ygtybarly geofizika, näbelliligini dogruçyl görkezýän geofizika.

Programma meselesi

AI geofiziki netijäni saýlaň (klassifikasiýa, terslik ýa-da çaklama). "Näbellilik ölçeg meýilnamasy" şablony bilen ansambly / duýgurlygy / kör synag ädimlerini meýilleşdiriň. Soňra “Maglumatlaryň syzdyrylyşy” şablony bilen otly-synag tapawudyňyzy barlaň. Eger model ynam balyny berýän bolsa, "Kalibrleme barlagy" şablony bilen balyň hakykydygyna baha beriň we netijäňizi ynam aralygy bilen ýazyň.

gözegçilik sanawy

  • [] Ansambl / duýgurlyk bilen näbelliligi ölçedim.
  • [] Gowy / meýdan esasynda aýyrmak bilen maglumatlaryň syzmagynyň öňüni aldym.
  • [] Umumylaşdyrmagy kör synag bilen synag etdim.
  • [] Ynam balyny kalibrledim we realizmini barladym.
  • [] Netijäni ýekeje baha däl-de, ynam aralygy bilen habar berdim.