Idanwo Olugbe ni kikun pẹlu Awọn atupale Data: Lati Ayẹwo si Gbogbo

Awọn anfani:

• Loye eewu iṣapẹẹrẹ ati ọgbọn ti idanwo olugbe ni kikun (idanwo 100%) ati ni anfani lati lo oye atọwọda fun igbaradi data, kikọ ofin ati itumọ abajade.
• Agbara lati ṣe apẹrẹ ati imuse ibaramu, pipe ati awọn idanwo deede ni awọn eto data nla pẹlu atilẹyin itetisi atọwọda
• Agbara lati ni oye pe atokọ imukuro ni idanwo olugbe ni kikun kii ṣe abajade, ṣugbọn ibẹrẹ ti oluyẹwo yoo ṣe ayẹwo, ati pe igbelewọn ikẹhin jẹ ti oluyẹwo.

Ọkan ninu awọn idiwọn ipilẹ julọ ti oojọ iṣatunṣe ni pe oluyẹwo ni lati ṣiṣẹ pẹlu iṣapẹẹrẹ ni ọpọlọpọ ọdun. O ko le ṣe ayẹwo pẹlu ọwọ awọn iwe-ẹri 180,000 awọn ọran iṣowo ni ọdun kan; Nitorina o yan awọn igbasilẹ ọgọrun diẹ nipa lilo iṣiro tabi ọna idajọ, ṣe idanwo wọn, ki o si ṣe apejuwe abajade si gbogbo eniyan. Iṣapẹẹrẹ jẹ ilana ti o lagbara ati ti o tọ, ṣugbọn o ni eewu ti o jọmọ: eewu iṣapẹẹrẹ — apẹẹrẹ ti o yan le ma jẹ aṣoju ti olugbe, ati pe aṣiṣe otitọ ninu rẹ le ma ṣubu ni pato ibiti o n wa.

Awọn atupale data ati AI yi aworan yii pada: o le ṣe idanwo gbogbo olugbe, ie 100%. Eyi ni a pe ni idanwo olugbe pipe. A ya ẹyọkan yii si agbọye iyipada lati “apẹẹrẹ si odindi,” agbara ti o mu wa, ati awọn ojuse tuntun ti ọpọlọpọ eniyan foju fojufoda. Nitoripe kikun eniyan idanwo ko dẹrọ ayewo; O yi iru idanwo naa pada ati gbe awọn ẹru tuntun sori oluyẹwo.

Iyatọ laarin iṣapẹẹrẹ ati idanwo olugbe ni kikun

Ninu iṣapẹẹrẹ kilasika, ọgbọn naa jẹ: “Jẹ ki n ṣe idanwo daradara kan kekere ṣugbọn ẹgbẹ aṣoju, ki o tumọ abajade lapapọ.” Ninu idanwo olugbe ni kikun, iṣaro naa ti yipada: “Jẹ ki n ṣayẹwo gbogbo rẹ gẹgẹbi awọn ofin kan, wa awọn imukuro ti o ṣubu ni ita ofin naa ki o ṣayẹwo wọn daradara.” Ni ọna akọkọ, ewu jẹ "yiyan apẹẹrẹ ti ko tọ"; Ni ẹẹkeji, eewu ni “kikọ ofin ti ko tọ” ati “ṣiṣẹ pẹlu data ti ko pe / aṣiṣe”.

Tabili ti o tẹle yii ṣe afiwe awọn ọna meji:

Iwọn

iṣapẹẹrẹ

Idanwo ni kikun olugbe (100%)

Ààlà

apakan ti awọn olugbe

gbogbo olugbe

Ewu akọkọ

Ewu iṣapẹẹrẹ (aṣiṣe aṣoju)

Aṣiṣe ofin + aṣiṣe iduroṣinṣin data

jade

Nọmba to lopin ti awọn abajade idanwo

Akojọ awọn imukuro ti ko ni ibamu pẹlu ofin naa

Eru ẹniti nṣe ayẹwo iwe-owo

yiyan + igbeyewo

Apẹrẹ ofin + iyasoto iyasoto

Ipa ti AI

Iranlọwọ pẹlu yiyan ayẹwo

Igbaradi data, kikọ ofin, ami iyasọtọ

Akiyesi: Idanwo eniyan ni kikun ko tumọ si “Mo ṣe idanwo ohun gbogbo, iṣẹ ṣiṣe”. Ni ilodi si, o maa n fun ọ ni awọn nkan diẹ sii lati ṣayẹwo. Nigbati o ba ṣiṣẹ gbogbo awọn iwe-ẹri 180,000 nipasẹ ofin ifọwọsi-ọjọ, iwọ yoo rii boya awọn imukuro 900. Kọọkan ninu awọn wọnyi ni ibeere; kii ṣe idahun. Eyi ni ibi ti ile-igbimọ aṣeyẹwo ti wa sinu ere.

Ipari data: ipilẹ alaihan ti idanwo

Ibajẹ nla julọ ti gbogbo idanwo olugbe ni pe didara idanwo naa da lori didara data naa. "Mo ṣe idanwo 100% ti data naa" jẹ oye nikan ti data ti o ni jẹ 100% ti olugbe. Ti àlẹmọ kan ba jẹ aṣiṣe nigbati o nfa data lati inu eto naa, diẹ ninu awọn igbasilẹ ni a fi silẹ, tabi ti o ti gbe iwe iye pẹlu aṣiṣe eleemewa kan, idanwo “kikun” rẹ yoo ṣee ṣe ni otitọ pe data ti ko pe tabi ibajẹ. Nitorinaa, ìmúdájú ti pipe data ati deede jẹ igbesẹ akọkọ ati pataki ni idanwo olugbe ni kikun.

Awọn sọwedowo to wulo fun ijẹrisi pipe:

• Ibaṣepọ kika kika: Njẹ nọmba awọn ori ila ti o wa ninu iwe data ti o fa ni ibamu pẹlu nọmba apapọ awọn igbasilẹ ninu eto naa?
• Ilaja iye: Njẹ iye apapọ ti o wa ninu dataset ṣe atunṣe pẹlu akọọlẹ ti o yẹ lapapọ ni iwọntunwọnsi idanwo / oniranlọwọ?
• Iwọn ọjọ: Ṣe awọn ọjọ akọkọ ati awọn ọjọ ikẹhin ti akoko ti o wa ninu data; Ṣe oṣu/ọjọ ti o nsọnu?
• Ṣiṣayẹwo aaye ti o ṣofo ati buburu: Njẹ awọn aye eyikeyi wa tabi awọn iye asan ni awọn aaye ti a beere (ọjọ, iye, koodu akọọlẹ)?

AI ṣe iranlọwọ pẹlu gbogbo awọn sọwedowo wọnyi: nrako data, n gba lapapọ, ka awọn aaye ofo, awọn sakani ọjọ ijabọ. Ṣugbọn ẹniti nṣe ayẹwo iwe-owo ni o pinnu boya adehun naa "mu", ṣe iwadii iyatọ, ati jẹrisi pe data naa dara fun idi ayẹwo.

Išọra: Maṣe kọ “Mo ṣe idanwo gbogbo data naa” sori iwe iṣẹ laisi ijẹrisi pipe data. Idanwo olugbe ni kikun lori data ti o padanu n funni ni idaniloju ti o dabi ẹni pe o pe ṣugbọn ti o ni idaniloju.

Idanwo olugbe ni kikun pẹlu AI: ni igbese nipa igbese

1. Mura data ni aabo. Ṣe ailorukọ awọn aaye ti ara ẹni/ikọkọ tabi rọpo wọn pẹlu awọn oniduro. Ti o ba ṣeeṣe, lo ile-iṣẹ kan, ọkọ adehun.
2. Jẹrisi pipe. Ṣe atunṣe nọmba awọn igbasilẹ ati iye.
3. Kedere asọye ofin idanwo. Kini o jẹ "iyasoto"? (Fun apẹẹrẹ: risiti ti a ko fọwọsi, risiti ti a gbejade ni ipari ose, sisanwo yika nla, owo-wiwọle ti o gbasilẹ lẹhin ọjọ gige.)
4. Waye ofin pẹlu AI. AI kan ofin si data ati gbejade atokọ ti awọn imukuro; Kọ ofin naa kedere ki o le ṣe ayẹwo.
5. Ṣe iṣaaju ati atunyẹwo awọn imukuro. Ṣe iwadii gbogbo imukuro pẹlu ẹri; koju awọn idaniloju eke, ṣe idalare awọn awari gangan.
6. Ṣe iwe abajade. Darapọ mọ ofin, nọmba awọn imukuro, awọn nkan ti a ṣe ayẹwo, ati ipari si iwe iṣẹ.

mẹta mini igba

Irú 1 - Ige igbeyewo. Oluyẹwo fẹ lati ṣe idanwo gige gige owo-wiwọle opin ọdun. O mu awọn risiti tita 42,000 bi olugbe ni kikun ati pe AI fi agbara mu “awọn igbasilẹ atokọ pẹlu awọn ọjọ risiti nipasẹ Oṣu kejila ọjọ 31st, ṣugbọn awọn ọjọ gbigbe / ifijiṣẹ ni tabi lẹhin Oṣu Kini Ọjọ 1st”. YZ samisi 118 igbasilẹ. Oluyẹwo ṣe ayẹwo awọn wọnyi: 96 jẹ awọn iṣowo ti o tọ laisi awọn iyatọ akoko (ifijiṣẹ ọjọ kanna), 22 jẹ owo-wiwọle gangan fun ọdun to nbọ ati pe a gba silẹ ni akoko iṣaaju. Awọn nkan 22 wọnyi ni a royin nitori wọn ṣe afihan apẹrẹ kan, botilẹjẹpe o wa labẹ pataki. AI beere awọn ibeere 118; Awọn ẹniti nṣe ayẹwo iwe-owo ri 22 idahun.

Ọran 2 - Nigbati pipe ti wa ni ti own. Ọmọ ẹgbẹ kan sọ pe o ṣe idanwo olugbe ni kikun lori awọn invoices 180,000; Ko si awọn imukuro ati pe o ni itunu. Ẹniti o ni iduro ṣe afiwe iye lapapọ ti data pẹlu iwọntunwọnsi idanwo: data 155 million TL, iwọntunwọnsi idanwo 210 million TL. O wa ni pe lakoko ti o ti n fa data lati inu eto naa, ẹka kan ti yo ati fi silẹ. Idanwo "kikun" gangan padanu idamẹrin ti data naa. Idanwo naa ti pari pẹlu data to pe. Ẹkọ: ko si idanwo olugbe pipe laisi ijẹrisi pipe.

Case 3 - Aṣiṣe ofin. Oluyẹwo kan ni AI kọ ofin naa “Akojọ awọn sisanwo ti a ko fọwọsi ju 50,000 TL”, ṣugbọn ko mọ pe aaye “ifọwọsi” ni a tọju ni awọn ọwọn oriṣiriṣi meji ninu eto naa (ifọwọsi itanna ati ifọwọsi ọwọ). AI ti samisi awọn sisanwo 300 bi “a ko fọwọsi” nitori pe o wo ọkan nikan; Lẹhin idanwo, a rii pe ọpọlọpọ ninu wọn ni a fọwọsi ni apa keji. Ofin ti ko tọ ṣe agbejade awọn ọgọọgọrun awọn idaniloju eke. Oluyẹwo ṣe atunṣe ofin lati ni awọn ọwọn mejeeji. Ẹkọ: ẹniti nṣe ayẹwo iwe-owo ṣe idaniloju pe ofin ni ibamu si data ati ilana iṣowo.

Ailagbara kiakia / Alagbara kiakia

Ibere ​​ailagbara:

Wa awọn igbasilẹ iṣoro ni data risiti yii.

Iṣoro: Ko si itumọ ti “iṣoro.” AI ko mọ ohun ti lati ro ohun sile; O ṣiṣẹ boya ni ibamu si awọn ifihan agbara laileto tabi ni ibamu si ami ti o ti ṣe. O ti wa ni ko repeatable ati ki o auditable.

Ibere ​​ti o lagbara:

Ipa rẹ: o jẹ oluranlọwọ atupale data si oluyẹwo ominira. Idajo ni temi; Iwọ yoo lo ofin naa ki o ṣe agbekalẹ atokọ imukuro kan. Ọrọ asọye: Ni isalẹ ni data risiti tita ailorukọ ti a ko ni ailorukọ (awọn ọwọn: invoice_no, invoice_date, ọjọ ifijiṣẹ, iye, ipo ifọwọsi, ẹka). Ipari Ọdun: 31.12.STEP 1 - Ipari: Fun apapọ nọmba awọn igbasilẹ ati iye apapọ ki emi le ṣe afiwe pẹlu iwontunwonsi idanwo. Ijabọ ti o ba jẹ aaye ti o ṣofo / sonu. Igbesẹ 2 - Ofin idanwo gige: Ṣe atokọ awọn igbasilẹ pẹlu invoice_date <= 31.12 AND delivery_date>= 01.01 gẹgẹbi “iyasọtọ gige” Fi awọn igbasilẹ silẹ ti o ṣe afihan bi “awọn imukuro fun atunyẹwo”; Ma ṣe sọ "aṣiṣe / wiwa". Maṣe ṣe ohun ti o ko le yọkuro lati inu data naa.

Ibeere yii lagbara nitori pe o kọkọ jẹrisi pipe, ṣe asọye ni kedere ofin imukuro, nilo itele ti ofin naa (igbasilẹ), o si gbe abajade bi “iyasoto.”

Awọn aṣiṣe ti o wọpọ

• Foju ijerisi pipe. Ṣiṣe idanwo "kikun" lori data ti ko pe / ibajẹ ati fifun idaniloju eke.
• Asise awọn sile fun a wIwA. Awọn aṣiṣe kika laisi idaniloju igbasilẹ ti a samisi nipasẹ AI; yago fun imukuro eke positives.
• Ko ṣayẹwo ofin naa. Ṣiṣẹda awọn ọgọọgọrun awọn asia eke laisi ṣayẹwo boya ofin naa ni ibamu pẹlu data ati ilana iṣowo naa.
• Kikọ aiduro ofin. Ngba awọn abajade ti a ko tun ṣe pẹlu awọn itọsi aisọye bi “wa awọn igbasilẹ iṣoro”.
• Jije akoonu pẹlu ibẹrẹ kan. Kii ṣe ibeere ofin tabi data ti nọmba awọn imukuro ba yatọ pupọ si ohun ti o nireti.

Imọran: Ma bẹru ti nọmba awọn imukuro ba kere ju (sunmọ odo) tabi tobi ju. Odo maa tumo si "ofin ti a kọ ni aṣiṣe" tabi "data sonu"; Nọmba ti o tobi pupọ tọkasi pe ofin naa gbooro pupọ. Ayẹwo ti o dara kan fura mejeeji “ko si awọn imukuro” ati “ohun gbogbo jẹ awọn imukuro”.

Ni soki

Idanwo olugbe ni kikun jẹ fifo nla siwaju ni iṣatunṣe: o yọkuro eewu iṣapẹẹrẹ, ibojuwo 100% ti data naa. Ṣugbọn kii ṣe ọfẹ. O mu awọn ojuse tuntun meji wa: (1) ijẹrisi pipe ati išedede data, (2) iṣiro awọn imukuro kọọkan ti o dide. AI ngbaradi data naa, lo ofin naa, ṣe iyasọtọ iyasọtọ ati dinku awọn wakati ti ọlọjẹ si awọn aaya; Ṣugbọn awọn išedede ti awọn ofin, awọn pipe ti awọn data ati awọn igbelewọn ti awọn imukuro jẹ ti awọn ẹniti nṣe ayẹwo iwe-owo. Iyatọ kii ṣe abajade, o jẹ ibẹrẹ.

Ohun elo iṣẹ-ṣiṣe

Wo data ti iṣowo idunadura ti o wa tẹlẹ (tabi arosọ). Ni akọkọ ṣalaye awọn sọwedowo pipe meji (nọmba awọn igbasilẹ ati ilaja iye). Lẹhinna kọ ofin imukuro ti o han gbangba fun idi iṣatunyẹwo (fun apẹẹrẹ awọn iwe-owo ti o jade ni ipari-ipari ose, tabi awọn imukuro gige). Pẹlu ilana iyara to lagbara loke, jẹ ki AI ṣiṣẹ pipe ni akọkọ ati lẹhinna ofin naa. 10 akọkọ ti awọn imukuro ti o han ni "awọn awari gidi tabi awọn idaniloju eke?" Ṣaṣe iyatọ bi atẹle ki o kọ iru ẹri ti iwọ yoo wa fun ọkọọkan.

akojọ ayẹwo

• [] Mo sọ data naa di ailorukọ mo si wakọ lailewu.
• [] Mo jẹrisi pipe data nipa ṣiṣe atunṣe nọmba awọn igbasilẹ ati iye naa.
• [] Mo ti ṣayẹwo fun free/buburu aaye.
• [] Mo ti ṣe asọye ofin imukuro ni ọna ti o han gedegbe, atunṣe.
• [] Mo gba ọrọ itele ti ofin lati AI ati rii daju ibamu rẹ pẹlu data ati ilana iṣowo.
• [] Mo beere awọn reasonableness ti awọn nọmba ti awọn imukuro (ju diẹ / ko ju ọpọlọpọ).
• [ ] Mo ti mu kọọkan sile bi a ibeere lati wa ni ayewo, ko kan wIwA; Mo pa awọn idaniloju eke kuro.