Unità 3 / 12

Ittestjar sħiħ tal-Popolazzjoni bl-Analitika tad-Data: Mill-Kampjun għal Sħiħ

Qligħ:

  • Jifhmu r-riskju tat-teħid tal-kampjuni u l-loġika tal-ittestjar tal-popolazzjoni sħiħa (100% ittestjar) u tkun kapaċi tuża intelliġenza artifiċjali għall-preparazzjoni tad-dejta, il-kitba tar-regoli u l-interpretazzjoni tar-riżultati.
  • Kapaċità li tiddisinja u timplimenta testijiet ta' tqabbil, kompletezza u preċiżjoni f'settijiet kbar ta' data b'appoġġ ta' intelliġenza artifiċjali
  • Kapaċità li tifhem li l-lista ta 'eċċezzjonijiet fit-test tal-popolazzjoni sħiħa mhijiex riżultat, iżda bidu li l-awditur se jeżamina, u li l-evalwazzjoni finali tappartjeni lill-awditur.

Waħda mill-limitazzjonijiet l-aktar fundamentali tal-professjoni tal-awditjar kienet li l-awditur kellu jaħdem bit-teħid ta' kampjuni fuq ħafna snin. Ma tistax tirrevedi manwalment il-180,000 fattura li toħroġ negozju f'sena; Allura inti tagħżel ftit mijiet ta 'rekords billi tuża metodu statistiku jew ta' ġudizzju, ittestjahom, u tiġġeneralizza r-riżultat għall-popolazzjoni kollha. It-teħid ta’ kampjuni huwa teknika qawwija u leġittima, iżda jġorr riskju inerenti: riskju ta’ kampjunar — il-kampjun li tagħżel jista’ ma jkunx rappreżentattiv tal-popolazzjoni, u l-iżball veru fih jista’ ma jaqax eżatt fejn qed tfittex.

L-analiżi tad-dejta u l-AI jibdlu din l-istampa: issa tista’ tittestja l-popolazzjoni kollha, jiġifieri 100%. Dan jissejjaħ ittestjar tal-popolazzjoni komplut. Aħna niddedikaw din l-unità biex nifhmu t-tranżizzjoni minn "kampjun għal sħiħ", il-qawwa li ġġib magħha, u r-responsabbiltajiet ġodda li ħafna nies jinjoraw. Minħabba li l-ittestjar tal-popolazzjoni sħiħa ma jiffaċilitax l-ispezzjoni; Tibdel in-natura tat-test u tpoġġi piżijiet ġodda fuq l-eżaminatur.

Differenza bejn it-teħid ta' kampjuni u l-ittestjar tal-popolazzjoni sħiħa

Fil-kampjunar klassiku, il-loġika hija: "Ħalli nittestja bir-reqqa grupp żgħir iżda rappreżentattiv, u ninterpreta r-riżultat kollu kemm hu." Fit-test tal-popolazzjoni sħiħa, il-loġika hija maqluba: "Ħalli niskennja l-intier skond ċerti regoli, insib l-eċċezzjonijiet li jaqgħu barra r-regola u neżaminahom bir-reqqa." Fl-ewwel approċċ, ir-riskju huwa "l-għażla tal-kampjun ħażin"; Fit-tieni, ir-riskju huwa "tikteb ir-regola ħażina" u "taħdem b'dejta mhux kompluta/żbaljata".

It-tabella li ġejja tqabbel iż-żewġ approċċi:

Daqs

teħid ta' kampjuni

Ittestjar tal-popolazzjoni sħiħa (100%)

Ambitu

parti mill-popolazzjoni

popolazzjoni kollha

Riskju ewlieni

Riskju ta' kampjunar (żball ta' rappreżentazzjoni)

Żball tar-regola + żball tal-integrità tad-dejta

output

Numru limitat ta' riżultati tat-test

Lista ta' eċċezzjonijiet li ma jikkonformawx mar-regola

Pi] tal-awditur

għażla + test

Disinn tar-regola + evalwazzjoni tal-eċċezzjoni

Rwol tal-AI

Għajnuna fl-għażla tal-kampjun

Preparazzjoni tad-data, kitba tar-regoli, immarkar ta' eċċezzjoni

Nota: l-ittestjar tal-popolazzjoni sħiħa ma jfissirx "Ittestjajt kollox, xogħol magħmul". Għall-kuntrarju, normalment jagħtik aktar oġġetti x'teżamina. Meta tmexxi l-180,000 fattura kollha permezz ta' regola ta' approvazzjoni ta' data-ammont, issib forsi 900 eċċezzjoni. Kull waħda minn dawn hija mistoqsija; mhux tweġiba. Dan huwa fejn tidħol il-ġudikatura tal-awditjar.

Kompletezza tad-dejta: il-bażi inviżibbli tal-ittestjar

L-akbar żvantaġġ tal-ittestjar tal-popolazzjoni kollha huwa li l-kwalità tat-test tiddependi fuq il-kwalità tad-dejta. "Ittestjajt 100% tad-dejta" tagħmel sens biss jekk id-dejta li għandek tkun fil-fatt 100% tal-popolazzjoni. Jekk filtru ma kienx korrett meta ġibdet id-data mis-sistema, xi rekords tħallew barra, jew il-kolonna tal-ammont ġiet trasferita bi żball deċimali, it-test "sħiħ" tiegħek fil-fatt se jsir fuq data mhux kompluta jew korrotta. Għalhekk, il-konferma tal-kompletezza u l-eżattezza tad-dejta hija l-ewwel pass u indispensabbli fl-ittestjar tal-popolazzjoni sħiħa.

Verifiki prattiċi għall-verifika tal-kompletezza:

  • Rikonċiljazzjoni tal-għadd ta' rekords: In-numru ta' ringieli fis-sett tad-dejta li ġibt jaqbel man-numru totali ta' rekords fis-sistema?
  • Rikonċiljazzjoni tal-ammont: L-ammont totali fis-sett tad-dejta jirrikonċilja mat-total tal-kont rilevanti fil-bilanċ tal-prova/sussidjarja?
  • Firxa tad-data: Huma l-ewwel u l-aħħar jiem tal-perjodu inklużi fid-dejta; Hemm xahar/jum nieqes?
  • Skennjar ta' spazju vojt u ħażin: Hemm xi spazji jew valuri bla sens fl-oqsma meħtieġa (data, ammont, kodiċi tal-kont)?

L-AI tgħin f'dawn il-kontrolli kollha: tkaxkru d-dejta, tikseb it-totali, tgħodd l-ispazji vojta, tirrapporta l-firxa tad-data. Iżda huwa l-awditur li jiddeċiedi jekk il-ftehim "jżommx", jinvestiga d-differenza, u jikkonferma li d-dejta hijiex adattata għall-iskop tal-verifika.

Attenzjoni: Tiktebx "Ittestjajt id-dejta kollha" fuq il-worksheet mingħajr ma tivverifika l-kompletezza tad-dejta. Test tal-popolazzjoni sħiħa fuq data nieqsa jagħti assigurazzjoni apparentement kompluta iżda qarrieqa.

Ittestjar tal-popolazzjoni sħiħa bl-AI: pass pass

  1. Ipprepara data b'mod sigur. Anonimizza l-oqsma personali/privati ​​jew ibdelhom b'placeholders. Jekk possibbli, uża vettura korporattiva b'kuntratt.
  2. Ikkonferma l-kompletezza. Tirrikonċilja n-numru ta 'rekords u l-ammont.
  3. Iddefinixxi b'mod ċar ir-regola tat-test. X'jgħodd bħala "eċċezzjoni"? (Pereżempju: fattura mhux approvata, fattura maħruġa fi tmiem il-ġimgħa, ħlas tond kbir, dħul irreġistrat wara d-data tal-għeluq.)
  4. Applika r-regola bl-AI. AI tapplika r-regola għad-dejta u tipproduċi lista ta' eċċezzjonijiet; Ikteb ir-regola b'mod ċar sabiex tkun tista' tiġi vverifikata.
  5. Ipprijoritizza u tirrevedi l-eċċezzjonijiet. Investiga kull eċċezzjoni b'evidenza; tindirizza pożittivi foloz, tiġġustifika s-sejbiet attwali.
  6. Iddokumenta r-riżultat. Link ir-regola, in-numru ta 'eċċezzjonijiet, l-oġġetti eżaminati, u l-konklużjoni mal-worksheet.

tliet każijiet żgħar

Każ 1 — Test tal-qtugħ. Awditur ried jittestja l-qtugħ tad-dħul fi tmiem is-sena. Huwa ħa 42,000 fattura tal-bejgħ bħala l-popolazzjoni sħiħa u kellu AI jinforza r-"rekords tal-lista b'dati tal-fatturi sal-31 ta 'Diċembru, iżda dati tat-tbaħħir/konsenja fi jew wara l-1 ta' Jannar". YZ immarka 118-il rekord. L-awditur eżamina dawn: 96 kienu tranżazzjonijiet leġittimi mingħajr differenzi fil-ħin (kunsinna fl-istess jum), 22 kienu attwalment dħul għas-sena ta’ wara u ġew irreġistrati fil-perjodu preċedenti. Dawn it-22 oġġett ġew irrappurtati minħabba li wrew mudell, għalkemm taħt is-sinifikat. L-AI staqsiet 118-il mistoqsija; L-awditur sab 22 tweġiba.

Każ 2 — Meta l-kompletezza titħalla barra. Membru wieħed tat-tim qal li għamel ittestjar tal-popolazzjoni sħiħa fuq 180,000 fattura; Ma kien hemm l-ebda eċċezzjoni u kien serħan. Il-persuna responsabbli qabbel l-ammont totali tas-sett tad-dejta mal-bilanċ ta 'prova: data 155 miljun TL, bilanċ ta' prova 210 miljun TL. Jirriżulta li waqt li d-data kienet qed tinġibed mis-sistema, fergħa ġiet iffiltrata u titħalla barra. It-test "sħiħ" fil-fatt tilef kwart tad-dejta. It-test ġie mgħoddi bid-dejta korretta. Lezzjoni: m'hemm l-ebda ttestjar sħiħ tal-popolazzjoni mingħajr konferma tal-kompletezza.

Każ 3 — Żball tar-regoli. Awditur kellu AI jikteb ir-regola "Lista ħlasijiet mhux approvati aktar minn 50,000 TL", iżda ma rrealizzax li l-qasam "approvazzjoni" inżamm f'żewġ kolonni differenti fis-sistema (approvazzjoni elettronika u approvazzjoni manwali). L-AI mmarkat 300 ħlas bħala "mhux approvat" minħabba li ħares lejn wieħed biss; Wara eżami, deher li ħafna minnhom ġew approvati fil-kolonna l-oħra. Ir-regola żbaljata pproduċiet mijiet ta’ pożittivi foloz. L-awditur ikkoreġiet ir-regola biex tinkludi ż-żewġ kolonni. Lezzjoni: l-awditur jivverifika li r-regola tikkonforma mad-dejta u l-proċess tan-negozju.

Pront dgħajjef / Pront qawwi

Pront dgħajjef:

Sib rekords problematiċi f'din id-dejta tal-fattura.

Problema: L-ebda definizzjoni ta '"problematika." AI ma tafx x'għandek tikkunsidra eċċezzjoni; Jaħdem jew skont sinjali każwali jew skont kriterju li jkun għamel. Mhuwiex ripetibbli u verifikabbli.

Pront qawwi:

Ir-rwol tiegħek: inti assistent tal-analiżi tad-dejta għal awditur indipendenti. Is-sentenza hija tiegħi; Inti se tapplika r-regola u tiġġenera lista ta 'eċċezzjonijiet. Kuntest: Hawn taħt hemm data anonimizzata tal-fattura tal-bejgħ (kolonni: invoice_no, invoice_date, delivery_date, amount, approval_status, fergħa). Tmiem tas-sena: 31.12.PASS 1 - Kompletezza: Agħti n-numru totali ta' rekords u l-ammont totali sabiex inkun nista' nqabbel mal-bilanċ tal-prova. Irrapporta jekk hemm xi spazju vojt/nieqes.PASS 2 - Regola tat-test tat-tqattigħ: Elenka r-rekords bid-data_fattura <= 31.12 U d-data_kunsinna >= 01.01 bħala "eċċezzjoni ta' qtugħ".PASS 3 - Ikteb ir-regola f'test sempliċi (liema kundizzjoni applikajt) sabiex tkun tista' tiġi vverifikata. Regoli, ma tajtha r-regola. Ibgħat ir-rekords li smarkat bħala "eċċezzjonijiet għal reviżjoni"; Tgħidx "żball/sejba". Tpattix dak li ma tistax tiddeduċi mid-dejta.

Din it-talba hija qawwija għaliex l-ewwel tikkonferma l-kompletezza, tiddefinixxi b'mod ċar ir-regola tal-eċċezzjoni, teħtieġ it-test sempliċi tar-regola (awdittabilità), u tpoġġi l-output bħala "eċċezzjoni."

Żbalji komuni

  • Taqbeż il-verifika tal-kompletezza. Twettaq ittestjar "sħiħ" fuq data mhux kompluta/korrotta u tagħti assigurazzjoni falza.
  • Jiżbalja l-eċċezzjoni għal sejba. Żbalji fl-għadd mingħajr verifika tar-rekord immarkat mill-AI; tevita li jiġu eliminati pożittivi foloz.
  • Mhux iċċekkja r-regola. Tiġġenera mijiet ta 'bnadar foloz mingħajr ma tiċċekkja jekk ir-regola tikkonformax mad-dejta u l-proċess tan-negozju.
  • Kitba regoli vagi. Ikseb riżultati irrepetibbli b'prompts mhux definiti bħal "issib rekords problematiċi".
  • Li tkun kuntent b'bidu wieħed. Mhux mistoqsija dwar ir-regola jew id-dejta jekk in-numru ta' eċċezzjonijiet ikun differenti ħafna minn dak mistenni.
Tip: Kun allarmat jekk in-numru ta' eċċezzjonijiet ikun żgħir wisq (qrib iż-żero) jew kbir wisq. Żero normalment ifisser "regola miktuba ħażin" jew "data nieqsa"; Numru estremament kbir jindika li r-regola hija wiesgħa wisq. Awditur tajjeb jissuspetta kemm "l-ebda eċċezzjoni" kif ukoll "kollox huwa eċċezzjonijiet".

Fil-qosor

L-ittestjar tal-popolazzjoni sħiħa huwa qabża kbira 'l quddiem fl-awditjar: jelimina r-riskju tat-teħid ta' kampjuni, billi jeżamina 100% tad-dejta. Imma mhux b'xejn. Dan iġib żewġ responsabbiltajiet ġodda: (1) il-verifika tal-kompletezza u l-eżattezza tad-dejta, (2) l-evalwazzjoni tal-eċċezzjonijiet individwali li jinqalgħu. AI tipprepara d-dejta, tapplika r-regola, timmarka l-eċċezzjoni u tnaqqas is-sigħat ta 'skanjar għal sekondi; Iżda l-eżattezza tar-regola, il-kompletezza tad-dejta u l-evalwazzjoni tal-eċċezzjonijiet jappartjenu lill-awditur. L-eċċezzjoni mhix riżultat, hija bidu.

Kompitu ta' applikazzjoni

Ikkunsidra sett ta' data ta' tranżazzjoni eżistenti (jew ipotetiku). L-ewwel iddefinixxi żewġ kontrolli ta' kompletezza (numru ta' rekords u rikonċiljazzjoni tal-ammont). Imbagħad ikteb regola ċara ta’ eċċezzjoni għal skop ta’ verifika (eż. fatturi maħruġa fi tmiem il-ġimgħa, jew eċċezzjonijiet ta’ qtugħ). Bil-mudell qawwi fil-pront hawn fuq, qabbad lill-AI tesegwixxi l-kompletezza l-ewwel u mbagħad ir-regola. L-ewwel 10 mill-eċċezzjonijiet li jidhru huma "sejbiet reali jew pożittivi foloz?" Ipprattika l-klassifikazzjoni kif ġej u ikteb liema evidenza se tfittex għal kull wieħed.

lista ta' kontroll

  • [ ] I anonimizzat id-data u saq b'mod sigur.
  • [ ] Ikkonfermajt il-kompletezza tad-dejta billi rrikonċiljajt in-numru ta' rekords u l-ammont.
  • [ ] Skennjat għal spazju ħieles/ħażin.
  • [ ] Iddefinijt ir-regola ta' eċċezzjoni b'mod ċar u ripetibbli.
  • [ ] Irċevejt it-test sempliċi tar-regola mill-AI u vverifikajt il-konformità tagħha mad-dejta u l-proċess tan-negozju.
  • [ ] Staqsejt ir-raġonevolezza tan-numru ta' eċċezzjonijiet (ftit wisq / mhux wisq).
  • [ ] I ttrattat kull eċċezzjoni bħala mistoqsija li trid tiġi eżaminata, mhux sejba; Eliminajt pożittivi foloz.