Hagnaður:
- Hæfni til að skilja mannlega forvitni sem byggir á eðli könnunarprófa og nota gervigreind sem samstarfsaðila til að búa til prófunarskrár og leiðandi vísbendingar
- Geta til að auka fjölbreytni í uppgötvunarásunum eins og inntak, tímasetningu, sniði, heimild og truflun og skrá hvert frávik með framleiðsluskrefinu aftur
- Geta til að beita takmörkunum á notkun gervigreindar eingöngu í undirbúningi og frágangi á meðan uppgötvunarlotan sjálf er framkvæmd af mönnum
Sérhvert prófmál sem skrifað er athugar eitthvað sem þegar hefur verið hugsað um. En hættulegustu mistökin leynast oft á stöðum sem engum hefur dottið í hug áður. Könnunarprófun - prófunaraðferð þar sem prófandinn lærir, hannar og keyrir vöruna samtímis með því að kanna hana, án þess að treysta á fyrirframskrifað handrit - miðar nákvæmlega við þetta bil. Í könnunarprófunum leikur sérfræðingurinn frjálslega með vöruna, spyr „hvað ef ég geri þetta“ og greinir óvænta hegðun kerfisins. Þetta er sú tegund prófunar sem byggir mest á mannlegu innsæi og forvitni – og það er einmitt þess vegna sem hlutverk gervigreindar (AI) hér er ekki að „skipta um“ heldur að magna upp forvitni, kalla fram blinda bletti og búa til hugmyndir.
Í þessari einingu munt þú læra hvernig á að nota gervigreind sem könnunarprófunaraðila: allt frá því að prenta prófunarskrár, kalla fram heuristics, til að draga saman athugasemdir eftir lotu.
Hvers vegna eru könnunarprófanir enn mannanna verk?
Skrifuð prófun - próf með skrefum sem eru skrifuð fyrirfram og endurtekið orðrétt - staðfestir það sem vitað er; Könnunarpróf leitar að hinu óþekkta. Gildið í könnunarprófunum kemur frá því augnabliki sem prófunarmaðurinn sér vöruna og skynjar „það er eitthvað skrítið hérna“. AI getur ekki séð vöruna eins og þú sérð hana, það getur ekki skynjað hvað myndi trufla raunverulegan notanda, það er ekki hægt að trufla hana með því að segja "þessi hnappur er á röngum stað". En gervigreind er mjög öflugt hjálpartæki á þrjá vegu: (1) að búa til kerfisbundna lista yfir prófhugmyndir, (2) að minna þig á prófunarása sem þú hefur gleymt, (3) að breyta dreifðum uppgötvunarskýrslum þínum í skipulagða skýrslu.
Ábending: Biddu gervigreindina um „upphitun prófahugmynda“ áður en þú byrjar uppgötvunarlotuna; Ekki skilja skjáinn eftir til gervigreindar á meðan á lotunni stendur. AI er gagnlegt fyrir og eftir lotuna; Fundurinn sjálft er knúinn áfram af forvitni þinni.
Heuristics og gervigreind
Könnunarprófarar nota heuristics, sem eru stuttar áminningar sem veita stefnu í pödduleitinni. AI getur minnt þig á þetta með því að laga þau að þínu samhengi. Nokkrar klassík:
- CRUD: Prófaðu að búa til, lesa, uppfæra, eyða flæði fyrir hver gögn; trufla einhvern.
- Gulllokkar (lítið/fullt/mikið): Sláðu inn mjög lítið, fullt og mikið af gögnum í reit (0 stafir, 1 stafir, 10.000 stafir).
- CRUD + tímasetning: Breyttu sömu færslunni í tveimur flipa í einu, vistaðu síðan báða.
- Trufla: Endurnýjaðu síðu í miðri aðgerð, aftengdu netið, ýttu á bakhlið.
- Öfug röð: Gerðu skrefin í öfugri röð (borgaðu fyrst og bættu síðan í körfu).
Þegar þú segir gervigreindinni að „leggja til áþreifanlegar tilraunir með því að beita þessum leiðandi vísbendingum fyrir þann skjá,“ færðu gátlista tilbúinn á sviði.
Að skrifa prófskilyrði (skipulagsskrá)
Könnunarpróf snýst ekki um að flakka; Það beinist að prófunarskránni (stutt tilskipun sem skilgreinir hvað könnunarfundur mun kanna og í hvaða tilgangi). Góð skipulagsskrá fylgir þessu mynstri: „Kannaðu [marklén], notaðu [verkfæri/gögn], til að afhjúpa [hvaða upplýsingar/áhættu]. AI gerir fljótt drög að þessum skilmálum.
Jafnvægi á forskriftarprófum og könnunarprófum
Hljóðprófunaraðferð notar blöndu af forskriftarprófum (sjálfvirkum, endurteknum) prófunum og könnunarprófum. Forskriftarpróf staðfesta á ódýran hátt að þekkt hegðun sé ekki brotin, útgáfu eftir útgáfu; Könnunarprófanir leita aftur á móti að nýjum áhættum sem þessi forskrift hafa aldrei tekið tillit til. Þeir tveir eru ekki keppinautar, heldur fyllingar. Algeng mistök eru að hugsa „við skulum gera allt sjálfvirkt svo það sé engin þörf á uppgötvun“; á meðan sjálfvirkni athugar aðeins það sem þú veist nú þegar, getur hún aldrei fundið það sem þú veist ekki. Önnur mistök eru hið gagnstæða: að treysta á handvirka uppgötvun með hverri útgáfu án þess að setja upp neina sjálfvirkni - þetta leiðir til þess að sömu grunnvillurnar læðast inn aftur og aftur.
AI hjálpar til við að koma á þessu jafnvægi: þú getur breytt fráviki sem þú finnur í uppgötvunarlotunni þinni í varanlegt forskriftaraðhvarfspróf með því að gefa það til AI. Þannig getur villan sem uppgötvaðist við uppgötvun aldrei komið aftur óuppgötvuð aftur. Discovery sér um að „finna nýju áhættuna“, sjálfvirkni sér um „ekki sleppa því sem fannst“; AI flýtir fyrir brúnni á milli tveggja.
Ábending: Aðskilja úttak hverrar uppgötvunarlotu í tvær fötur: „villur til að laga strax“ og „atburðarás til að breytast í varanlega sjálfvirkni.“ Önnur fötuna ber langtímagildi uppgötvunarinnar inn í aðhvarfspakkann þinn.
Veik kvaðning / Sterk kvaðning
Veik: "Hvað ætti ég að prófa á þessum skjá?"
Sterkt: "Fyrir 'prófílmyndaupphleðslu' eiginleika skaltu skipta 90 mínútna könnunarprófunarlotunni í 3 prófunarskilyrði. Fyrir hvert ástand: gefðu markmiðinu, leiðandi vísbendingar til að nota (skráarstærð/snið/gulllokkar/stýnun), 5 áþreifanlegar aðgerðir til að reyna og hættumerki til að passa upp á (hæging, skemmd mynd, upphleðsla á röngum skrám, upphleðsla) varnarlega."
Öflug hvetja; gefur lengd, uppbyggingu, vísbendingar og áhættufókus. Niðurstaðan er vegakort sem þú munt hafa við höndina alla lotuna.
Tafla rannsóknarása
ás
spurning til að spyrja
sýnishorn ritgerð
Inntaksmörk
Hvað gerir völlurinn við öfgaverðmæti?
10.000 stafa nafn
tímasetningu
Hvað gerist í samhliða/rofinni vinnslu?
Vistaðu sömu skrána í tveimur flipa
Snið
Hvernig á að höndla hið óvænta snið?
Emoji, texti frá hægri til vinstri, HTML
heimild
Getur óviðkomandi notandi aðgang?
Breyttu vefslóð handvirkt
Staða
Er ógild ríkisskipti möguleg?
Reyndu að borga fyrir aflýsta pöntun
frádráttur
Eru gögnin í samræmi þegar netið/lotan er rofin?
Slökktu á neti meðan þú tekur upp
Fjögur afritanleg sniðmát
1) Próf ástand rafall:
Þitt hlutverk: eldri könnunarprófari. Skiptu [lengd] mínútu könnunarlotu í 3-4 prófunarskilyrði fyrir eiginleika:[eiginleika]. Hvert ástand: markmið, leiðandi vísbendingar til að nota, 5 áþreifanlegar aðgerðir til að prófa, áhættumerki til að horfa á. Skilyrðismynstur: "Kannaðu [lén] með [tól/gögnum] fyrir [áhættu/upplýsingar]."
2) Leiðandi vísbending millistykki:
Þýddu þessar leiðandi vísbendingar í áþreifanlegar tilraunir fyrir eftirfarandi skjá: CRUD, goldilocks (minna/fullt/meira), trufla, öfugri röð, framhjá heimild. Skjár: [lýsing á skjá/flæði]. Skrifaðu 2 skjásértækar tilraunir fyrir hverja vísbendingu.
3) Áminning um blinda bletti:
Ég er að prófa eftirfarandi eiginleika: [eiginleiki]. Listaðu yfir 10 tilvik þar sem reyndir prófunaraðilar missa MEST af þessari tegund eiginleika. Innifalið aðgengi, staðsetningar (tungumál/dagsetning/gjaldmiðill), samhliða, öryggi og frammistöðuásar.
4) Samantektir fundarskýrslu:
Hér að neðan eru hráar athugasemdir frá uppgötvunarlotunni minni. Skipuleggðu þau í þessari uppbyggingu: - Frávik fundust (með áætluðum alvarleika) - Þeir sem eru með þekkt æxlunarskref - Þeir sem krefjast frekari rannsóknar - Tillaga fyrir næstu lotu Hráar athugasemdir: [líma athugasemdir]
þrjú smámál
Tilfelli 1 - Áminning um blinda blett í aðgerð. Sérfræðingur var að prófa leitaraðgerðina í fjöltyngdu forriti. Við áminningu gervigreindar um að „ekki gleyma staðsetningarásnum“ reyndi hann tyrknesku-sértæka „i/I“ bókstafabreytinguna. Leit að „Istanbúl“ skilaði engum niðurstöðum; Viðskiptavilla í lágstöfum fannst. AI ás minnti á, sérfræðingurinn reyndi og fann hann.
Mál 2 — Áhersla sáttmálans. Nýr prófunaraðili eyddi 2 klukkutímum í að "surfa" í gegnum greiðsluskjá en skrifaði aðeins 2 litlar athugasemdir vegna þess að hann var óskipulagður. Eftir að hafa skipulagt lotu með gervigreindinni skipt í 3 prófunarskilyrði, skráði það 11 frávik á sama tímabili; tveir þeirra voru alvarlegir. Sami tími var 5 sinnum hagkvæmari þökk sé uppbyggingunni.
Mál 3 - Varnarprófun á skráaupphleðslu. Hópur prófaði „ranga viðbót/of stóra skrá“ sem YZ lagði til við að hlaða upp prófílmynd, í eigin vörum. Fann að 50 MB skrá hrundi þjóninum í 40 sekúndur og bætti við stærðartakmörkunum og tímamörkum. Prófunin var aðeins gerð á eigin vörum, í varnarskyni.
Algeng mistök
- Skipti um gervigreind fyrir lotu. Gildi uppgötvunar er í athugun þinni og innsæi; AI hjálpar við undirbúning og bata.
- Skoðaðu án fyrirvara. Að eyða tíma án einbeitingar og finna lítið. Prófskilyrðið gefur fókus.
- Ekki safna seðlum. Ef þú vistar ekki frávikið sem fannst í uppgötvuninni með framleiðsluskrefinu aftur tapast sú uppgötvun.
- Að vera fastur á einum ás. Alltaf að prófa mörk inntaks; Framhjá valdi, tímasetningu, staðsetningarásum.
- Framkvæma óviðkomandi öryggisprófanir. Reyndu aðeins að vinna með skrár/vefslóð á eigin vöru og með leyfi.
Í stuttu máli
Könnunarpróf er sú tegund prófunar sem byggir mest á forvitni manna, leit að hinu óskrifaða. AI mun ekki koma í stað þín hér; Það útlistar prófunaraðstæður, aðlagar leiðandi vísbendingar að samhengi þínu, minnir þig á blinda bletti og breytir sóðalegum fundarskýrslum þínum í skipulagða skýrslu. Gildi kemur frá athugun þinni og innsæi; AI einbeitir sér og margfaldar þetta gildi. Skrifaðu skilyrði, breyttu ásunum, skráðu niðurstöðurnar með framleiðsluþrepinu aftur, framkvæmdu öryggisprófanir aðeins innan heimildar.
Umsóknarverkefni
Veldu eiginleika úr eigin vöru. Skiptu 60 mínútna lotunni í 3 aðstæður með því að nota „prófunarskilyrði rafall“ sniðmátið með gervigreind. Gerðu lotuna (án gervigreindar, skoðaðu í höndunum), haltu hráum athugasemdum. Þegar því er lokið skaltu skipuleggja glósurnar með sniðmátinu „Session Note summarizer“. Niðurstaða: að minnsta kosti 5 frávik, endurnýjunarþrep fyrir hvert og alvarleikamat. Athugaðu hvaða prófunarástand og leiðandi vísbending leiddu til verðmætasta fráviksins sem þú fannst.
gátlisti
- [ ] Fyrir fundinn bjó ég til prófunaraðstæður með gervigreind og ákvað fókusinn.
- [ ] Ég reyndi að minnsta kosti 4 mismunandi uppgötvunarása (inntak, tímasetning, snið, heimild, truflun).
- [ ] Ég stjórnaði fundinum handvirkt, af eigin forvitni; Ég skipti ekki um gervigreind.
- [ ] Ég skráði hvert frávik með æxlunarskrefum og mati á alvarleika.
- [ ] Ég breytti glósunum mínum í venjulega skýrslu með gervigreind.
- [ ] Ég hef aðeins reynt öryggi/meðhöndlun á eigin vöru og með leyfi.