Aonad 9 / 11

Tástáil A/B agus Dearadh Turgnamhach: Tógáil Athraitheach agus Tábhacht

Gnóthachain:

  • Cumas na coincheapa a bhaineann le tástáil A/B, rialú/athraitheach, ráta coinbhéartachta agus tábhacht staitistiúil a thuiscint agus hipitéisí agus dearaí tástála a bhunú le hintleachta saorga.
  • Cumas an athróg aonair atá le tástáil a leithlisiú agus téacs/íomhá athraitheach agus plean tomhais a tháirgeadh le tacaíocht hintleachta saorga
  • Cumas idirdhealú a dhéanamh go bhfuil léirmhíniú tástála na hintleachta saorga teoranta ag méid an tsampla agus ag tábhacht an tsampla agus ag an riosca go léifear torthaí roimh am/míchearta

Is é an abairt is contúirtí i bhfógraíocht "Sílim go bhfuil sé seo níos fearr." Insíonn sonraí, ní tuairim, duit cé acu an bhfuil ceannlíne, íomhá nó cnaipe i ndáiríre níos fearr. Is é an bealach is coitianta chun é seo a thomhas ná tástáil A/B: dhá leagan (nó níos mó) den fhógra céanna a thaispeáint d’úsáideoirí fíor agus comparáid a dhéanamh idir cé acu leagan is fearr a oibríonn. Is gnách gurb é "A" an leagan reatha (rialú), agus is é "B" an leagan nua atá á thriail (athraitheach). Mar shampla, ní féidir leat ach an teideal a athrú san fhógra céanna agus tomhas cén teideal is mó a chliceáiltear. Tá faisnéis shaorga ina chuidiú sa phróiseas seo chun líon mór malairtí a ghiniúint agus chun an toradh a léirmhíniú; Ach braitheann bailíocht eolaíoch na tástála ar rialacha dearaidh agus foighne.

Riail órga na tástála A/B: athróg amháin

Is é an riail is bunúsaí maidir le tástáil A/B ná athróg amháin a leithlisiú. Má athraíonn tú an teideal, an íomhá agus an cnaipe ag an am céanna agus má bhuann leagan B, ní bheidh a fhios agat cad a bhuaigh. Mar sin i dtástáil níor cheart ach eilimint amháin a athrú, ba cheart go bhfanfadh an chuid eile tairiseach. Más mian leat níos mó ná mír amháin a thástáil go comhuaineach agus go córasach, tugtar tástáil ilvariate air seo agus éilíonn sé sampla i bhfad níos mó; Is é tástáil A/B univariate an bealach le tosú.

Is é an dara coincheap bunúsach tábhacht staitistiúil. Ligean le rá fuair leagan A 3 faoin gcéad cliceáil agus fuair leagan B 3.3 faoin gcéad cad a tharlaíonn. An buntáiste fíor nó púc é an difríocht seo? Mura léirigh tú ach an tástáil do 100 duine, d'fhéadfadh an difríocht seo a bheith comhtharlaitheach. Ciallaíonn tábhacht staitistiúil nach dócha go bhfuil an difríocht a breathnaíodh mar gheall ar sheans (i.e. is dócha go bhfuil an difríocht fíor). Éilíonn sé seo méid sampla leordhóthanach (líon na ndaoine a fheiceann an tástáil). Is é an botún is coitianta agus is costasaí ná “buaiteoir” a fhógairt gan mórán sonraí.

Leid: Sula dtosaíonn tú ar an triail, freagair an cheist "cén uair a fhógróidh mé an buaiteoir": cé mhéad duine/iar-thiontú, ag cén leibhéal tábhachta. Má dhéantar an cinneadh seo roimh ré ní féidir leat a bheith gafa leis an torann sna chéad uair an chloig agus cinneadh a dhéanamh roimh am.

Déanann an tábla seo a leanas comparáid idir dearadh tástála A/B maith agus olc:

mír

droch-dhearadh

dearadh maith

Líon na n-athróg

Teideal + íomhá + cnaipe le chéile

teideal amháin

hipitéis

(none) "a fheiceáil cad a tharlaíonn"

"Méadaíonn teidil le ceisteanna cliceanna"

sampla

80 duine

Córam réamh-ríomh

am cinnidh

2 uair níos déanaí

Nuair a shroicheann tú tábhacht

Roghnú buaiteoir

"Sílim go bhfuil B go deas"

Bunaithe ar shonraí agus ar thábhacht

Céim ar chéim: tástáil A/B a shocrú

Céim 1 - Scríobh hipitéis. Cad atá á thástáil agat agus cén fáth? hipitéis soiléir cosúil le "Faigheann ceannlíne le sochair níos mó cad a tharlaíonn nuair ná ceannlíne le gnéithe."

Céim 2 - Roghnaigh athróg amháin. Díreach an teideal, nó díreach an íomhá, nó díreach an CTA.

Céim 3 - Gin leaganacha. Cruthaigh leaganacha éagsúla den mhír chéanna le AI; coinnigh an chuid eile seasmhach.

Céim 4 - Socraigh plean tomhais. Cé acu méadrach a chinnfidh an buaiteoir (ráta cliceáil-trí, comhshó), cé mhéad sampla a bheidh ag teastáil, cé chomh fada le rith.

Céim 5 - Léirmhíniú agus fíoraigh an toradh. An bhfuil dóthain sonraí bailithe, an bhfuil an difríocht suntasach? Mura bhfuil sé suntasach, is toradh bailí é "gan aon difríocht" freisin.

trí chás mion

Cás 1 — Soiléire athróige aonair. Rinne branda ríomhthráchtála tástáil ar CTA díreach ina fhógra táirge: “Ceannaigh” agus “Cuir le tralaí.” Bhí gach rud eile mar an gcéanna. Tar éis dóthain samplála a dhéanamh, thug “Cuir leis an tralaí” tiontuithe i bhfad níos airde. D’fhéadfaí an difríocht a léirmhíniú go soiléir toisc go raibh athróg amháin scoite amach. Tháirg AI dhá CTA, roghnaigh sonraí an buaiteoir.

Cás 2 — Gaiste luathbhreithe. Chuir branda stop leis an triail toisc go raibh leagan B chun tosaigh sa chéad 3 huaire de thástáil A/B agus d’oscail B don bhuiséad iomlán. Ag féachaint ar na sonraí iomlána an lá dár gcionn, bhí A beagán níos fearr; Bhí an difríocht sna chéad uaireanta comhtharlaitheach. Cuireadh an buiséad amú. Botún: cinneadh a dhéanamh roimh am gan dóthain méid an tsampla.

Cás 3 – “Gan difríocht” an chonclúid freisin. Thástáil branda dhá íomhá dhifriúla, agus tar éis dóthain samplála a dhéanamh, tháirg siad araon beagnach an toradh céanna. Cé go raibh an fhoireann ar tí a bheith ag caoineadh gur theip ar an “triail”, ba é an léamh ceart ná nach í an íomhá an fachtóir cinntitheach san fheachtas seo, agus mar sin ba cheart an iarracht a dhíriú ar an gceannlíne agus ar an tairiscint. Is faisnéis luachmhar é freisin nach bhfuarthas aon difríocht shuntasach.

Ceithre theimpléad inchóipeála

1) Hipitéis agus dearadh tástála:

Cad ba mhaith liom a thástáil: [m.sh. teideal an fhógra].Tasc: (1) Scríobh hipitéis intástála amháin (san fhoirm "... méaduithe ... méaduithe").(2) Liostaigh an t-athróg aonair le leithlisiú agus na cinn le coinneáil tairiseach.(3) Mol an méadrach a shocróidh an buaiteoir (ráta cliceáil-trí/tiontú).(4) Scríobh cad is gá dom aird a thabhairt air chun an tástáil a bhailíochtú (sampla), fad, cinneadh luath

2) Gineadóir athraitheach (athraitheach singil):

Fógra greamaitheach: íomhá [céanna], CTA [céanna], sprioc [céanna]. Athróg tástáladh: CEANNLÍN. Príomhtheachtaireacht: "[teachtaireacht]". Tasc: Gin 4 leagan ceannlíne dhifriúla leis an teachtaireacht chéanna. Úsáideann gach ceann acu cur chuige difriúil (ceist, tairbhe, uimhir, práinne). Ní athraíonn ach an ceannlíne; Éileamh gan bhunús a chur leis.

3) Plean tomhais:

Tástáil: [Sainmhíniú ar A agus B]. Méadrach: [cliceáil/tiontú].Tasc: Dréachtphlean tomhais:(1) cé acu méadrach príomhúil, cé acu tánaisteach,(2) cé mhéad sonraí/am atá ag teastáil chun an buaiteoir a dhearbhú (mínigh an loighic),(3) conas trácht a roinnt go cothrom agus go cothrom idir A agus B,(4) cad iad na fachtóirí seachtracha is féidir an toradh a shaobhadh (séasúr, lá na seachtaine). Glac leis go n-úsáidfidh mé uirlis chruinn chun suntas a thabhairt.

4) Ateangaire torthaí (cúramach):

Mo thorthaí tástála A/B (shonraí réadacha): [A: imprisean/cliceáil/tiontú],[B: imprisean/cliceáil/tiontú].Tasc: (1) Ríomh agus taispeáin rátaí gach leagain.(2) Déan trácht ar mhéid na difríochta, ach mura leor an sampla, abair "neamhleor sonraí le haghaidh toradh bríoch."(3) Ná cuir i gcuimhne/léamh na rioscaí a bhaineann le tábhacht an réamh-mhínithe. Deimhneoidh mé le huirlis cuntais ar leith.

Leid lag / Pras láidir

Leid lag:

Déan leagan A agus B do m'fhógra, inis dom cé acu ceann is fearr.

Níl an athróg scoite amach, níl aon hipitéis agus tomhas ann; Ní féidir le AI a fhios cé acu ceann atá "maith" gan sonraí, déanann sé suas é.

Leid chumhachtach:

Tá tástáil A/B á bhunú agam. Seasta: fanfaidh íomhá agus CTA mar an gcéanna.Ní dhéantar tástáil ach ar an athróg: ceannlíne ad.Hypothesis: "Faigheann ceannlíne le huimhreacha níos mó cad a tharlaíonn nuair ná ceannlíne ginearálta." Príomhtheachtaireacht: "Seachadta i 3 lá." Tasc: (1) Táirgeann ceannlíne ginearálta 1 le haghaidh rialaithe, 3 cheannlíne le huimhreacha don mhalairt. an tástáil. Ná réamh-mheas cé acu a bhuaigh; Cinnfidh na sonraí é.

Déanann an dara éileamh athróg amháin a leithlisiú, baineann hipitéis agus tomhas; fhágann an buaiteoir leis na sonraí.

Botúin choitianta

  • Athrú go leor míreanna ag an am céanna. Éiríonn an chúis atá leis an buaiteoir doiléir; Ní mór athróg amháin a leithlisiú.
  • Cinntí a dhéanamh gan dóthain samplaí. Is minic a bhíonn an difríocht sna chéad uaireanta comhtharlaitheach.
  • Tástáil gan hipitéisí. “Feicfimid cad a tharlaíonn” ní éiríonn le tástáil foghlaim; Ar dtús scríobh síos cad a bhfuil tú ag súil leis.
  • An toradh "Gan difríocht" a chur amú mar theip. Tá an easpa difríocht shuntasach faisnéiseach freisin.
  • Roghnú an buaiteoir bunaithe ar blas. Is éard atá i gceist le tástáil blas pearsanta a chur as an áireamh; Lean na sonraí.
  • Dearmad ar fhachtóirí seachtracha. Is féidir le séasúr, lá feachtais, sreabhadh nuachta an toradh a shaobhadh; Coinnigh na coinníollacha tástála cothrom.
Aird: Ní hé cuspóir na tástála A/B “bua” ach foghlaim. Is faisnéis luachmhar é fiú malairt athraitheach; Tá an fíorchaillteanas ag brath ar an toradh mícheart gan dóthain sonraí agus an buiséad á cheangal leis.

Go hachomair

Is modh cumhachtach é tástáil A/B a aistríonn cinntí fógraíochta ó smaoineamh go sonraí. Is é an riail órga ná athróg amháin a leithlisiú: níor cheart ach eilimint amháin a athrú i dtástáil, ba cheart go bhfanfadh an chuid eile tairiseach. Is é an dara colún ná sampláil leordhóthanach agus tábhacht staitistiúil; Is é an botún is costasaí ná buaiteoir a fhógairt gan mórán sonraí. Tá AI ina chuidiú chun leaganacha iolracha a ghiniúint agus chun corrlaigh a ríomh agus a léirmhíniú, ach is iad na sonraí a chinneann an buaiteoir, ní an AI. Is foghlaim fiú an toradh "gan difríocht". Ba cheart an tairseach hipitéise, méadrach agus cinnidh a scríobh sula dtosaíonn an tástáil.

Tasc feidhmchláir

Roghnaigh cruthaitheach (ceannlíne, íomhá nó CTA). (1) Scríobh hipitéis intástála amháin agus athróg leithlisithe le "Hipitéis agus dearadh tástála". (2) Gin 1 rialú + 3 leagan le "gineadóir athraitheach"; Just a athrú go eilimint. (3) Pleanáil cé acu méadrach a bhreathnóidh tú air, cé chomh fada agus cé na sonraí, leis an “plean tomhais”. (4) Scríobh síos do thairseach chun an buaiteoir a fhógairt (cé mhéad tiontú / cén tábhacht) roimh ré. (5) Déan machnamh ar thorthaí hipitéiseacha le “ateangaire torthaí” agus tabhair faoi deara cén fáth nach ndéanfadh tú cinneadh i gcás nach bhfuil dóthain sonraí ann.

seicliosta

  • [ ] Ní dhearna mé ach athróg amháin sa tástáil.
  • [ ] Scríobh mé hipitéis shoiléir roimh an tástáil.
  • [ ] Tá an sampla agus an t-am a theastaíonn don bhuaiteoir socraithe agam cheana féin.
  • [ ] Roghnaigh mé an buaiteoir bunaithe ar shonraí, ní blas pearsanta.
  • [ ] Mheas mé an toradh "gan difríocht" mar fhoghlaim bhailí.
  • [ ] Sheiceáil mé le haghaidh fachtóirí seachtracha a d'fhéadfadh an toradh a shaobhadh.