Vibadala vya Jaribio la A/B na Muundo wa Majaribio

Faida:

• Uwezo wa kutoa vibadala vya maandishi vinavyotenganisha vibadala kimoja kwa ajili ya majaribio ya A/B
• Uwezo wa kubadilisha dhana kuwa usanidi wa majaribio unaopimika
• Uwezo wa kutafsiri matokeo ya mtihani katika suala la umuhimu wa takwimu na kujifunza

Intuition ni muhimu katika uuzaji, lakini ushahidi ni muhimu zaidi. Ni kichwa kipi kinapata mibofyo zaidi, ni CTA gani inauza zaidi, ni picha gani inayovutia zaidi? Badala ya kubahatisha, unaweza kupima hii na upimaji wa A/B. Jaribio la A/B ni mbinu ya majaribio inayoonyesha matoleo mawili ya maudhui sawa (A na B) kwa hadhira halisi na kupima ni ipi inafanya vyema zaidi. Akili ya Bandia haraka hutoa pembejeo kwa majaribio haya, ambayo ni anuwai; Lakini kufanya mtihani ufanye kazi kunahitaji sheria ya kisayansi: tofauti moja kwa wakati mmoja. Katika kitengo hiki utajifunza jinsi ya kutengeneza vibadala, kutafsiri nadharia tete kuwa jaribio linaloweza kupimika, na kutafsiri matokeo kulingana na umuhimu wa takwimu.

Kanuni ya dhahabu: tenga tofauti moja

Ili kufasiri matokeo ya jaribio, ni jambo moja tu ambalo lazima liwe tofauti kati ya A na B. Ukibadilisha kichwa, picha na CTA kwa wakati mmoja, hutawahi kujua ni ipi iliyoleta tofauti wakati B alishinda. Kutenga tofauti ili kujaribiwa ndicho kitu pekee kinachofanya kujifunza kuwezekana.

Vigezo vya kawaida vinavyoweza kujaribiwa:

• Kichwa: Picha na mwili sawa, mada tofauti.
• Maandishi ya CTA: "Nunua" au "Ongeza kwenye rukwama"?
• Mstari wa mada: Huathiri kiwango cha wazi cha barua pepe.
• Picha: Maandishi sawa, picha tofauti.
• Urefu/toni: Mfupi dhidi ya ndefu, rasmi n.k. dhati.

Kutoka kwa nadharia hadi majaribio: hatua kwa hatua

1. Fanya uchunguzi. "Ukurasa wetu wa kutua una ubadilishaji mdogo."
2. Hypothesise. "Kichwa cha habari kinachozingatia manufaa kinabadilisha zaidi ya kichwa kinachozingatia kipengele."
3. Tenga tofauti. Kichwa pekee ndicho kitabadilika.
4. Tengeneza lahaja. Vibadala 2 vilivyo na muundo (A: kipengele, B: faida).
5. Bainisha kipimo chako cha mafanikio. Kwa mfano, asilimia ya walioshawishika - asilimia ya wageni wanaofanya kitendo kinachohitajika.
6. Amua sampuli na muda. Watu wa kutosha na muda wa kutosha.
7. Pima, linganisha, jifunze. Jifunze "kwa nini", sio mshindi.

"Nadharia" ni utabiri ambao utajaribiwa hapa na unaweza kugeuka kuwa kweli au uongo; Dhana nzuri inakuambia nini unatarajia na kwa nini.

Agizo dhaifu / Ukumbusho thabiti

Agizo dhaifu:

Andika baadhi ya njia mbadala za kichwa hiki.

Agizo lenye nguvu:

Tengeneza vibadala kwa jaribio la A/B. Kanuni: Kichwa TU ndicho kitabadilika, mwili na CTA zitasalia sawa.HYPOTHESIS: Kichwa chenye mwelekeo wa manufaa hupata mibofyo mingi kuliko kichwa chenye mwelekeo wa kipengele.MUHTASARI: Ukurasa wa kutua. Bidhaa: maombi ya usimamizi wa mradi. Hadhira: timu ndogo.INAOMBWA:- Lahaja A: kichwa chenye mwelekeo wa kipengele (kinafafanua kile bidhaa hufanya)- Lahaja B: kichwa chenye mwelekeo wa manufaa (huelezea kile kinachotoa kwa mtumiaji) Chini ya kila kibadala, andika ni motisha gani ya kisaikolojia inagusa.Vibadala 2 pekee; Zote mbili zinapaswa kuwa mstari mmoja, wa urefu sawa.

Ni muhimu kutaka vibadala viwe na urefu sawa; vinginevyo "urefu" bila kukusudia huwa kigezo cha pili.

Kabla/baada ya chati ya majaribio

Jukwaa

Nini cha kufanya

makosa ya mara kwa mara

hypothesis

Nini, kwa nini ninasubiri?

"Wacha tujaribu" bila nadharia

Inaweza kubadilika

Tenga jambo moja

Kubadilisha vitu vingi mara moja

kigezo

Chagua kipimo kimoja wazi

Muda usiojulikana "bora"

sampuli

Watu/wakati wa kutosha

kuamua mapema

Maoni

Jifunze kwa nini

Chukua tu mshindi

kesi tatu ndogo

Kesi ya 1 - Mtihani wa CTA unatoa matokeo wazi. Tovuti ya biashara ya mtandaoni ilijaribu kitufe cha bidhaa: "Nunua", B "Ongeza kwenye rukwama". Maandishi ya kitufe pekee ndiyo yamebadilika. Katika jaribio la wageni 3,000, B iliongeza kiwango cha kubofya kutoka 4.0% hadi 4.9%. Kwa tofauti moja iliyotengwa, mshindi alikuwa wazi: "ongeza kwenye gari" alihisi chini ya kufungwa.

Kesi 2 - Hitilafu ya Multivariate. Timu ilibuni kurasa mbili za kutua, lakini kichwa, picha na rangi zote zilikuwa tofauti. B alishinda, lakini timu haikujua ni kipengele gani kilileta tofauti; kujifunza ikawa sifuri. Katika jaribio lililofuata, walifuata kanuni: tofauti moja kwa wakati mmoja. Katika mtihani huo, waliona wazi kuwa cheo ndicho kigezo kikuu.

Kesi ya 3 - Mtego wa uamuzi wa mapema. Timu ya jarida ilijaribu mada mbili kwenye kikundi cha watu 200 na kusema, "Ilipata A" katika saa ya kwanza. Sampuli ilikuwa ndogo sana; tofauti ilikuwa ndogo kitakwimu (yaani, inaweza kuwa kutokana na bahati). Jaribio lilipoongezwa hadi sampuli na wakati wa kutosha, matokeo yalibadilishwa. Somo: usifanye maamuzi bila data ya kutosha.

Tahadhari: Tofauti inayoonekana katika sampuli ndogo (idadi ndogo ya watu) inaweza kupotosha. Umuhimu wa kitakwimu unarejelea uwezekano kwamba tofauti ni halisi na si kutokana na bahati nasibu. Hakikisha kuwa watu wa kutosha wamefikiwa na majaribio yanaendelea kwa muda wa kutosha kabla ya kufikia hitimisho.

Violezo vinavyoweza kunakiliwa

Kiolezo cha 1 - Jenereta ya lahaja iliyotengwa:

Tengeneza vibadala kwa ajili ya majaribio ya A/B. Tofauti PEKEE ya kujaribu: [kichwa cha habari/CTA/image]. Kila kitu kingine kitabaki thabiti. Nadharia: [...]. Muktadha: [...].Lahaja A: [mbinu ya sasa]. Lahaja B: [mbinu mbadala]. Acha lahaja mbili ziwe na urefu sawa; usibadilishe kitu kingine chochote.

Kiolezo cha 2 - Kifafanuzi cha Hypothesis:

Jenga dhana inayoweza kujaribiwa kutokana na uchunguzi ufuatao: "[uchunguzi]". Andika dhana katika umbizo "ikiwa tutafanya [badilisha], [metric] huongezeka kwa sababu [kwa nini]". Kisha niambie ni kigeu gani kimoja ninachopaswa kutenga.

Kiolezo cha 3 - Seti ya jaribio la mstari wa mada:

Unda mistari 2 ya mada kwa jaribio la A/B kwa barua pepe ifuatayo. Tofauti kwenye mhimili mmoja: [udadisi dhidi ya uwazi / ufupi n.k. usemi mrefu/swali nk]. Zote mbili hazipaswi kuwa na neno taka na zinapaswa kuwa na urefu sawa. Muhtasari wa barua pepe: [...]

Kiolezo cha 4 - Ukalimani wa matokeo:

Tafsiri matokeo ya jaribio la A/B.Kigeu: [...]. Kipimo cha lahaja A: [...]. Kipimo cha lahaja B: [...].Ukubwa wa sampuli: [...]. Muda: [...].Niambie: Je, tofauti inaonekana kuwa muhimu, au sampuli ni ndogo? Tulijifunza nini? Unapendekeza nini kwa mtihani unaofuata? Usidai takwimu kamili; Ikiwa haijulikani, taja.

Kidokezo: Haitoshi kupata "mshindi" kutoka kwa mtihani; Faida halisi ni ufahamu wa "kwa nini ilishinda." Maarifa haya huingia kwenye dhana ya jaribio linalofuata na hujenga mfumo wa kujifunza kwa muda.

Kipaumbele: nini cha kupima kwanza?

Kuna vitu vingi ambavyo unaweza kujaribu, lakini muda wako na trafiki ni chache. Kwa hivyo weka kipaumbele majaribio kulingana na uwezekano wa athari. Kanuni ya jumla: vipengele ambavyo mtumiaji huona kwanza na vina athari kubwa kwenye uamuzi hujaribiwa kwanza. Katika ukurasa wa kutua, kichwa cha habari kina athari kubwa zaidi kwenye mibofyo; kwa sababu mtumiaji huisoma kwanza na kuamua huko au kutoendelea. Maelezo kama rangi ya kitufe mara nyingi hufanya athari ndogo; waache mwisho.

Njia ya vitendo ya kuweka vipaumbele ni kuweka alama kwa kila wazo la majaribio kwenye shoka tatu: athari inayotarajiwa (italeta tofauti kiasi gani ikiwa itashinda?), kujiamini (tuna uhakika gani kwamba itashinda?), na urahisi (kuweka ni haraka gani?). Majaribio yenye matokeo ya juu, kujiamini kwa juu na juhudi ndogo huwekwa kwanza. Hii hukuruhusu kutenga trafiki ndogo kwa majaribio ambayo huleta mafunzo zaidi. AI inaweza kukupa mwongozo wa haraka wa kufunga na kuweka kipaumbele orodha ya mawazo pamoja na shoka hizi tatu; Unaamua.

Kiolezo cha 5 - Uwekaji kipaumbele wa majaribio:

Yape kipaumbele mawazo yafuatayo ya upimaji wa A/B. Alama kila moja kwenye shoka za athari (1-5), kuegemea (1-5) na urahisi wa usakinishaji (1-5), ziorodheshe kulingana na jumla ya alama na ueleze katika sentensi moja kwa nini ziko kwa mpangilio huo. MAWAZO YA JARIBU: [orodha]

Makosa ya kawaida

• Hivyo kutofautiana kwa wakati mmoja. Matokeo yake huwa hayaelezeki.
• Mtihani usio na dhana. “Hebu tuijaribu tuone” haileti kujifunza.
• Uamuzi wa mapema. Katika sampuli ndogo, tofauti inadhaniwa kuwa halisi kwa bahati.
• Lahaja za urefu tofauti. Tofauti ya pili imeundwa bila kukusudia.
• Kuchukua tu mshindi. Ikiwa sababu haijajifunza, habari haitajilimbikiza.

Kwa muhtasari

• Kanuni kuu ya upimaji wa A/B: kigezo kimoja kwa wakati mmoja.
• Kila mtihani unapaswa kuanza na dhana: ninatarajia nini na kwa nini?
• Bainisha kipimo kimoja wazi cha mafanikio na sampuli ya kutosha.
• Tofauti katika sampuli ndogo ni ya kupotosha; Kumbuka umuhimu wa takwimu.
• Jua kwanini, sio mshindi; Maarifa haya yanaingia kwenye jaribio linalofuata.

Jukumu la maombi

Chagua angalizo kuhusu mojawapo ya maudhui yako. Ukiwa na Kiolezo cha 2, tafsiri hii katika dhana wazi na utambue kigezo cha kutenga. Tengeneza lahaja mbili na kiolezo cha 1 (urefu sawa, tofauti pekee). Mwishowe, lingana na nambari za matokeo dhahania, zifasiri kwa kutumia Kiolezo cha 4, na kumbuka kile modeli inasema kuhusu utoshelevu wa sampuli. Muda: takriban dakika 25.

orodha ya ukaguzi

• [ ] Nilianza mtihani kwa dhana wazi.
• [ ] Nilitenga tofauti moja tu.
• [ ] Vibadala vilibaki sawa katika shoka zingine (urefu, n.k.).
• [ ] Nimefafanua kipimo kimoja wazi cha mafanikio.
• [ ] Sikuamua bila sampuli/wakati wa kutosha.
• [ ] Nilibainisha sababu ya mshindi wa mtihani unaofuata.