Naúrar 8 / 11

Bambance-bambancen Gwajin A/B da Ƙirar Gwaji

Riba:

  • Ikon ƙirƙirar bambance-bambancen rubutu na tsari wanda ke keɓance masu canji guda ɗaya don gwajin A/B
  • Ikon canza hasashe zuwa saitin gwaji mai iya aunawa
  • Ikon fassara sakamakon gwaji dangane da mahimmancin ƙididdiga da koyo

Hankali yana da mahimmanci a talla, amma shaida ta fi daraja. Wanne kanun labarai ne ke samun ƙarin dannawa, wanda CTA ke siyar da ƙari, wane hoto ya fi jan hankali? Maimakon zato, zaku iya auna wannan tare da gwajin A/B. Gwajin A/B hanya ce ta gwaji wacce ke nuna nau'ikan nau'ikan abun ciki guda biyu (A da B) ga masu sauraro na gaske da matakan da mutum ya fi dacewa. Hankali na wucin gadi da sauri yana samar da shigarwar don waɗannan gwaje-gwajen, wato bambance-bambancen; Amma yin aikin gwajin yana buƙatar ka'idar kimiyya: ɗaya mai canzawa a lokaci guda. A cikin wannan rukunin za ku koyi yadda ake samar da bambance-bambancen, fassara hasashe zuwa gwaji mai iya aunawa, da fassara sakamako dangane da mahimmancin ƙididdiga.

Mulkin zinare: ware mai canzawa ɗaya

Don fassara sakamakon gwajin, abu ɗaya kawai dole ne ya bambanta tsakanin A da B. Idan kun canza take, hoto, da CTA a lokaci guda, ba za ku taɓa sanin wanda ya yi bambanci lokacin da B ya ci nasara ba. Ware canjin da za a gwada shi ne kawai abin da ke ba da damar koyo.

Na yau da kullun masu canji waɗanda za a iya gwadawa:

  • Take: Hoto daya da jiki iri daya, take daban.
  • Rubutun CTA: "Saya" ko "Ƙara zuwa cart"?
  • Layin batu: Yana shafar buɗaɗɗen adadin imel.
  • Hoto: Rubutu ɗaya, hoto daban.
  • Tsawon / sautin: Short vs. dogo, na yau da kullun da dai sauransu na gaskiya.

Daga hasashe zuwa gwaji: mataki-mataki

  1. Yi kallo. "Shafin saukar mu yana da ƙananan juzu'i."
  2. Hasashen. "Latin da aka mayar da hankali ga fa'ida yana jujjuyawa fiye da kanun labaran da aka mayar da hankali."
  3. Ware m. Take kawai zai canza.
  4. Ƙirƙirar bambance-bambance. 2 bayyanannun bambance-bambancen tare da ƙirar (A: fasalin, B: fa'ida).
  5. Ƙayyade ma'aunin nasarar ku. Misali, yawan juzu'i - yawan adadin baƙi da ke ɗaukar matakin da ake so.
  6. Ƙayyade samfurin da tsawon lokaci. Isasshen mutane da isasshen lokaci.
  7. Auna, kwatanta, koyo. Koyi "me yasa", ba mai nasara ba.

“Hasashen” hasashe ne da za a gwada a nan kuma zai iya zama gaskiya ko ƙarya; Kyakkyawan hasashe yana gaya muku abin da kuke tsammani kuma me yasa.

Rauni mai ƙarfi / Ƙarfi mai ƙarfi

Rawanin faɗakarwa:

Rubuta wasu madadin wannan take.

Ƙarfi mai ƙarfi:

Ƙirƙirar bambance-bambancen don gwajin A/B. Doka: Taken kawai zai canza, jiki da CTA za su kasance iri ɗaya. HYPOTHESIS: Benefits-oriented take yana samun ƙarin dannawa fiye da take-daidaitacce.CONTEXT: Saukowa shafi. Samfura: aikace-aikacen sarrafa aikin. Masu sauraro: ƙananan ƙungiyoyi. ANA BUKATA: - Bambancin A: take-daidaitacce fasali (bayyana abin da samfurin ya yi) - Bambancin B: taken mai amfani (yana kwatanta abin da yake bayarwa ga mai amfani) A ƙarƙashin kowane bambance-bambancen, rubuta abin da motsawar tunani ya taɓa. Bambance-bambancen 2 kawai; Dukansu su zama layi ɗaya, masu tsayi iri ɗaya.

Yana da mahimmanci a so bambance-bambancen su kasance masu tsayi iri ɗaya; in ba haka ba "tsawon" ba da gangan ba ya zama mai canzawa na biyu.

ginshiƙi kafin/bayan gwaji

Mataki

Abin da za a yi

kuskure akai-akai

hasashe

Menene, me yasa nake jira?

"Mu gwada" ba tare da hasashe ba

Mai canzawa

Ware abu daya

Canza abubuwa da yawa lokaci guda

ma'auni

Zaɓi ma'auni mai haske ɗaya

"mafi kyau" mara iyaka

samfurin

Isasshen mutane / lokaci

yanke shawara da wuri

Sharhi

Koyi dalilin

Kawai dauki mai nasara

uku mini lokuta

Case 1 - Gwajin CTA yana ba da sakamako bayyananne. Wani rukunin yanar gizon e-kasuwanci ya gwada maɓallin samfur: A "Sayi", B "Ƙara zuwa cart". Rubutun maɓallin kawai ya canza. A cikin gwajin maziyarta 3,000, B ya ƙara yawan danna-ta hanyar daga 4.0% zuwa 4.9%. Tare da keɓanta madaidaicin guda ɗaya, mai nasara ya bayyana sarai: “ƙara zuwa cart” ya ji ƙarancin ɗauri.

Case 2 - Kuskuren Multivariate. Tawagar ta tsara shafukan sauka biyu, amma take, hoto, da launi duk sun bambanta. B ya ci nasara, amma ƙungiyar ba ta san wane nau'in ya yi bambanci ba; koyo ya zama sifili. A gwaji na gaba, sun bi ka'ida: mai canzawa ɗaya a lokaci guda. A cikin wannan gwajin, sun ga a fili cewa taken shine babban abin da ya faru.

Case 3 - Farkon yanke shawara tarko. Wata tawagar wasiƙar ta gwada layi biyu akan gungun mutane 200 kuma ta ce, "Ta sami A" a cikin sa'a ta farko. Samfurin ya kasance kadan; Bambancin ba shi da mahimmanci a ƙididdiga (watau, zai iya kasancewa saboda dama). Lokacin da aka ƙara gwajin zuwa isassun samfuri da lokaci, sakamakon ya koma baya. Darasi: Kar ku yanke shawara ba tare da isassun bayanai ba.

Tsanaki: Bambancin da aka gani a cikin ƙaramin samfurin (ƙananan adadin mutane) na iya zama yaudara. Muhimmancin ƙididdiga yana nufin yuwuwar cewa bambanci na gaske ne ba saboda dama ba. Tabbatar an kai isassun mutane kuma gwajin ya yi tsayi sosai kafin a yi tsalle zuwa ga ƙarshe.

Samfura masu kwafi

Samfura 1 - Keɓaɓɓen bambance-bambancen janareta:

Ƙirƙirar bambance-bambancen don gwajin A/B. Mai canzawa KAWAI don gwadawa: [kanun labarai/CTA/image]. Duk sauran za su dawwama. Hasashe: [...]. Magana: [...] Bambancin B: [madadin hanya]. Bari bambance-bambancen biyu su kasance da tsayi iri ɗaya; kada ku canza wani abu.

Samfura na 2 - Bayanin Hasashen:

Ƙirƙirar hasashen da za a iya gwadawa daga abin lura mai zuwa: "[ lura]". Rubuta hasashe a cikin tsarin "idan muka yi [canji], [metric] yana ƙaruwa saboda [me yasa]". Sannan gaya mani wanne mabambanta guda ɗaya zan ware.

Samfura 3 - Saitin gwajin layin magana:

Ƙirƙiri layukan jigo 2 zuwa gwajin A/B don imel mai zuwa. Bambanci a kan axis guda ɗaya: [son sani vs. tsabta / taƙaitaccen bayani da dai sauransu. dogon/tambaya da dai sauransu magana]. Dukansu bai kamata su ƙunshi kalmar spam ba kuma yakamata su kasance tsayi iri ɗaya. Takaitaccen imel: [...]

Samfura 4 - Sakamakon Fassara:

Fassara sakamakon gwajin A/B. Mai canzawa: [...]. Bambancin A awo: [...]. Bambancin B awo: [...]. Girman samfurin: [...]. Tsawon lokaci: [...] Menene muka koya? Menene shawarar ku don gwaji na gaba? Kar a yi da'awar ainihin ƙididdiga; Idan babu tabbas, saka.

Tukwici: Bai isa a sami "mai nasara" daga gwajin ba; Babban fa'ida shine fahimtar "me yasa ya ci nasara." Wannan hangen nesa yana ciyarwa cikin hasashe don gwaji na gaba kuma yana gina tsarin koyo akan lokaci.

fifiko: me za a fara gwadawa?

Akwai abubuwa marasa iyaka da zaku iya gwadawa, amma lokacinku da zirga-zirgar ku sun iyakance. Don haka ba da fifikon gwaje-gwaje dangane da yuwuwar tasiri. Gabaɗaya doka: abubuwan da mai amfani ke gani da farko kuma suna da tasiri akan yanke shawara an fara gwada su. A kan shafin saukowa, kanun labarai yana da babban tasiri akan dannawa; saboda mai amfani ya karanta shi da farko kuma ya yanke shawara a can ko a'a ya ci gaba. Cikakkun bayanai kamar launi na maɓallin sau da yawa suna yin ƙaramin tasiri; bar su har abada.

Hanya mai amfani don ba da fifiko ita ce zana kowane ra'ayi na gwaji akan gatura guda uku: tasirin da ake tsammani (nawa ne bambancin zai yi idan ya ci nasara?), Amincewa (yaya muke da kwarin gwiwa cewa za mu ci nasara?), Da sauƙi ( yaya sauri za a kafa?). Gwaje-gwaje tare da babban tasiri, babban ƙarfin zuciya da ƙananan ƙoƙari an sanya su farko. Wannan yana ba ku damar rarraba iyakataccen zirga-zirga zuwa gwaje-gwajen da ke kawo mafi koyo. AI na iya ba ku tsari mai sauri don zira kwallaye da ba da fifiko ga jerin ra'ayoyi tare da waɗannan gatura guda uku; Ka yanke shawara.

Samfura 5 - Gwajin fifiko:

Ba da fifikon ra'ayoyin gwajin A/B masu zuwa. Yi maki kowanne ɗaya akan gatari na tasiri (1-5), amintacce (1-5) da sauƙi na shigarwa (1-5), sanya su daidai da jimillar maki kuma bayyana a cikin jumla ɗaya dalilin da yasa suke cikin wannan tsari. RA'AYOYIN gwaji: [jeri]

Kuskuren gama gari

  • Don haka m a lokaci guda. Sakamakon ya zama wanda ba a iya fassara shi ba.
  • Gwajin rashin hasashe. "Mu gwada shi mu gani" baya haifar da koyo.
  • Matakin farko. A cikin ƙaramin samfurin, ana tunanin bambancin gaskiya ne kwatsam.
  • Bambance-bambancen tsayi daban-daban. An ƙirƙiri maɓalli na biyu ba da niyya ba.
  • Kawai ɗaukar mai nasara. Idan ba a koyi dalilin ba, bayanai ba za su taru ba.

A takaice

  • Ƙa'idar zinariya ta gwajin A/B: mai canzawa ɗaya a lokaci guda.
  • Kowane gwaji yakamata ya fara da hasashe: menene nake tsammani kuma me yasa?
  • Ƙayyade ma'aunin nasara ɗaya bayyananne da isasshen samfurin.
  • Bambanci a cikin ƙananan samfurin yana ɓatarwa; Kula da mahimmancin ƙididdiga.
  • Gano dalilin, ba mai nasara ba; Wannan fahimtar tana ciyarwa cikin gwaji na gaba.

Aikin aikace-aikace

Zaɓi abin lura game da ɗaya daga cikin abubuwan ku. Tare da Samfura 2, fassara wannan zuwa bayyananniyar hasashe kuma gano mai canzawa don ware. Samar da bambance-bambancen guda biyu tare da samfuri 1 (tsawo iri ɗaya, bambanci kawai). A ƙarshe, dace da lambobi na hasashe, fassara su ta amfani da Samfura 4, kuma lura da abin da ƙirar ke faɗi game da isashen samfurin. Tsawon lokaci: kamar mintuna 25.

jerin abubuwan dubawa

  • [ ] Na fara gwajin tare da bayyananniyar hasashe.
  • [ ] Na keɓe m guda ɗaya kawai.
  • [ ] Bambance-bambancen sun kasance iri ɗaya a cikin sauran gatari (tsawo, da sauransu).
  • [ ] Na ayyana ma'aunin nasara ɗaya bayyananne.
  • [ ] Ban yanke shawara ba tare da isasshen samfurin/lokaci ba.
  • [ ] Na lura dalilin da ya sa wanda ya ci nasara don gwaji na gaba.