Unit 10 / 11

Analisis dan Pelaporan Prestasi: Metrik, Atribusi dan Cerapan

Keuntungan:

  • Keupayaan untuk memahami metrik prestasi seperti CTR, penukaran, CPA, ROAS dan atribusi serta menggunakan kecerdasan buatan untuk meringkaskan data dan draf cerapan
  • Keupayaan untuk memberikan data kempen secara awanama kepada kecerdasan buatan dan menghasilkan ulasan, pengesanan anomali dan draf cadangan pengoptimuman
  • Memahami bahawa adalah wajib untuk membandingkan dan mengesahkan setiap nombor dan ayat sebab akibat yang dihasilkan oleh kecerdasan buatan dengan data sumber

Sebaik sahaja kempen disiarkan, kerja sebenar bermula: memahami perkara yang dilakukannya. Mengukur prestasi iklan adalah penting untuk mengalihkan belanjawan ke tempat yang betul dan untuk menyediakan kempen seterusnya dengan lebih baik. Tetapi ukuran bukanlah timbunan nombor; Analisis yang baik mencari cerita dan alasan di sebalik nombor. Ini dipanggil wawasan. Kecerdasan buatan ialah pemecut yang hebat pada peringkat ini: ia meringkaskan ratusan baris data kempen dalam beberapa minit, menunjukkan anomali (penyimpangan yang tidak dijangka), menulis draf laporan. Tetapi peraturan yang tidak boleh diubah bagi unit ini adalah ini: Setiap nombor dan setiap ayat sebab akibat yang dihasilkan oleh AI tidak memasuki laporan sehingga ia dibandingkan dan disahkan dengan data sumber. Model bahasa boleh menghasilkan nombor yang lancar tetapi dibuat apabila mereka tidak mengakses data sepenuhnya atau mengiranya dengan salah.

Metrik prestasi utama

Beberapa metrik membentuk bahasa analisis prestasi. CTR (Kadar Klik Lalu) ialah bilangan orang yang melihat iklan itu mengklik padanya (klik ÷ tera). Minat adalah ukuran daya tarikan. Kadar penukaran ialah bilangan pengklik yang mengambil tindakan yang diingini (pembelian, pendaftaran). CPA (Kos Setiap Pemerolehan) ialah kos setiap pemerolehan (belanja ÷ bilangan pemerolehan). ROAS (Pulangan untuk Perbelanjaan Iklan) ialah pulangan untuk perbelanjaan iklan: hasil yang diperoleh ÷ perbelanjaan iklan; Contohnya, jika anda membelanjakan 10,000 TL dan memperoleh 40,000 TL dalam hasil, ROAS ialah 4. Terdapat juga atribusi: isu iklan/saluran untuk mengaitkan penukaran. Jika pelanggan pertama kali melihat iklan Instagram, kemudian mencari di Google dan membeli, saluran manakah anda akan menyiarkan jualan ini? Model petikan membuat keputusan ini dan secara langsung mempengaruhi analisis.

Jadual berikut meringkaskan metrik utama dan perkara yang mereka katakan:

metrik

formula

apa yang dikatakan

CTR (kadar klikan)

Klik ÷ Tera

Adakah iklan itu menarik perhatian?

Kadar penukaran

Penukaran ÷ Klik

Adakah sesiapa yang mengklik membelinya?

CPA

Perbelanjaan ÷ Pemerolehan

Berapa kos pelanggan

ROAS

Pendapatan ÷ Perbelanjaan

Adakah perbelanjaan itu menguntungkan?

kekerapan

Pendedahan ÷ Jangkauan

Berapa kali orang yang sama melihatnya?

Petua: Jangan buat keputusan anda berdasarkan hanya satu metrik. CTR tinggi tetapi penukaran rendah bermaksud "iklan menarik tetapi halaman/tawaran tidak bertahan". Membaca metrik bersama-sama memberikan kisah sebenar.

Langkah demi langkah: daripada data kepada cerapan untuk melaporkan

Langkah 1 — Kumpul dan anonimkan data. Dapatkan data daripada papan pemuka platform (Google Ads, Meta) dan analitis; Alih keluar data peribadi (ID pelanggan, e-mel).

Langkah 2 — Kira dan sahkan metrik. Sahkan kemungkinan sendiri; Nyatakan formula apabila memberikannya kepada AI.

Langkah 3 — Cari anomali dan corak. Minta AI bertanya "saluran/hari/segmen mana yang menyimpang daripada apa yang dijangkakan"; kemudian sahkan dengan data.

Langkah 4 — Wujudkan kausalitas, tetapi berhati-hati. Sokong “CTR digugurkan kerana…” ayat dengan data; Jangan mengelirukan korelasi dengan sebab.

Langkah 5 — Draf laporan dan pengesyoran. Hasilkan ringkasan eksekutif dan draf cadangan pengoptimuman dengan AI; Sahkan dan sahkan setiap nombor dan tuntutan.

tiga kes mini

Kes 1 — Ringkasan pantas, isu yang disahkan. Seorang pakar prestasi tanpa nama memberikan 300 baris data mingguan daripada 6 saluran kepada AI dan meminta draf ringkasan eksekutif. AI diringkaskan dalam 5 minit; Pakar membandingkan setiap nilai ROAS dan CPA dengan papan pemukanya, membetulkan dua tafsiran yang salah. Tempoh: 1 jam dan bukannya setengah hari. AI memberikan draf, pengesahan kekal dengan manusia.

Kes 2 — Perangkap nombor yang dibuat-buat. Satu pasukan berkata kepada AI, "ROAS kami terlepas bulan lepas, ulas" tanpa memberikan data mentah. "Kira-kira 3.5, prestasi yang baik," tulis AI dengan yakin. ROAS sebenar ialah 1.8 dan kempen sebenarnya mengalami kerugian. Laporan itu telah diperbetulkan, tetapi keyakinan pelanggan goyah. Ralat: menunggu metrik daripada AI tanpa memberikan data.

Kes 3 — Kekeliruan atribusi. Satu jenama mengaitkan semua jualan berdasarkan klik terakhir, menaip semua jualan ke dalam carian Google dan memotong belanjawan Instagramnya. Jualan jatuh pada bulan berikutnya; kerana Instagram mencipta kesedaran dan menyemarakkan carian. Bergantung pada model petikan tunggal secara membuta tuli menghasilkan keputusan yang salah. Pengajaran: atribusi ialah model, bukan kebenaran mutlak; Ia adalah perlu untuk membandingkan model yang berbeza.

Empat templat yang boleh disalin

1) Ringkas data (dengan penekanan pengesahan):

Di bawah ialah data kempen tanpa nama (tiada ID pelanggan):[tampal data/jadual]Tugas: (1) Kira dan paparkan CTR, kadar penukaran, CPA, ROAS dengan formulanya.(2) Tunjukkan 2 saluran berprestasi terbaik dan paling teruk.(3) Nyatakan dengan jelas di mana anda tidak pasti atau tiada dalam data. Jangan buat sebarang nombor yang tiada dalam data. Saya akan mengesahkan akaun.

2) Anomali/pemburu corak:

Di bawah ialah data harian selama 4 minggu lepas: [data].Tugas: Kesan sisihan yang tidak dijangka (penurunan/kenaikan secara tiba-tiba). Bagi setiap anomali: hari/saluran mana, berapa banyak ia menyimpang, penjelasan yang mungkin (hipotesis). Nyatakan bahawa ini adalah hipotesis, bukan sebab muktamad.

3) Penyemak sebab musabab:

Pemerhatian yang saya ada ialah: "[cth. CTR turun daripada 2% kepada 1.3%]". Tugasan: Senaraikan kemungkinan sebab penurunan ini (keletihan iklan, musim, perubahan sasaran, aktiviti pesaing, dsb.). Beritahu saya data yang boleh saya uji untuk setiap sebab. Jangan tunjukkan korelasi sebagai sebab; Jangan tuntut sebab yang pasti.

4) Ringkasan eksekutif + draf cadangan:

Metrik yang saya sahkan: [CTR, penukaran, CPA, nilai ROAS].Tugas: Tulis draf ringkasan eksekutif 1 halaman:(1) perkara yang berlaku pada istilah ini (3 item), (2) perkara yang berjaya/tidak berfungsi, (3) 3 cadangan pengoptimuman untuk penggal seterusnya. Hanya gunakan nombor disahkan yang saya berikan; menjana nombor baharu.

Gesaan lemah / Gesaan kuat

Gesaan yang lemah:

Nilai prestasi kempen saya dan beritahu saya ROAS saya.

Tiada data diberikan; AI hanya boleh membentuk "ROAS". Outputnya lancar tetapi tidak realistik.

Gesaan kuat:

Peranan anda: pembantu analitis kepada pakar pemasaran prestasi. Di bawah ialah data mingguan tanpa nama (tiada nama/pengenalan): Perbelanjaan pengiklanan: 25,000 TL. Pendapatan: 60,000 TL. Pandangan: 500,000. Klik: 12,000. Penukaran: 480.Tugas: (1) Kira dan paparkan CTR, kadar penukaran, CPA dan ROAS dengan formula.(2) Tulis satu perenggan draf ulasan.(3) Jangan buat sebarang nombor yang tiada dalam data; Nyatakan bahawa anda tidak pasti.

Dalam permintaan ini, jangkaan data, formula dan larangan "membuat" adalah jelas. Anda sekali lagi mengesahkan output: CTR = 12,000 ÷ 500,000 = 2.4%; kadar penukaran = 480 ÷ 12,000 = 4%; CPA = 25,000 ÷ 480 ≈ 52 TL; ROAS = 60,000 ÷ 25,000 = 2.4.

Kesilapan biasa

  • Meminta metrik tanpa memberikan data. AI tidak boleh mengakses data anda; Nombor yang dia beri adalah palsu.
  • Melihat satu metrik. Jika CTR tinggi dan penukaran rendah, masalahnya mungkin pada halaman/tawaran, bukan iklan.
  • Kaitan yang mengelirukan dengan sebab. Hanya kerana dua perkara bertindak bersama tidak bermakna satu menyebabkan yang lain.
  • Bergantung pada model petikan tunggal. Atribusi ialah model; Model yang berbeza menghasilkan keputusan yang berbeza.
  • Meletakkan pernyataan kausaliti AI dalam laporan tanpa mengesahkannya. “Kerana…” ayat mesti disokong oleh data.
  • Tersilap nombor mentah untuk cerapan. Laporan itu tidak menyenaraikan nombor; memberitahu anda apa maksudnya dan apa yang perlu dilakukan.
Awas: Ayat yang paling berbahaya dalam laporan ialah "kerana" yang tidak berasas. AI boleh mengemukakan alasan yang lancar; Jika anda mengemukakan alasan itu kepada pihak pengurusan tanpa membuktikannya dengan data, anda mungkin membawa kepada keputusan yang salah.

Secara ringkasnya

Analisis prestasi ialah tugas untuk menukar data kempen kepada keputusan dan pada terasnya ialah metrik seperti CTR, kadar penukaran, CPA, ROAS dan isu atribusi. Kecerdasan buatan ialah pembantu yang berkuasa dalam meringkaskan ratusan baris data, mencari anomali dan merangka laporan. Tetapi setiap nombor dan setiap ayat sebab akibat yang diberikannya tidak termasuk dalam laporan sehingga ia disahkan dengan data sumber; Model bahasa boleh menyesuaikan diri apabila ia tidak dapat mengakses data. Membaca metrik bersama-sama, memisahkan korelasi daripada sebab musabab dan tidak mengikat atribusi kepada satu model adalah tanda analisis yang baik. Laporan itu menghasilkan makna dan cadangan, bukan senarai nombor.

Tugasan permohonan

Sediakan data kempen sebenar atau hipotesis (perbelanjaan, hasil, tera, klik, penukaran). (1) Anonimkan data. (2) Minta metrik dikira dengan "Ringkasan data" dan sahkan setiap satu dengan formula. (3) Cari penyelewengan dengan "pemburu anomali"; menghubungkannya dengan hipotesis. (4) Dengan "pemeriksa sebab", tuliskan kemungkinan punca penyelewengan ini dan bagaimana anda akan menguji setiap satu. (5) Hasilkan draf "ringkasan eksekutif" dan semak bahawa ia mengandungi hanya nombor yang telah anda sahkan; Sokong ayat "kerana" dengan data.

senarai semak

  • [ ] Saya menamakan data kempen sebelum memberikannya kepada alat.
  • [ ] Saya sendiri mengesahkan setiap metrik dengan formulanya.
  • [ ] Saya membaca metrik bersama-sama, bukan satu persatu.
  • [ ] Saya menyokong pernyataan kausaliti dengan data; Saya tidak mengelirukannya dengan korelasi.
  • [ ] Saya tidak mengaitkan rujukan kepada model tunggal, saya membandingkannya.
  • [ ] Saya hanya meletakkan nombor yang disahkan dalam laporan; Tiada nombor palsu.