Jednotka 10 / 11

Analýza výkonu a přehledy: metriky, atribuce a statistiky

zisky:

  • Schopnost porozumět metrikám výkonu, jako je CTR, konverze, CPA, ROAS a atribuce, a používat umělou inteligenci ke shrnutí dat a návrhů statistik
  • Schopnost anonymně poskytovat data kampaně umělé inteligenci a vytvářet komentáře, detekce anomálií a návrhy optimalizace
  • Pochopení, že je povinné porovnávat a ověřovat každé číslo a kauzální větu vytvořenou umělou inteligencí se zdrojovými daty

Jakmile je kampaň spuštěna, začíná skutečná práce: pochopení toho, co dělá. Měření výkonu reklamy je zásadní pro přesun rozpočtu na správné místo a pro lepší nastavení příští kampaně. Ale měření není hromada čísel; Dobrá analýza najde příběh a důvod za čísly. Tomu se říká vhled. Umělá inteligence je v této fázi skvělým akcelerátorem: během minut shrne stovky řádků dat kampaně, upozorní na anomálie (neočekávané odchylky), sepíše návrhy zpráv. Ale neměnným pravidlem této jednotky je toto: Každé číslo a každá věta příčinné souvislosti vytvořená AI nevstoupí do zprávy, dokud není porovnána a ověřena se zdrojovými daty. Jazykové modely mohou produkovat plynulá, ale vymyšlená čísla, když nemají úplný přístup k datům nebo je špatně vypočítají.

Klíčové metriky výkonu

Jazyk analýzy výkonu tvoří několik metrik. CTR (Click-Through Rate) udává, kolik lidí, kteří viděli reklamu, na ni kliklo (kliknutí ÷ zobrazení). Zájem je měřítkem atraktivity. Konverzní poměr udává, kolik klikačů provede požadovanou akci (nákup, registrace). CPA (Cost Per Acquisition) je cena za akvizici (útrata ÷ počet akvizic). ROAS (Návratnost výdajů na reklamu) je návratnost výdajů na reklamu: vydělané příjmy ÷ výdaje za reklamu; Pokud jste například utratili 10 000 TL a vydělali jste 40 000 TL, ROAS je 4. Existuje také atribuce: otázka, které reklamě/kanálu přiřadit konverzi. Pokud zákazník nejprve viděl reklamu na Instagramu, pak hledal na Googlu a koupil, na který kanál tento prodej zveřejníte? Toto rozhodnutí činí citační model a přímo ovlivňuje analýzu.

Následující tabulka shrnuje klíčové metriky a to, co říkají:

metrický

vzorec

co to říká

CTR (míra prokliku)

Kliknutí ÷ Zobrazení

Přitahuje reklama pozornost?

Konverzní poměr

Převod ÷ Kliknutí

Kupuje si to někdo, kdo klikne?

CPA

Výdaje ÷ Akvizice

Kolik stojí zákazník

ROAS

Příjmy ÷ Výdaje

Jsou výdaje ziskové?

frekvence

Expozice ÷ Dosah

Kolikrát to viděl stejný člověk?

Tip: Nerozhodujte se pouze na základě jedné metriky. Vysoká CTR, ale nízká konverze znamená „reklama zaujme, ale stránka/nabídka neudrží“. Společné čtení metrik dává skutečný příběh.

Krok za krokem: od dat přes statistiky k reportům

Krok 1 — Sbírejte a anonymizujte data. Získejte data z panelů platforem (Google Ads, Meta) a analytiky; Odstraňte osobní údaje (ID zákazníka, email).

Krok 2 — Vypočítejte a ověřte metriky. Potvrďte pravděpodobnost sami; Zadejte vzorec, když jej dáte AI.

Krok 3 — Hledejte anomálie a vzory. Požádejte AI, aby se zeptala „který kanál/den/segment se odchyluje od toho, co se očekává“; pak to potvrďte daty.

Krok 4 — Stanovte příčinnou souvislost, ale opatrně. Podpora vět „CTR klesla, protože…“ s daty; Nepleťte si korelaci s kauzalitou.

Krok 5 — Návrh zprávy a doporučení. Vytvářejte shrnutí a návrh optimalizace pomocí AI; Ověřte a potvrďte každé číslo a nárok.

tři mini pouzdra

Případ 1 – Rychlé shrnutí, ověřený problém. Expert na výkon anonymně poskytl AI 300 řádků týdenních dat ze 6 kanálů a požádal o návrh shrnutí. AI shrnuto do 5 minut; Expert porovnal každou hodnotu ROAS a CPA se svým řídicím panelem a opravil dvě chybné interpretace. Doba trvání: 1 hodina místo půl dne. AI dala návrh, ověření zůstalo u člověka.

Případ 2 – Vymyšlená past na čísla. Jeden tým řekl AI: „Naše ROAS minulý měsíc minul, komentuj“, aniž by uvedl nezpracovaná data. "Asi 3,5, dobrý výkon," napsala sebevědomě AI. Skutečná ROAS byla 1,8 a kampaň byla ve skutečnosti ztrátová. Zpráva byla opravena, ale důvěra zákazníků byla otřesena. Chyba: čekání na metriky z AI bez poskytnutí dat.

Případ 3 – Atribuční omyl. Jedna značka připsala všechny prodeje na základě posledního kliknutí, zadala všechny prodeje do vyhledávání Google a snížila rozpočet na Instagram. Prodej klesl následující měsíc; protože Instagram vytvořil povědomí a podpořil vyhledávání. Slepé spoléhání se na model jediné citace vedlo k nesprávnému rozhodnutí. Poučení: atribuce je model, nikoli absolutní pravda; Je potřeba porovnávat různé modely.

Čtyři kopírovatelné šablony

1) Shrnovač dat (s důrazem na validaci):

Níže jsou anonymní údaje o kampani (bez zákaznického ID):[vložte data/tabulku]Úkol: (1) Vypočítejte a zobrazte CTR, konverzní poměr, CPA, ROAS pomocí jejich vzorců.(2) Ukažte 2 nejlepší a nejhorší kanály.(3) Jasně uveďte, kde si nejste jisti nebo kde v datech chybí. Nevytvářejte žádná čísla, která v datech nejsou. Účet potvrdím.

2) Lovec anomálií/vzorů:

Níže jsou uvedena denní data za poslední 4 týdny: [data]. Úkol: Zjistit neočekávané odchylky (náhlý pokles/vzestup). Pro každou anomálii: který den/kanál, jak moc se odchýlil, možná vysvětlení (hypotéza). Uveďte, že se jedná o hypotézy, nikoli o definitivní příčiny.

3) Kontrola příčinnosti:

Postřeh, který mám, je: „[např. CTR klesla z 2 % na 1,3 %]“. Úkol: Uveďte možné důvody tohoto poklesu (únava z reklamy, sezóna, změna cílení, aktivita konkurence atd.). Řekněte mi, s jakými daty mohu z jednotlivých důvodů testovat. Neprezentujte korelaci jako příčinnou souvislost; Neříkejte definitivní příčinu.

4) Shrnutí + návrh návrhu:

Metriky, které jsem ověřil: [CTR, konverze, CPA, hodnoty ROAS]. Úkol: Napište 1stránkový návrh shrnutí: (1) co se stalo v tomto termínu (3 položky), (2) co fungovalo/nefungovalo, (3) 3 optimalizační návrhy pro další období. Stačí použít ověřená čísla, která jsem uvedl; generování nových čísel.

Slabá výzva / Silná výzva

Slabá výzva:

Vyhodnoťte výkon mé kampaně a sdělte mi ROAS.

Nejsou uvedeny žádné údaje; Umělá inteligence může tvořit pouze „ROAS“. Výstup je hladký, ale nereálný.

Výkonná výzva:

Vaše role: analytický asistent specialisty na výkonnostní marketing. Níže jsou anonymní týdenní údaje (bez jmen/identifikace): Náklady na reklamu: 25 000 TL. Příjem: 60 000 TL. Zhlédnutí: 500 000. Kliknutí: 12 000. Konverze: 480. Úkol: (1) Vypočítejte a zobrazte CTR, konverzní poměr, CPA a ROAS pomocí vzorce. (2) Napište návrh komentáře o jediném odstavci. (3) Nevytvářejte žádná čísla, která nejsou v datech; Uveďte, že si nejste jisti.

V této žádosti je jasné očekávání údajů, vzorce a zákaz „vymýšlení“. Opět ověříte výstup: CTR = 12 000 ÷ 500 000 = 2,4 %; konverzní poměr = 480 ÷ 12 000 = 4 %; CPA = 25 000 ÷ 480 ≈ 52 TL; ROAS = 60 000 ÷ 25 000 = 2,4.

Časté chyby

  • Požadavek na metriky bez poskytnutí dat. AI nemá přístup k vašim datům; Číslo, které uvádí, je falešné.
  • Při pohledu na jednu metriku. Pokud je CTR vysoká a konverze nízká, může být problém se stránkou/nabídkou, nikoli s reklamou.
  • Matoucí korelace s kauzalitou. To, že dvě věci působí společně, neznamená, že jedna způsobuje druhou.
  • Spoléhání se na model jediné citace. Atribuce je model; Různé modely produkují různá rozhodnutí.
  • Uvedení kauzálního prohlášení AI do zprávy bez potvrzení. Věty „Protože…“ musí být podpořeny daty.
  • Záměna hrubého čísla za pochopení. Zpráva neuvádí čísla; vám řekne, co to znamená a co dělat.
Pozor: Nejnebezpečnější větou ve zprávě je nepodložené „protože“. AI může přijít s plynulým důvodem; Pokud tento důvod předložíte vedení, aniž byste jej prokázali daty, můžete vést k nesprávnému rozhodnutí.

V souhrnu

Analýza výkonu je úkolem převádět data kampaně na rozhodnutí a jejím jádrem jsou metriky jako CTR, konverzní poměr, CPA, ROAS a problém s atribucí. Umělá inteligence je výkonným pomocníkem při sumarizaci stovek řádků dat, hledání anomálií a sestavování zpráv. Ale každé číslo a každá věta kauzality, kterou uvádí, není zahrnuta do zprávy, dokud není ověřena se zdrojovými daty; Jazykový model se může přizpůsobit, když nemá přístup k datům. Společné čtení metrik, oddělení korelace od příčinné souvislosti a nesvázání atribuce s jediným modelem jsou známkami dobré analýzy. Zpráva přináší význam a návrhy, nikoli seznam čísel.

Aplikační úkol

Připravte si skutečná nebo hypotetická data kampaně (útrata, příjmy, zobrazení, kliknutí, konverze). (1) Anonymizovat data. (2) Nechte si vypočítat metriky pomocí „Souhrnu dat“ a každou si sami potvrďte pomocí vzorce. (3) Najděte odchylku pomocí „lovce anomálií“; spojit to s hypotézou. (4) Pomocí „kontroly příčin“ zapište možné příčiny této odchylky a způsob, jakým byste každou z nich otestovali. (5) Vytvořte návrh „prováděcího shrnutí“ a zkontrolujte, zda obsahuje pouze čísla, která jste ověřili; Podpořte větu „protože“ daty.

kontrolní seznam

  • [ ] Než jsem údaje o kampani předal nástroji, anonymizoval jsem je.
  • [ ] Sám jsem ověřil každou metriku pomocí jejího vzorce.
  • [ ] Metriky čtu společně, ne jednu po druhé.
  • [ ] Prohlášení o kauzalitě jsem podpořil daty; Nepletl jsem si to s korelací.
  • [ ] Odkaz jsem nepřipisoval jedinému modelu, porovnával jsem ho.
  • [ ] Do zprávy dávám pouze ověřená čísla; Neexistují žádná falešná čísla.