Kampaň s A/B testovaním má štyri štatistiky: zvlášť pre verziu A, zvlášť pre verziu B, porovnanie oboch verzií s informáciou o víťazovi a celkové výsledky kampane. Nájdete ich v ľavom menu kampane na stránke Štatistiky. Najviac vám povie porovnanie verzií, kde hneď hore uvidíte, ktorá verzia vyhrala.
Ako čítať porovnanie verzií A a B
- V prvej sekcii je víťazná verzia, jej predmet a časový interval, ktorý ste na výber víťaza nastavili.
- Časť Celkový prehľad ukazuje hlavné štatistiky oboch verzií v jednom grafe.
- Nasleduje porovnanie výsledkov verzie A a verzie B v percentách.
- Grafy ukazujú vývoj jednotlivých štatistík v čase zvlášť pre verziu A a zvlášť pre verziu B.
- Posledná časť porovnáva prekliky na jednotlivé odkazy v oboch verziách. Tu hľadajte odpoveď, keď ste testovali tlačidlá alebo odkazy.
Pri čítaní výsledku buďte prísni. Rozdiel niekoľkých desatín percenta na malej testovacej skupine nie je víťazstvo, je to náhoda. Za poznatok považujte až rozdiel, ktorý sa zopakuje. Výsledky testov si zapisujte, napríklad do zdieľanej tabuľky: čo ste testovali, veľkosť skupín a výsledok.
Čo nájdete v štatistike verzie A a verzie B
Štatistika každej verzie začína Celkovým prehľadom s týmito údajmi:
- Odoslané: počet unikátnych príjemcov, ktorým bola verzia odoslaná.
- Doručené: počet unikátnych príjemcov, ktorým bola doručená.
- Nedoručené: počet unikátnych príjemcov, ktorým doručená nebola. Zoznam aj s dôvodom je v dolnej časti stránky, vysvetlenie dôvodov nájdete v článku Dôvody nedoručených e-mailov.
- Otvorené celkovo: počet všetkých otvorení. Keď jeden príjemca otvorí e-mail 10-krát, je tu číslo 10.
- Otvorené unikátne: počet príjemcov, ktorí e-mail otvorili. Každý sa počíta len raz.
- Neotvorené: počet unikátnych príjemcov, ktorí e-mail neotvorili.
- Prekliky celkovo: počet všetkých kliknutí na odkazy. Keď jeden príjemca klikne raz na každý z 5 odkazov, je tu číslo 5.
- Prekliky unikátne: počet príjemcov, ktorí klikli aspoň na jeden odkaz.
- Ikony sociálnych sietí: pre každú ikonu v e-maile počet unikátnych príjemcov, ktorí na ňu klikli.
- Označené ako SPAM: počet unikátnych príjemcov, ktorí e-mail označili ako spam.
- Odhlásené: počet unikátnych príjemcov, ktorí sa odhlásili odkazom v pätičke e-mailu.
Pod prehľadom sú percentá doručiteľnosti, otvorení a preklikov, štatistika preklikov podľa odkazov a menné zoznamy príjemcov, ktorí e-mail otvorili, neotvorili, klikli na odkaz alebo sa odhlásili. Pojmy podrobne vysvetľuje článok Význam pojmov v štatistikách.
Čo ukazujú celkové štatistiky
Štvrtá štatistika, Celkové štatistiky, sčítava výsledky verzie A, verzie B a rozoslania víťaznej verzie zostávajúcim príjemcom. Ukazuje teda výsledok kampane ako celku a hodí sa na porovnanie s ostatnými kampaňami.
Ako štatistiky exportovať
Štatistiky exportujete do Excelu ako súbor xlsx. Každá záložka má vlastný export:
- Verzia A a verzia B: rovnaký export ako pri jednoduchej e-mailovej kampane, za danú verziu. Obsahuje prehľad s názvom, predmetom a časom odoslania, zoznamy kontaktov s firmou, štítkami, časom akcie a zariadením, vývoj po dňoch, odkazy a dôvody odhlásenia.
- Porovnanie A/B kampaní: porovnávací prehľad, percentuálne štatistiky, vývoj po dňoch podľa verzií a porovnanie URL. Každá URL je na vlastnom riadku a stĺpce zdieľania na sociálnych sieťach už neprepisujú stĺpec odhlásení. Zoznamy kontaktov tento export nemá.
- Výsledné štatistiky: prehľad s názvom kampane, vývoj po dňoch, zoznamy kontaktov s firmou, štítkami, časom akcie a zariadením, dôvody odhlásenia a porovnanie odkazov podľa verzií.
Percentá sú vo všetkých exportoch čísla s formátom percent, takže s nimi Excel rovno počíta.
Na čo sa pri ďalšom teste zamerať, radí video Quanda talks #7 o A/B testovaní. Nastavenie testu opisuje článok Nastavenie odoslania v kampani A/B testovanie.
Máte otázky? Radi vám na ne odpovieme. Stačí kontaktovať našu zákaznícku podporu na tel. +420 605 163 892, e-mail: support@onquanda.com.
Časté otázky
Štyri. Štatistiku verzie A, štatistiku verzie B, porovnanie oboch verzií a celkové štatistiky za všetky odoslané e-maily vrátane rozoslania víťaznej verzie.
V štatistike s porovnaním verzií A a B. Hneď v prvej sekcii uvidíte víťaznú verziu, jej predmet a časový interval, ktorý ste na určenie víťaza nastavili.
Rozdiel niekoľkých desatín percenta na malej testovacej skupine je skôr náhoda. Za poznatok považujte až rozdiel, ktorý sa zopakuje aj v ďalších testoch. Pomôže aj väčšia testovacia skupina.
Celkové štatistiky sčítavajú výsledky verzie A, verzie B a rozoslania víťaznej verzie zostávajúcim príjemcom. Ukazujú teda výsledok kampane ako celku.
Menej ako inde. Quanda viac ako 80 % automatických otvorení z funkcie Mail Privacy Protection v Apple Mail odfiltruje. Keď testujete obsah alebo tlačidlá, vyberajte víťaza podľa preklikov, tie automatické otvorenia neovplyvnia.
Áno. Štatistiky exportujete do súboru xlsx, ktorý obsahuje všetky údaje zo stránky rozdelené do hárkov.