Testování A/B vs multivariační testování: Kdy a jak si vybíráte?

Už jsi někdy? Změňte web ... ale nevím, jestli se to opravdu zlepšilo nebo jen „přemýšlejte sami“

Věřte, že každý trh, obchodník nebo vlastník firmy se museli setkat s touto nepříjemnou situací: Jste oddaní fyzickému, mentálnímu i rozpočtu. Ať už měníte obrázky, propagační akce, psaní nového nadpisu, atraktivního nebo dokonce nového designu rozvržení ... ale pak je výsledkem „zaměstnání“

Prodej se nezvyšuje, klikněte na méně nebo nejhorší je „horší než dříve“, ale nevíte, co to je. Cítí se jako chůze ve tmě nemůže najít způsob, jak pokračovat, nevím, jestli to, co jsem udělal, je „ano“ nebo „ne“. Jedná se o klasický problém, který bohužel zabíjí konverzi a způsobuje, že nám přiměje ztrátu obchodních příležitostí.

Výzva pro ilustrace: Obrázek obchodníků nebo majitelů podniků sedí v chrámech před počítačem, který ukazuje dohodnutý prodejní graf. S otazníkem (?) Plovoucí kolem, aby zprostředkoval zmatek a nejistotu.

Proč „hádá“ jako geniálního nepřítele prodeje?

Zdroj většiny problémů pochází z rozhodnutí, které je založeno na „pocitech“ nebo „instinktu“. Myslíme si, že „nadpis, jako je tento, by měl být více oblíbený zákazníci“ nebo „Toto tlačítko barev by mělo být více vynikající“, ale nemáme co potvrdit, že to, co „si myslíme“, bude to, co si „zákazníci myslí“.

Ve světě digitálního marketingu, který je poháněn daty (založen na údajích), je hádání jako muset peníze rozpustit. Protože každá změna, která neprochází testem, je „riziko“, které není nutné. To je bod, kdy významné nástroje, jako je testování A/B a multivariační testování , hrají důležitou roli. Je to vědecký proces, který přeměňuje „hádání“ na „důkazní pravdu“, který nám pomáhá přesně vědět, jaké změny skutečně mají naše podnikání. Nejen přemýšlet

Výzva pro ilustrace: Srovnávací obrazy mezi levým mozkem se symboly „Instinkt/pocit“ se pravým mozkem se symboly „Graf/Data“ se šipkou směřujícím od pocitu na datová boční média, které musíme změnit z hádání na data

Nechte web „dae“ kvůli dalšímu odhadu? Výsledky jsou děsivější, než si myslíte.

Ignorování testu a nadále mění web podle pocitů. Může vést k negativním účinkům, které jsou intenzivnější než jen „prodeje nepřidávají“. Zkuste si představit:

• Zplýnavý marketingový rozpočet: Můžete hodit obrovské střílení peněz na to, aby lidé přitáhli lidi na stránku vstupní stránky, ale pokud tato tvář není dostatečně efektivní, přišli a uzavřeni. Peníze, které jste zaplatili, se rovnají nule.
-

I když jste stále správným způsobem, když hádáte, že vaši konkurenti mohou používat data z testování A/B k vývoji svých webových stránek, aby vás každý den nechali.
• Míra konverze klesne: Některé změny, o kterých si myslíte, že „trochu“ mohou pro uživatele způsobit zmatek nebo „tření“, aniž by to vědělo a postupně konverzi konverzní míru málo.
-

Web, který se změnil, změnil směr. Nutí uživatele cítit, že značka není profesionální a nedostatek pozornosti na své zkušenosti

Nechte web pokračovat takto, že se neliší od úniku lodi, aniž by přemýšlel o tomto úniku. Pochopení základního CRO (optimalizace míry konverze) na Shopify nebo na jiných platformách je proto brnění, aby těmto problémům zabránila nejlepším

Výzva pro ilustrace: Papírová loď s názvem „Můj web“ má malý únik. Mnoho bodů nazývalo „plýtvání rozpočtem“, „ztraceným zákazníky“ a pomalu klesl do moře.

Přestaň se hádat! Pojďme se poznat testování A/B a testování multivariatu.

Je čas změnit nejistotu na hmatatelnou informaci. Řešení tohoto problému má 2 hlavní typy, které jsou velmi populární a efektivní, tj. Testování A/B testování a testování multivariátu (MVT), které jsou jasně odlišné a používané správné situace.

Testování A/B (test vítěze)

Představte si, že testování A/B je boj ve fázi boxu. Máme „staré šampióny“ (aktuální verze nebo kontrola), abychom bojovali s „Challenger“ (nová verze nebo variace).

• Co to je: je porovnání 2 verzí webové stránky (nebo více v testu A/B/N), které je jasně odlišné. Chcete -li zjistit, která verze je lepší (například rychlost konverze)
• Při použití: Vhodné pro testování „velký“ a „vysoký dopad“, jako je změna všech nadpisů, nový návrh rozvržení, změna obrazu hrdiny nebo úprava procesu platby
• Příklad: Vyzkoušejte verzi stránky („zelené“ tlačítko) s tlačítkem verze B („Orange“), abyste zjistili, která barva klikne na více lidí.

Multivariační testování (MVT - nejlepší test na míchání)

Pokud je testování A/B boxerem MVT, Laboratoř vědců. Nehledáme jen vítěze. Chceme však vědět, jaké nejlepší „ingredience“ se skládají testováním mnoha malých změn na stejné stránce současně

• Co je to: více prvků a „více variací“ těchto komponent současně zjistí, která „kombinace“ (kombinace), která spolupracuje a poskytuje nejlepší výsledky.
• Při použití: Vhodné pro „ladění“ nebo „optimalizujte“, webová stránka, která má vysoký a efektivní přijetí, aby se ještě lépe porozuměl tomu, jak malé prvky, jak se každá část navzájem ovlivňuje?
• Příklad: Na stejné stránce chceme testovat hlavní (2 typy) x obrázky (2 typy) x text na tlačítku (2 typy) současně, což vytvoří sadu 2x2x2 = 8 verzí, abychom zjistili, které kombinační sady jsou nejvyšší konverzí.

Jaký druh výběru začíná tím, že se ptáte: „Chceme změnit změnu (revoluci) nebo postupně rozvíjet (evoluce)?“ Pokud se jedná o první věc, začněte provedením testování A/B na webu nebo ve vašem formuláři. Ale pokud je to jako MVT, je to odpověď.

Výzva pro ilustrace: 2 snímky, 2 páry boxerských rukavic (červená vs modrá) s „testováním A/B“ a pravá strana je vědecký pokus. Listy s různými kapalinami se mísí společně s etiketou „multivariačního testování“.

Příklad případu: Od běžných kaváren po konverzní šampiony s testy

Abychom byli jasnější, podívejme se na příběh obchodu „The Grind House“, což je obchod prodávající online kávová zrna. Mají krásnou vstupní stránku, ale míra konverze se nikde nepohybuje. Rozhodli se tedy použít data k rozhodování.

Krok 1: Úpravy velké struktury pomocí testování A/B

• Problém: Původní stránka (verze A) má dlouhé informace, ale tlačítko „Sledujte všechny kávové zrna“ je téměř spodní část stránky.
-

Pokud přesuneme tlačítko CTA na vrchol (nad záhybem) a změníme nadpis tak, aby byl zajímavější. By měly zvýšit kliknutí -

Vytvořili novou verzi nového nadpisu „Zažijte jedinečnou chuť kávy. Doručené přímo do vašeho domova“ a vložili tlačítko „Vyberte si kávová zrna“, pod ní velkou oranžovou barvu - pod ní - velkou oranžovou barvu -

Po spuštění testu A/B po dobu 2 týdnů

Krok 2: Upravte sub -element pomocí multivariačního testování

• Další problém: Nyní mají vítězné rozvržení (verze B), ale chtějí lépe optimalizovat.
  • Titulek: (pravděpodobně stejné)
  • Hrdinový obrázek: A (kávová farma) vs. (Barista je kapenka)
  -
  Text tlačítka:
  Zpráva A („Vyberte kávová zrna“) vs text B („Shop Now“)
-

Změna obrazu hrdiny a text na tlačítku CTA může pomoci přidat další konverzi -

Na rozložení verze B testují MVT takto:-

MVT zjistil, že výherní sada je

Což pomáhá zvýšit míru konverze. Celkově je dalších 18% z originálu!

Je vidět, že používají testování A/B k nalezení „velké změny“ nejprve a poté pomocí MVT „upraví podrobnosti“, což je velmi silná strategie. A je to směrnice, že odborníci CRO se vždy doporučují.

Výzva pro ilustrace: Infographic Images Vyprávějte příběh The Grind House, s krokem 1 (test A/B) a krokem 2 (multivariační test) a jasně zobrazí výsledky.

Chcete začít testovat? Kontrolní seznam 6 jednoduchých kroků, které mohou okamžitě sledovat.

Začátek může vypadat děsivě, ale ve skutečnosti existují jasné procesy. Ať už se rozhodnete provést testování A/B nebo MVT, můžete tento kontrolní seznam postupovat.

1. Stanovte cíle, které lze měřit (definujte váš cíl): Co chcete zlepšit? Neříkejte široce: „Chcete zvýšit prodej“, ale být konkrétní, například „Chcete zvýšit počet lidí, stiskněte přidat do automobilu na stránce produktu“ nebo „Chcete snížit míru okamžitého opuštění na stránce vstupní stránky o 10%“
2. Vytvořte hypothsis: Vytvořte v této struktuře jasné věty: „Věřím, že změny (x) budou mít za následek výsledky (y)„ například „věřím, že tlačítko změny barvy“ je oranžové (x) zvýší kliknutí (y), protože je vynikající než originál a vytvoří spěchající pocit (z) “.
3. Vyberte nástroj a metodu testování (vyberte svůj nástroj a metodu): z vašeho cíle a předpokladu. Chcete velkou změnu (A/B) nebo MVT? Poté vyberte nástroje, které chcete použít, například VWO nebo Optimizly.
4. Vytvořte variantu Vytvořit: Konstrukce nové verze (variace) podle vašich předpokladů ve vašich nástrojích. Ujistěte se, že všechno funguje správně.
5. Začněte testovat a čekat (spusťte test a buďte trpěliví): Nechte systém začít rozdělit provoz na různé verze. Důležitou věcí je, že „trpělivost“ by měla být tak dlouhá na to, aby získala statistickou význam, která obvykle sníží nejméně 1-2 týdny, aby se snížila nesrovnalost.
6. Analyzujte výsledky a udělejte (analyzujte a implementujte): Když končí test, uvidíte výsledky, která verze je vítězem. Pokud existuje jasný vítěz, použijte tuto verzi k skutečně použití se 100% provozem, pokud se výsledek neliší, znamená to, že to, co změníte, nemá žádný účinek. A je čas na to, aby se nový předpoklad pokračoval v testování

Počínaje procesem testování A/B pro nový elektronický obchod je nejlepším bodem pro vytvoření testovací kultury ve vaší organizaci.

Výzva pro ilustrace: 6 Obrázky kontrolního seznamu s ikonami v každé položce (článek 1: Archery, článek 2: Labox, článek 3: Box nástrojů, článek 4: Nástroje pro sadu/návrh Sutan, článek 5: Sledujte/kalendář, článek 6: Graf: Graph: Graf

Otázky, které lidé mají tendenci přemýšlet (FAQ) o A/B a multivarlátovém testování.

Sestavil jsem populární otázku, s níž se často setkává. S jasnou odpovědí a snadno srozumitelným

Otázka 1: Kolik musí mít provoz, aby se dostal na web?
A: Žádná pevná čísla. Záleží však na vaší aktuální míře konverze a na velikosti výsledků, které očekáváte. Obecným principem je však to, že multivariační testování vyžaduje mnohem větší provoz než testování A/B, protože musí přenos rozdělit na malé části. Mnoho verzí pro každou verzi, aby obdržela dostatek informací. Pokud má web velmi vysoký provoz, bude snazší vidět testování A/B.

Q2: Jak dlouho bych měl nechat test běžet?
Odpověď: Důležitá věc není „počet dní“, ale „statistická významnost“, což vám řekne, že výsledky jsou spolehlivé na úrovni 95% nebo?

Q3: Který mezi testováním A/B a MVT? "Lepší"?
A: Není o nic lepší. Je to jako se ptát „Který šroubovák a šroubovák je lepší?“ Záleží na „práci“, kterou chcete dělat. Pokud chcete přibít (hledat jasného vítěze z velké změny), musí použít kladivo (testování A/B), ale pokud chcete šroub (upravte malý prvek a najdete nejlepší kombinační sadu), musíte použít šroubovák (MVT)

Q4: Pokud výsledky vyjdou, že „žádný vítěz“ (neprůkazný), co mám dělat?
A: Toto je cenná lekce! Tento druh výsledku nám říká, že „to, co měníme, nemá vliv na chování uživatelů vůbec.“ Což je lepší než hádání a přechod na novou verzi, což není opravdu lepší. Mělo by se to udělat k návratu k novému předpokladu, že „statečný“ a „odlišný“ než dříve a poté začněte znovu testovat. Nebo dojít k závěru, že původní prvek je již dobrý a místo toho jděte do jiného bodu

Výzva pro ilustrace: Lidé kladou otázky. S textovým pole se slovem Q1, Q2, Q3, Q4 a krátkými odpověďmi snadno pochopitelné

Shrnutí: Přestaňte hádat a spustit „test“ a vytvořte skutečný růst.

V tomto okamžiku doufám, že každý uvidí rozdíly a výhody testování A/B a testování multivariet.

Jednoduché shrnutí, které si pamatujete srdce:

• Testování A/B: Používá se pro „vítěze“, které jsou jasné mezi velmi odlišnými nápady. Vhodné pro „revoluční“
-

Používá se pro nalezení „nejlepší smíšené sady“ malých prvků vhodných pro změny v „evoluční“ pro optimalizaci.

Klíčem k optimalizaci rychlosti konverze není nejdražší nástroj. Ale při „kultuře testování“ v organizaci je změna metod z „myslím ...“ je „Information Says ...“ prvním krokem, který je nejdůležitější pro odemknutí růstu vašeho podnikání online.

Nedovolte, aby váš úspěch závisel na náhodném. Počínaje dnes malou věcí, zkuste předpokládat svou nejdůležitější stránku. A začněte testovat cestování do skutečného růstu ... počínaje prvním testem!

Jste připraveni změnit odhad na hmatatelný prodej? Nechte odborníci z mozku Vision X vám pomohou nastavit strategii a provést nejúčinnější test. Konzultujte nás dnes zdarma!

Výzva pro ilustrace: Graf linky, který se od začátku stoupá se slovem „hádání“ do nejvyššího bodu s slovem „Úspěch založený na údajích“ s logem A/B v grafu.

‍