Roadmapa personalizace selhává předvídatelně: tým v prvním měsíci spustí osm segmentů, žádný nemá dost návštěvnosti na čitelný výsledek a ve třetím měsíci už nikdo nedokáže říct, zda personalizace funguje. Řešením není víc ambicí, ale správné pořadí. Začněte s menším počtem segmentů, než si myslíte, ještě před testováním si ověřte, co vaše návštěvnost dokáže odhalit, a předem rozhodněte, jaký výsledek znamená pravidlo rozšířit, nebo zrušit.
Toto je 90denní plán testování personalizace na B2B webu rozepsaný po týdnech: kdo za co odpovídá, se kterými dvěma segmenty začít a proč, realita velikosti vzorku, rozhodovací pravidla a tabulka roadmapy ke zkopírování. Jak převést výsledky na číslo ROI, popisuje samostatně náš průvodce měřením ROI personalizace; tato stránka je o vedení testů.
Kdo za co odpovídá
Personalizační programy bez jmenovaného vlastníka se rozplynou. Pokryje je pět rolí a v malém týmu jich může jeden člověk zastávat několik:
| Role | Vlastní | Obvyklá doba |
|---|---|---|
| Vlastník programu (marketing) | Roadmapa, backlog testů, rozhodnutí v každém kontrolním bodě | 4–6 hodin týdně |
| Content lead | Titulky, bloky s důkazy a texty CTA pro každý segment | Náročné ve 3.–4. a 8.–10. týdnu |
| Marketing ops / analytika | Měření, přiřazení kontrolní skupiny, pole v CRM, čtení výsledků | Náročné v týdnech 1–2, pak 2 hodiny týdně |
| Vedoucí obchodu | Kontrola rozumnosti výběru segmentů, zpětná vazba ke kvalitě leadů | 30 minut u každého kontrolního bodu |
| Webový vývojář | Instalace skriptu, kontrola problikávání a výkonu | Pár hodin v 1. týdnu |
Realita velikosti vzorku (udělejte jako první)
Než vyberete segmenty, zjistěte, co vaše návštěvnost dokáže zachytit. Většina B2B týmů to přeskočí a pak spouští testy, které nikdy nemohly přinést výsledek.
Standardní aproximace (Lehrovo pravidlo, síla testu 80 %, oboustranná hladina významnosti 5 %) zní: potřebný počet návštěvníků na skupinu = 16 x p x (1 - p) / d², kde p je výchozí míra a d absolutní rozdíl, který chcete odhalit. Obráceně: nejmenší relativní nárůst, který dokážete odhalit, je 4 x √(p x (1 - p) / n) / p pro n návštěvníků na skupinu.
Tabulka to uplatňuje na test, který běží asi dva měsíce s rozdělením 50/50, takže každá skupina dostane zhruba měsíc návštěvnosti segmentu. Uvedeny jsou dvě metriky: konverze formuláře na úrovni 2 % (žádost o demo nebo kontakt) a míra prokliku CTA na úrovni 10 %.
| Měsíční návštěvníci v segmentu (na testovaných stránkách) | Nejmenší zjistitelný nárůst: konverze formuláře 2 % | Nejmenší zachytitelný nárůst: kliknutí na CTA při 10 % | Co můžete realisticky testovat |
|---|---|---|---|
| 1,000 | ~89% | ~38% | Jen velké změny u metrik kliknutí. Pro konverze segmenty slučujte nebo použijte srovnání před a po. |
| 5,000 | ~40% | ~17% | Testy kliknutí a zapojení pro každý segment. Konverze jen u výrazných změn. |
| 20,000 | ~20% | ~8.5% | Vždy jen jeden konverzní test na segment. |
| 50,000 | ~12.5% | ~5.4% | Konverzní testy s realistickými nárůsty; několik souběžných testů na různých stránkách. |
Příklad výpočtu pro řádek 5 000: n = 5 000 na skupinu, p = 0,02. √(0,02 x 0,98 / 5 000) = 0,00198. Vynásobte 4: 0,0079, což je změna o 0,79 procentního bodu při výchozích 2 %, tedy relativně asi o 40 %.
Plynou z toho tři závěry. Zaprvé: pokud má váš segment několik tisíc návštěvníků měsíčně, použijte jako primární metriku testu metriku s vyšší frekvencí (kliknutí na CTA, dosažení ceníkové stránky) a konverze sledujte jako sekundární signál. Zadruhé: dělejte dost velké změny, aby na nich záleželo; přeformulované tlačítko 40% nárůst nepřinese. Zatřetí: pokud ponecháte kontrolní skupinu 30 % místo 50 %, potřebujete zhruba 1,2násobek provozu. Spočítejte si vlastní čísla v kalkulačce A/B testu a zdůvodnění vzorce najdete v našem průvodci velikostí vzorku pro A/B test.
Se kterými segmenty začít a proč
Začněte přesně dvěma segmenty. Vyberte je podle čtyř kritérií: dost návštěvnosti, aby prošly ověřením reality, jasný rozdíl v tom, co segment potřebuje slyšet, obsah, který už máte (nebo ho napíšete do dvou týdnů), a hodnota pro byznys.
U většiny B2B webů projdou tyto dva:
- Vaše nejvhodnější odvětví (identifikovaní návštěvníci). Vyberte odvětví s nejvyššími tržbami z vyhraných obchodů za posledních 12 měsíců, ne to, ze kterého je nejvíc nadšené vedení. Odvětví je z identifikace návštěvníků spolehlivě dostupné, kupující v jednom odvětví sdílejí slovník i námitky a pravděpodobně už máte jednu či dvě případové studie. Změňte titulek v hero sekci a zákaznický důkaz.
- Vracející se návštěvníci, kteří zobrazili ceník nebo srovnávací stránku. Tento segment nepotřebuje žádnou identifikaci, takže má obvykle větší návštěvnost než jakýkoli firmografický segment, a jeho potřeba je zřejmá: hodnotí, takže jim místo sdělení pro fázi povědomí ukažte CTA pro přímou schůzku a obsah pro hodnocení (bezpečnost, integrace, implementace).
Pokud odvětví váš trh dobře nerozděluje, použijte místo prvního segmentu velikost firmy (například méně než 200 zaměstnanců oproti 1 000 a více). Rozdíl ve sdělení mezi týmem, který nakupuje kartou, a týmem, který prochází nákupním procesem, bývá velký.
Tohle si nechte na později: seznamy vybraných účtů (příliš malá návštěvnost na testování; personalizujte je, ale nečekejte čitelný test), segmenty podle pracovní pozice (roli návštěvníka před vyplněním formuláře znáte jen zřídka) a mikrosegmenty kombinující tři atributy. Jak vybrat atributy shody z dat o vyhraných obchodech, popisuje náš průvodce sestavením profilu ideálního zákazníka.
90denní roadmapa personalizace
Zkopírujte si tuto tabulku do svého projektového nástroje. Každá fáze má jedno výstupní kritérium: další fázi nezačínejte, dokud není splněno.
| Týdny | Fáze | Výstupy | Vlastník | Kritérium ukončení |
|---|---|---|---|---|
| 1-2 | Základy | Definované primární a sekundární konverzní události; ověřené měření; nainstalovaný personalizační skript; výchozí hodnoty pro každý kandidátní segment (návštěvnost, konverze, míra prokliku CTA, dosah cenové stránky); provedená kontrola velikosti vzorku | Marketing ops, vývojář | Výchozí čísla schválena; vybrány dva segmenty, které projdou kontrolou reality |
| 3-4 | Sestavení | Dvě varianty na segment (nadpis + důkazy); přiřazení do holdout skupiny podle účtu; analytická událost pro segment, pravidlo a variantu; kontrola kvality na desktopu a mobilu; kontrola probliknutí a Core Web Vitals | Vedoucí obsahu, marketing ops | Oba segmenty spuštěné s holdout skupinou; kontrolní seznam kvality splněn |
| 5-6 | Spustit, bez nahlížení | Jen týdenní kontrola stavu: míra identifikace, přesnost přiřazení do segmentů, vyváženost holdoutu, rychlost stránky. Žádná rozhodnutí o výsledcích | Marketing ops | Žádné technické problémy; skupiny vyvážené |
| 7-8 | První dojem | Výsledky primární metriky oproti plánovanému vzorku; zpětná vazba obchodu ke kvalitě leadů; rozhodnutí o každém pravidle podle níže uvedených pravidel | Vlastník programu, vedoucí obchodu | Každé pravidlo označeno: škálovat, iterovat, nebo zrušit |
| 9-10 | Iterujte a rozšiřujte | Vítězné pravidlo rozšířené na druhou stránku; jedna odvážnější varianta pro nepřesvědčivá pravidla; třetí segment přidaný, jen pokud to návštěvnost dovolí | Vedoucí obsahu, vlastník programu | Nové testy spuštěny s naplánovanými velikostmi vzorku |
| 11-12 | Druhé vyhodnocení | Výsledky testů z 9.–10. týdne; první signál z pipeline (vytvořené příležitosti podle skupin, pouze orientačně) | Vlastník programu, marketing ops | Rozhodnutí u každého pravidla zaznamenáno |
| 13 | Vyhodnocení a plánování | Aktualizovaný playbook s vítězi a poraženými, backlog na druhé čtvrtletí a souhrn výsledků pro vedení (s odkazem na model ROI) | Vlastník programu | Roadmapa na příští čtvrtletí schválena |
Týdny 1–2: základy
Vyberte jednu primární konverzní událost (obvykle žádost o demo nebo kontakt) a jednu sekundární (dosažení ceníku nebo kliknutí na CTA s vysokým záměrem) a používejte je po celých 90 dní. Změna metriky úspěchu v průběhu testu je způsob, jak se z neprůkazných výsledků stávají „výhry“. Ověřte, že se události spouštějí ve všech formulářích, včetně vložených a chatových. Pak si pro každý kandidátní segment stáhněte výchozí hodnoty a před rozhodnutím o segmentech proveďte výše uvedenou kontrolu reality.
3.–4. týden: tvorba
Pro každý segment změňte jeden nebo dva prvky, ne celou stránku. Obvyklou dvojicí je nadpis a důkaz, protože nesou nejvíc významu. Každý test před spuštěním zapište do jednostránkového plánu A/B testu s hypotézou, hlavní metrikou, velikostí vzorku a plánovaným datem ukončení. Kontrolní skupinu přiřazujte na úrovni účtu, aby kolegové ze stejné firmy viděli stejnou verzi.
Týdny 5–6: běh bez průběžného nahlížení
Kontrolovat signifikanci každý den a skončit, jakmile poprvé překročí 95 %, výrazně zvyšuje počet falešně pozitivních výsledků. Během těchto týdnů kontrolujte jen zdraví nastavení: jsou návštěvníci správně identifikováni a přiřazováni, jsou obě skupiny podobně velké, změnila se rychlost stránky?
Týdny 7–8: první vyhodnocení
Každý test vyhodnoťte až ve chvíli, kdy dosáhne plánovaného vzorku. Zeptejte se obchodu, zda leady z personalizovaných stránek vypadají nějak jinak. Pak uplatněte rozhodovací pravidla.
9.–12. týden: iterujte a rozšiřujte
Vítěze rozšiřte na další stránku na cestě (vítězný odvětvový nadpis na domovské stránce si obvykle zaslouží odpovídající důkazy na ceníku). Neprůkazným pravidlům dejte jednu odvážnější variantu. Třetí segment přidejte, jen pokud projde kontrolou reality na vlastní návštěvnosti.
13. týden: kontrola
Každé pravidlo, jeho výsledek a rozhodnutí zapište do svého personalizačního playbooku, včetně těch neúspěšných. Pak backlog na další čtvrtletí naplánujte podle toho, co jste se naučili, ne podle původního seznamu přání.
Rozhodovací pravidla: škálovat, upravit, nebo ukončit
Sepište si je před spuštěním prvního testu, aby se výsledky později nevykládaly podle toho, v co kdo doufal.
| Výsledek při plánované velikosti vzorku | Rozhodnutí |
|---|---|
| Primární metrika nahoru, dolní mez 95% intervalu spolehlivosti nad nulou, kvalita leadů beze změny nebo lepší | Škálovat: rozšiřte na celý segment (ponechte malou kontrolní skupinu), rozšiřte na další stránku |
| Primární metrika roste, ale není signifikantní; sekundární metrika roste | Jednou upravte: jedna odvážnější varianta, stejná metrika, nový plánovaný vzorek. Pokud je výsledek stále nepřesvědčivý, ukončete |
| Žádný rozdíl v hlavní ani vedlejší metrice | Ukončit: segment možná nepotřebuje jiné sdělení, nebo byla změna příliš malá. Uvolněte návštěvnost pro jiný test |
| Primární metrika výrazně dolů | Ukončit hned, i před plánovaným datem konce, a zaznamenat, proč si myslíte, že selhal |
| Kliknutí rostou, konverze po celém vzorku stagnují | Ukončit nebo přesunout: varianta vyvolává zvědavost, ne záměr. Vyzkoušejte sdělení na stránce s vyšším záměrem |
| Konverze nahoru, míra přechodu z leadu na příležitost dolů | Zastavte a vyhodnoťte: přitahujete nesprávné firmy; zpřesněte segment nebo CTA |
Náš názor: ukončení je výsledek, ne neúspěch. Plán, ve kterém každý test „vyhrál“, je znamením, že testy byly vyhodnoceny předčasně.
Backlog testů ke zkopírování
Mějte jeden řádek na test. Dva sloupce, které většina týmů vynechává, jsou „plánovaný vzorek na skupinu“ a „datum rozhodnutí“, a právě ty brání tomu, aby testy běžely donekonečna.
| ID testu | Segment | Stránka | Prvek | Hypotéza | Primární metrika | Plánovaný vzorek na skupinu | Začátek | Datum rozhodnutí | Výsledek / rozhodnutí |
|---|---|---|---|---|---|---|---|---|---|
| T1 | Nejvhodnější odvětví | Homepage | Hlavní nadpis + důkaz | Pojmenování hlavního problému odvětví a ukázka podobného zákazníka zvyšuje počet žádostí o demo | Žádosti o demo / návštěvník | ||||
| T2 | Vracející se, zobrazil ceník | Homepage | Hlavní CTA | Hodnotitelé reagují spíš na nabídku přímé schůzky než na stažení obsahu | Míra prokliku CTA | ||||
| T3 |
Každé pravidlo pojmenujte podle jednotného vzoru, například segment-stránka-prvek-verze (třeba „logistics-home-hero-v2“). Do 90. dne budete mít tucet pravidel a nepojmenovaná se nedají auditovat.
Časté chyby
Volit segmenty před kontrolou návštěvnosti. Nejčastější důvod, proč 90denní plán nic nepřinese. Kontrolu reality proveďte v prvním týdnu.
Porovnávání personalizovaných návštěvníků s průměrem webu. Identifikovaní návštěvníci z cílových odvětví konvertují jinak než anonymní návštěvnost tak jako tak. Porovnávejte s kontrolní skupinou ze stejného segmentu, jinak je „nárůst“ jen vlastností segmentu.
Příliš malé změny. Výměna jednoho slova v nadpisu nemůže přinést nárůst, který B2B provoz dokáže zachytit. Měňte sdělení, ne interpunkci.
Překrývající se pravidla bez priority. Účet může být zároveň enterprise i ve vašem cílovém odvětví. Předem rozhodněte, které pravidlo vyhrává (obvykle to nejkonkrétnější), jinak se dva testy navzájem zkreslí.
Ponechání výchozího zážitku napospas. Většina vaší návštěvnosti bude i po 90 dnech vidět výchozí stránku. Dál ji vylepšujte, ideálně běžnými A/B testy; jak zvolit metodu, popisuje článek A/B testování vs. multivariantní testování.
Reportování pipeline v den 60. Dopady na příležitosti a tržby potřebují alespoň jeden obchodní cyklus. V den 90 prezentujte pipeline jako orientační a pro úplné vyhodnocení odkažte na plán měření.
Funkce segmentace v Markettailoru pokrývají typy segmentů v tomto plánu: odvětví, velikost firmy a chování na webu, jako jsou návštěvy ceníkové stránky.
Časté dotazy
Co by měla obsahovat roadmapa personalizace?
Jmenovití vlastníci, segmenty, kterými začínáte, a proč, kontrola velikosti vzorku ukazující, co vaše návštěvnost dokáže odhalit, plán ve fázích s výstupy a výstupními kritérii, rozhodovací pravidla pro rozšíření nebo ukončení každého pravidla sepsaná před spuštěním a backlog testů s plánovanými velikostmi vzorků a termíny rozhodnutí. Bez kontroly velikosti vzorku a rozhodovacích pravidel je plán jen seznam přání.
Kolik návštěvnosti potřebujete pro testování personalizace?
Záleží na metrice. Při konverzním poměru 2 % dokáže segment s 20 000 návštěvníky měsíčně při rozdělení 50/50 odhalit relativní nárůst zhruba o 20 % přibližně za dva měsíce. S 5 000 návštěvníky je odhalitelný jen nárůst o 40 %, proto použijte častější metriku, jako je proklik CTA, který při výchozích 10 % může ukázat nárůst o 17 %.
Které segmenty personalizovat jako první?
Dva: vaše nejvhodnější odvětví, vybrané podle tržeb z vyhraných obchodů, a vracející se návštěvníci, kteří si prohlédli ceník nebo srovnávací stránky. První má jasný rozdíl ve sdělení a existující důkazy; druhý nepotřebuje identifikaci, takže má obvykle největší návštěvnost. Seznamy vybraných účtů a segmenty podle pracovní pozice si nechte na později, protože jejich návštěvnost je na testování příliš malá.
Jak dlouho by měl test personalizace běžet?
Dokud nedosáhne velikosti vzorku, kterou jste naplánovali před spuštěním, a alespoň dva celé týdny, aby byl zastoupen každý den v týdnu. Nezastavujte ve chvíli, kdy výsledek vypadá významně: denní kontrola a zastavení při prvním významném výsledku zvyšuje počet falešně pozitivních výsledků. Účinky na pipeline potřebují navíc ještě jeden celý obchodní cyklus.