ROI personalizacji strony: jak je zmierzyć i uzasadnić inwestycję

ROI personalizacji to przyrostowy zysk brutto, który generują spersonalizowane doświadczenia, minus ich koszt, podzielony przez ten koszt. Najtrudniejsze jest słowo „przyrostowy”. Współczynniki konwersji na spersonalizowanych stronach niemal zawsze wyglądają lepiej niż średnia dla serwisu, a prawie nic z tej różnicy niczego nie dowodzi, bo odwiedzający, dla których możesz personalizować, to nie ci sami, dla których nie możesz.

Ta strona omawia całe zadanie w jednym miejscu: wzór na ROI personalizacji strony z przykładem wyliczenia, jak zaprojektować grupę kontrolną, która naprawdę izoluje efekt, które metryki raportować na którym etapie, kartę wyników do skopiowania oraz jak zamienić to wszystko w uzasadnienie biznesowe personalizacji, które uzyska zgodę na pilotaż.

Wzór na ROI personalizacji

Zapisz formułę jako łańcuch, aby każde ogniwo mógł sprawdzić ktoś z działu finansów:

Przyrostowy zysk brutto = ruch w segmencie x bazowy współczynnik konwersji x względny wzrost x współczynnik przejścia od leada do szansy x współczynnik wygranych x ACV x marża brutto

ROI = (przyrostowy zysk brutto − całkowity koszt) / całkowity koszt

W tym wzorze trzy wybory są ważniejsze niż sama arytmetyka:

• Ruch w segmentach, nie ruch na całej stronie. Wpływ możesz mieć tylko na odwiedzających, którzy zostali zidentyfikowani i należą do spersonalizowanego segmentu. Jeśli 25% ruchu da się zidentyfikować i przypisać do segmentu, pozostałe 75% nic nie wnosi do ROI, a mnożenie ruchu całej strony przez wzrost to najczęstszy sposób na zawyżanie business case'ów.
• Wzrost mierzony względem grupy kontrolnej, a nie względem poprzedniego kwartału czy niezidentyfikowanych odwiedzających. Więcej o tym poniżej.
• Zysk brutto, nie przychód. ROI liczone od przychodu upiększa wynik. Dział finansów i tak przeliczy je na marży, więc zrób to pierwszy. Kalkulator ROI marketingu pokazuje obie wersje obok siebie.

Przykład krok po kroku

Przykład z poglądowymi liczbami dla hipotetycznej firmy software'owej B2B. Spersonalizowany segment to zidentyfikowani odwiedzający z dwóch branż docelowych.

Koszty za ten sam rok, również poglądowe: subskrypcja narzędzia 18 000 USD, czas zespołu 6 godzin tygodniowo przez 48 tygodni przy pełnym koszcie 80 USD za godzinę (23 040 USD) oraz 8000 USD jednorazowej produkcji treści. Razem: 49 040 USD.

ROI = (193 536 USD - 49 040 USD) / 49 040 USD = 2,95, czyli około 295%.

Teraz wykonaj obliczenie, które naprawdę przekonuje dyrektora finansowego: wzrost progowy. Każdy 1% względnego wzrostu w tym przykładzie to 0,8 dodatkowej prośby miesięcznie, co przekłada się na 12 902 USD rocznego zysku brutto. Podziel koszt 49 040 USD przez 12 902 USD, a otrzymasz wzrost progowy około 3,8%. Dyskusja przestaje dotyczyć pytania „czy wierzymy w 15%?”, a zaczyna „czy wierzymy, że przekroczymy 3,8%?” – a na to znacznie łatwiej odpowiedzieć.

Dwie korekty w imię uczciwości, zanim komukolwiek to pokażesz:

• Timing. Deale zamykają się jeden cykl sprzedaży po konwersji. Przy 4-miesięcznym cyklu program uruchomiony w styczniu w pierwszym roku kalendarzowym zaksięguje mniej więcej osiem miesięcy przyrostowych dealów, a nie dwanaście. W pierwszym roku pokazuj pipeline, a zamknięte deale z uwzględnieniem tego opóźnienia.
• Niepewność. Zmierzony wzrost o 15% ma przedział ufności, a przy ruchu B2B jest on zwykle szeroki. Policz ROI zarówno dla dolnej granicy przedziału, jak i dla estymacji punktowej. Jeśli dolna granica nadal jest powyżej progu rentowności, masz mocny argument. Jeśli jest poniżej zera, powiedz to otwarcie.

Projektowanie grupy kontrolnej

Grupa kontrolna (holdout) to losowo wybrana część personalizowanego segmentu, która nadal widzi domyślne doświadczenie. To jedyna czysta odpowiedź na pytanie „czy te firmy i tak by skonwertowały?”. Bez niej sezonowość, nowa kampania, zmiana cen czy fala zatrudnień w sprzedaży zostaną przypisane personalizacji. Nasz wpis o atrybucji dla spersonalizowanych stron pokazuje, jak grupy kontrolne współgrają z modelem atrybucji kanałów; tutaj opisujemy sam projekt.

Porównuj podobne z podobnym

Błąd, który popełnia większość zespołów, to porównywanie spersonalizowanych odwiedzających ze wszystkimi, którzy widzieli stronę domyślną. Zidentyfikowani odwiedzający z docelowych branż to inni ludzie niż anonimowy ruch: zwykle są dalej w procesie, lepiej dopasowani i częściej konwertują z personalizacją lub bez niej. Takie porównanie mierzy segment, a nie doświadczenie. Grupa kontrolna musi pochodzić z tego samego segmentu i z tą samą regułą identyfikacji, by jedyną różnicą między grupami było to, co zobaczyły.

Losuj według firmy, nie według sesji

Jeśli jedna osoba z firmy widzi spersonalizowaną stronę główną, a jej kolega domyślną, obie grupy są zanieczyszczone, a efekt komitetu zakupowego ginie. Przypisuj na poziomie konta (np. stałym hashem domeny firmy) i trzymaj każde konto w jego grupie przez cały test.

Jak duża powinna być grupa kontrolna?

Mniejsze grupy kontrolne kosztują mniej pipeline'u, ale spowalniają test, a kara jest większa, niż większość osób zakłada. Wariancja różnicy między dwiema grupami jest proporcjonalna do 1/(udział A) + 1/(udział B). Podział 50/50 daje 2 + 2 = 4. Grupa kontrolna 10% daje 10 + 1,11 = 11,1, czyli 2,8 raza więcej, więc do wykrycia tego samego wzrostu potrzebujesz mniej więcej 2,8 raza więcej ruchu.

Nasze zdanie: w pilotażu stosuj podział 50/50 lub 30/70. Chcesz szybko odpowiedzieć na jedno pytanie, a każdy dodatkowy tydzień nieczytelnego testu kosztuje więcej niż pipeline, który mógłbyś zyskać, personalizując większą część ruchu. Wpisz własny poziom bazowy i minimalny wykrywalny wzrost do kalkulatora testów A/B, aby uzyskać wielkość próby na grupę, a następnie zastosuj powyższy mnożnik.

Jak długo powinien trwać?

Prowadź test, dopóki nie zostanie spełniony najdłuższy z tych trzech warunków:

1. Osiągnięto wielkość próby dla głównego wskaźnika konwersji.
2. Minęły co najmniej dwa pełne tygodnie, więc reprezentowane są wzorce zarówno dni roboczych, jak i weekendów.
3. Dla twierdzeń o pipeline i przychodach: jeden pełny cykl sprzedaży po tym, jak ostatnie konto weszło do testu. Wzrost konwersji można odczytać po kilku tygodniach. Wzrostu pipeline'u – nie.

Gdy program już działa, utrzymuj małą stałą grupę kontrolną (na stronach o większym ruchu często 10%). Efekty się zmieniają, gdy treści się starzeją, a konkurenci zmieniają swoje strony, a stała grupa kontrolna to jedyny sposób, by wiedzieć, czy zeszłoroczny wzrost nadal istnieje.

Gdy grupa kontrolna nie jest możliwa

Jeśli personalizujesz dla 40 nazwanych kont, grupa kontrolna złożona z kilkunastu firm nigdy nie osiągnie istotności. Porównaj wyniki przed i po na tych samych kontach, zestaw je z dobraną grupą podobnych kont spoza listy docelowej w tym samym okresie i oznacz wynik jako kierunkowy. To wciąż przydatne, o ile nikt nie przedstawia tego jako dowodu.

Hierarchia wskaźników

Wskaźniki personalizacji mają trzy warstwy. Każda kolejna jest wolniejsza i bardziej zaszumiona niż poprzednia, a jednocześnie ważniejsza dla biznesu. Raportuj wszystkie trzy i nigdy nie pozwól, by wskaźnik wyprzedzający zastępował opóźniony.

Wskaźniki wyprzedzające służą do sterowania: w ciągu kilku dni pokazują, czy wariant w ogóle jest zauważany. Nie są ROI. Spersonalizowany nagłówek, który podnosi współczynnik klikalności, ale nie zmienia liczby zapytań o demo, nie poprawił niczego, za co zapłaci dział finansów.

Obserwuj jakość leadów obok ich liczby. Wzrost wypełnień formularzy o 20%, który w całości pochodzi z kont spoza ICP, to koszt, a nie sukces. Śledź współczynnik przejścia od leada do szansy sprzedażowej w obu grupach, a nie tylko współczynnik konwersji.

Zastrzeżenia dotyczące atrybucji

Grupa kontrolna daje przyczynowy szacunek dla segmentu. Wszystko, co raportujesz wokół niego, jest mniej pewne, a wiarygodny raport mówi, co jest czym.

• „Pipeline, na który wpłynęła personalizacja” to nie pipeline przyrostowy. Raport CRM z szansami sprzedaży, w których ktoś widział spersonalizowaną stronę w ciągu 30 dni przed ich utworzeniem, zawsze będzie duży, bo Twoje najlepsze firmy często odwiedzają stronę. Używaj go do pokazania zasięgu, nigdy do obliczania ROI.
• Model ostatniego kontaktu przecenia rolę strony. Kupujący, który zobaczył spersonalizowaną stronę główną po trzech rozmowach ze sprzedażą, nie skonwertował dzięki stronie głównej.
• Kanibalizacja jest realna. Jeśli spersonalizowane CTA skonwertuje konto, które w kolejnym tygodniu i tak odpowiedziałoby na e-mail od SDR-a, strona zalicza konwersję, a firma nie zyskuje nic ekstra. Grupa kontrolna uwzględnia to automatycznie – to kolejny powód, by ufać jej bardziej niż raportom wpływu.
• Wczesne wyniki są zawyżone. W pierwszych tygodniach testu dominują konta już głęboko w lejku, które w obu grupach konwertują na wysokim poziomie. Nie ekstrapoluj wyniku z dwóch tygodni na cały rok.
• Przed startem uzgodnij definicje z działem sprzedaży. Zdecyduj na piśmie, co liczy się jako firma, która konwertowała, której daty szansy sprzedaży używasz i jakie jest okno wsteczne. Definicje uzgodnione po pojawieniu się wyników będą przedmiotem sporów na każdym przeglądzie pipeline’u.

Technicznie minimalna konfiguracja wygląda tak: wysyłaj zdarzenie analityczne z segmentem, regułą i wariantem za każdym razem, gdy renderuje się spersonalizowane doświadczenie; zapisuj przydział do grupy (spersonalizowana lub kontrolna) w rekordzie konta w CRM; zbuduj jeden raport porównujący konwersję, tworzenie szans sprzedażowych, współczynnik wygranych i ACV według grup.

Karta wyników ROI personalizacji

Skopiuj tę tabelę do arkusza i wypełnij ją dla każdego segmentu. Zapisz wartość bazową przed uruchomieniem (lub z grupy kontrolnej), ustal cele, zanim spojrzysz na wyniki, i podaj źródło każdej liczby, żeby dało się je zweryfikować.

Wypełniaj kartę wyników co miesiąc i przeglądaj ją co kwartał. W kwartalnym przeglądzie odpowiedz na cztery pytania dla każdego segmentu: które reguły wygrały z grupą kontrolną, które po pełnym teście nic nie pokazały i powinny zostać wycofane, które segmenty o dużym ruchu nie mają jeszcze personalizacji i czy treści stojące za zwycięzcami się nie zestarzały. Szablon playbooka personalizacji to naturalne miejsce na zapisywanie tych decyzji, jeden wiersz na doświadczenie z jego wskaźnikiem i grupą kontrolną.

Budowanie business case'u dla personalizacji

Propozycje personalizacji zwykle utykają z przewidywalnych powodów: związek z przychodami jest mglisty („lepsze doświadczenia”), zakresem jest cała strona, a argumentacja jest taka sama dla wszystkich w sali. Dobry business case dla personalizacji rozwiązuje wszystkie trzy problemy, prosząc o mały, mierzalny pilotaż zamiast całego programu.

Struktura jednej strony

Daruj sobie 30-slajdową prezentację. Jedna strona, pięć sekcji:

1. Problem w Twoich własnych liczbach. „Odwiedzający z naszych dwóch najlepiej dopasowanych branż konwertują na stronie głównej na poziomie 1,4%, wobec 2,3% w naszym największym segmencie”. Luka z Twojej własnej analityki jest lepsza niż jakikolwiek benchmark branżowy.
2. Model. Łańcuch ROI z przykładu obliczeniowego, z Twoimi danymi, w trzech scenariuszach wzrostu, plus wzrost na progu rentowności.
3. Pilotaż. Zakres, grupa kontrolna, czas trwania, próg sukcesu (zobacz propozycję poniżej).
4. Koszt i ryzyko. Całkowity koszt w pieniądzach i godzinach. Jasno przedstaw najgorszy scenariusz: jeśli pilotaż nie pokaże wzrostu, tracisz koszt pilotażu i dowiadujesz się, które segmenty nie reagują.
5. Decyzja, o którą prosisz. Zgoda na pilotaż i uzgodniona data decyzji o rozszerzeniu lub zakończeniu, a nie zgoda na roczny program.

Zaplanuj pilotaż w małej skali

Jedna lub dwie strony o dużym ruchu (zwykle strona główna, strona cennika lub landing page o dużym wolumenie), dwa segmenty i jeden lub dwa elementy zmienione w każdym segmencie (zwykle nagłówek i dowody). Ograniczony zakres łatwiej zatwierdzić, szybciej zmierzyć i łatwo wyłączyć. Pilotaż daje też Twój własny wynik wzrostu, który na kolejnym spotkaniu budżetowym jest wart więcej niż jakikolwiek benchmark dostawcy.

Czemu sprzeciwia się zarząd i jak odpowiadać

Przed spotkaniem pomogą dwie rzeczy. Po pierwsze, znajdź lidera sprzedaży, który chce lepiej zakwalifikowanego pipeline’u z kont docelowych, i poproś go o współsponsorowanie; „marketing chce narzędzia” brzmi słabiej niż „sprzedaż i marketing chcą to przetestować”. Po drugie, obejrzyj strony głównych konkurentów z perspektywy różnych firm i zanotuj, co się zmienia, jeśli w ogóle. Jeśli personalizują, to argument za pilnością; jeśli nie, to szansa na wyróżnienie się. Tak czy inaczej, ogranicz to do krótkiego załącznika: zachowanie konkurencji to kontekst, a nie dowód ROI.

Propozycja 90-dniowego pilotażu do dostosowania

Realizację tego pilotażu tydzień po tygodniu, w tym od jakich segmentów zacząć i co pozwala testować Twój ruch, opisuje nasza 90-dniowa mapa drogowa testowania personalizacji.

Raportowanie do zarządu po uruchomieniu

Gdy pilotaż ruszy, na pierwszym slajdzie raportuj trzy liczby i nic więcej: przyrostowe konwersje względem grupy kontrolnej (z przedziałem ufności), dotychczasowy przyrostowy pipeline oraz dotychczasowy koszt w porównaniu ze wzrostem potrzebnym do progu rentowności. Wszystko inne, łącznie z podziałem na segmenty i wskaźnikami zaangażowania, trafia do załącznika.

Raportuj co miesiąc dla zespołu i co kwartał dla zarządu. Miesięczne dane B2B są zaszumione, a jeden słabszy miesiąc nie powinien wywoływać dyskusji o całym programie. Co kwartał aktualizuj ROI rzeczywistymi danymi, zastępując założenia jedno po drugim, aż w modelu nie zostanie żadna założona liczba.

Jeśli wdrażasz personalizację z Markettailor, funkcje testów A/B pozwalają ustawić grupę kontrolną dla każdego segmentu, więc powyższe porównanie masz wbudowane, a nie odtwarzane po fakcie.

Najczęściej zadawane pytania

Jak obliczyć ROI personalizacji?

Pomnóż liczbę odwiedzających w spersonalizowanym segmencie przez bazowy współczynnik konwersji i wzrost zmierzony względem grupy kontrolnej, a następnie przeprowadź to przez współczynnik lead → szansa sprzedaży, win rate, średnią wartość kontraktu i marżę brutto. Odejmij całkowity koszt (narzędzie, czas zespołu, treści) i podziel przez ten koszt. Policz też wzrost progu rentowności, czyli najmniejszy wzrost pokrywający koszt, bo łatwiej o nim dyskutować niż o prognozie.

Jak duża powinna być grupa kontrolna przy personalizacji?

W pilotażu 30–50% segmentu, bo mała grupa kontrolna wymaga znacznie większego ruchu: grupa kontrolna 10% potrzebuje mniej więcej 2,8 razy więcej ruchu niż podział 50/50, by wykryć ten sam wzrost. Gdy program jest sprawdzony i działa, stała grupa kontrolna ok. 10% na stronach o większym ruchu pozwala na bieżąco sprawdzać, czy efekt nadal występuje.

Jak szybko widać ROI z personalizacji strony?

Zmiany w zaangażowaniu widać w ciągu jednego do trzech tygodni, a wzrost konwersji mniej więcej w ciągu trzech do ośmiu tygodni, w zależności od ruchu. Pipeline i przychody potrzebują co najmniej jednego pełnego cyklu sprzedaży od wejścia kont do testu, więc przy czteromiesięcznym cyklu spodziewaj się odczytu przychodów około sześciu miesięcy po starcie. Przedstawiaj wczesne wyniki jako wskaźniki wyprzedzające, a nie ROI.

Co powinien zawierać business case dla personalizacji?

Jedna strona: luka w konwersji dla Twoich segmentów docelowych na podstawie Twoich danych, model ROI w trzech scenariuszach wzrostu wraz ze wzrostem dającym próg rentowności, ograniczony pilotaż (strony, segmenty, grupa kontrolna, czas trwania, próg sukcesu), całkowity koszt i najgorszy scenariusz oraz konkretna decyzja, o którą prosisz. Proś o pilotaż z datą decyzji, a nie o cały program.