Pomiar wyników

W tym rozdziale będziemy dyskutować o tym, jak mierzyć wyniki i upraszczać statystyki testów przeprowadzonych na stronie internetowej.

Zrozumienie statystyk

Badacze mogą, ale nie muszą, rozumieć statystyki. Ale narzędzie do testów A / B okazuje się zbawienne, upraszczając te statystyki. Dzięki temu można uniknąć wielu obliczeń. Większość narzędzi testowych konsekwentnie stosuje kryteria 95% jako pomyślne osiągnięcie celu.

Oznacza to, że na 10 punktów jesteś zwycięzcą do 9. Weźmy przykład. Twój raport narzędzia testowego wygląda następująco -

Wariacje	Współczynnik konwersji
Strona sterowania	1,91%
1	2,39%
2	2,16%
3	3,10%

Ten raport przewiduje mniej więcej 0,20% wariancji współczynnika konwersji w 95% przedziale. Statystycznie zakres bramek wynosi od 1,76 do 2,06.

Pobieranie statystyk

Planując test mam na uwadze dwa cele. Pierwsza to zwiększanie przychodów, a druga to pozyskiwanie informacji o tym, co spowodowało wyższy zwrot z inwestycji.

Na przykład w studium przypadku przekierowanie ruchu na stronę produktu zamiast strony kategorii lub strony głównej poprawia współczynniki konwersji lub nie. Wzięliśmy trzy warianty, w jednej kierowaliśmy ruch na stronę główną załadowaną kategoriami i podkategoriami kierującymi dalej na stronę produktu. W drugim kierowaliśmy ruch na stronę kategorii, dodając filtry. W trzecim przekierowaliśmy go bezpośrednio na stronę szczegółów produktu z przyciskiem Kup.

Ku mojemu zdziwieniu wygrała trzecia wariacja. To są tylko informacje wymagane przez kupującego na temat produktu. To pozwala nam dowiedzieć się, jak wzrost współczynnika konwersji i ciągłe ulepszenia mogą przyczynić się do zwiększenia liczby potencjalnych klientów.

Niewątpliwie dodanie wielu odmian i spostrzeżeń na temat testów dało nam przeprojektowanie strony internetowej.

Zrozumienie wyników

Pozwól mi to wyjaśnić. NIE WSZYSTKIE TESTY WYGRAJĄ. Tak, to bolesne, ale prawdziwe.

Istnieją testy, które dają rewelacyjne wyniki. Są też inne, które po tylu próbach również byłyby bez rezultatu. Ale jeśli planujesz test z wglądem w segmentację, możesz mieć nową hipotezę do przetestowania. Nie wszystkie testy pomagają zwiększyć przychody.

Weź przykład, aby zrozumieć. Istnieją trzy kampanie z różnymi współczynnikami konwersji.

Kampania A	8,2%
Kampania B	19,1%
Kampania C	5,2%

Każdy ślepo powie, że „Kampania B” jest super wykonawcą. Ale poszukajmy więcej.

	Odwiedziny	Transakcje	Współczynnik konwersji
Kampania A	1820	150	8,2%
Kampania B	20	4	19,1%
Kampania C	780	41	5,2%

Patrz uważnie, „Kampania B” jest zbyt mała, aby była statystycznie istotna. Kampania B z 1 transakcją i jedną wizytą da 100-procentowy współczynnik konwersji. „Kampania A” jest skuteczniejsza niż „Kampania C”. Podsumowując wyniki, należy wziąć pod uwagę kilka czynników i za każdym razem mogą się one różnić. To Ty musisz przyjrzeć się wszystkim spostrzeżeniom i zdecydować o wynikach.