Co to jest testowanie A/B?
Testowanie A/B (często określane jako testowanie dzielone lub testowanie kubełkowe) jest sposobem porównywania dwóch opcji i analizowania wyników. Może być używany do testowania, porównywania i analizowania wszystkiego. Najczęściej kojarzone jest ze stronami internetowymi, a ostatnio także z aplikacjami mobilnymi; testowanie A/B jest przede wszystkim wykorzystywane do optymalizacji współczynnika konwersji. Firmy internetowe regularnie optymalizują swoje strony docelowe i poprawiają ROI za pomocą testów A/B.
Jak działa testowanie A/B
Każdy test zaczyna się od postawienia hipotezy. Klasycznym przykładem mogą być linki „Zarejestruj się” vs. „Zarejestruj się” lub przyciski „Czerwony” vs. „Zielony”. Po określeniu celu (np. instalacji) i opcji testu, tester zaczyna kierować użytkowników na strony. Cały ruch użytkowników jest losowo rozdzielany pomiędzy wersję kontrolną i pozostałe warianty. Odwiedzający powinni być nieświadomi swojego udziału w eksperymencie. Jeżeli jeden z wariantów wypada znacząco lepiej niż pozostałe, można go uznać za zwycięzcę i należy go zastosować.
Zobaczysz, że jest on używany do porównywania mniejszych elementów, takich jak style przycisków call-to-action i większych komponentów, jak również ogólnego projektu strony. Jednakże, testy A/B działają równie dobrze, jeśli nie lepiej, w przypadku aplikacji mobilnych. Często pomijane przez deweloperów mobilnych, narzędzie to może być wykorzystywane do określania skuteczności ikon, zrzutów ekranu, opisów, wyników wyszukiwania w sklepie, wskazówek dojazdu, cen, nagłówków i innych.
Ta doskonała, oparta na danych metoda testowania strategii marketingowych jest zazwyczaj przeprowadzana w okresie od kilku dni do kilku tygodni. Ważne jest również, aby upewnić się, że jest wystarczająco dużo użytkowników, aby wygenerować dokładne wyniki.
Czy jesteś gotowy, aby rozpocząć testowanie A/B?
How to Run an A/B Test
Postępuj zgodnie z poniższą strategią, aby rozpocząć testowanie A/B:
Przeprowadź badania
Określ swój cel. Cokolwiek testujesz, powinno prowadzić do większego celu, takiego jak wyższy współczynnik konwersji. Idealnie, testy A/B pomogą Ci rozwiązać problem z aplikacją i sprawią, że Twoje cele biznesowe odniosą sukces.
Determine Your Variants
What is it that you want to compare? Zidentyfikuj problem, który chciałbyś rozwiązać. Może to być element projektu, kopii lub funkcji.
E.g. Co jest ważniejsze dla Twoich użytkowników: darmowa wysyłka czy 15$ zniżki na pierwsze zamówienie? Która orientacja zrzutu ekranu wygeneruje więcej instalacji dla aplikacji do gier: pionowa czy pozioma? Który styl ikon aplikacji bardziej przyciąga wzrok: wielokolorowy czy monochromatyczny? Możesz się tego łatwo dowiedzieć za pomocą testu A/B.
Wykonaj test
Po sformułowaniu teorii i zidentyfikowaniu elementu, który chcesz przetestować A/B, musisz stworzyć dwie odmiany strony docelowej. (Nazwijmy je A i B.) Powinny być one dokładnie takie same, a jedyną różnicą powinien być element, który chcesz przetestować (ikona, zrzut ekranu, opis, itp.)
Gdy masz już gotowe dwie strony, musisz zidentyfikować swoją publiczność i skierować ją na te strony (kierując 50% odwiedzających na stronę A, a drugie 50% na stronę B). Następnie mierzysz ile instalacji generuje każda wersja, aby wyłonić zwycięzcę. Najprostszym sposobem na zrobienie tego wszystkiego jest przeprowadzenie split testu z SplitMetrics. To pozwala szybko tworzyć strony warianty, które replikują App Storу lub Google Play i kierować ruch do nich z witryny / aplikacji, reklamy Facebook lub innych sieci reklamowych SplitMetrics zbiera wszystkie dane analityczne, mówi, który wariant wygrał i daje kompleksowy raport na temat interakcji użytkowników z Twojej strony aplikacji.
Upewnij się, że masz wystarczająco dużo użytkowników, aby osiągnąć znaczące wyniki; to nie jest mądre, aby dokonać poważnych zmian w aplikacji w oparciu o wyniki małej liczby użytkowników. Po napędzeniu wystarczającej liczby odwiedzających do eksperymentu, jego wyniki są uważane za mające wysoki poziom zaufania lub innymi słowy, szansa na pokonanie kontroli dla twojej wariacji jest albo wysoka albo niska.
Analiza danych i przegląd wyników
Tutaj jest część zabawy: określenie zwycięzcy! Istnieje wiele czynników do rozważenia, w tym: czas na stronie, interakcji z różnych elementów strony aplikacji (zrzuty ekranu, opisy, itp.), głębokość przewijania i więcej. Ale ostatecznie powinieneś patrzeć na to, ile osób stuka przycisk „Zainstaluj”, ponieważ jest to twój główny cel.
Pamiętaj, jeśli znajdziesz niewielką lub żadną różnicę, zawsze możesz zmienić swoje warianty i przeprowadzić nowy test.
Wprowadź zmiany w oparciu o wyniki
Jeśli masz wyraźnego zwycięzcę, idź naprzód i zacznij wprowadzać zmiany w oparciu o wyniki, które wygenerowałeś. W przypadku testowania ikony aplikacji, teraz zaktualizujesz projekt, aby odzwierciedlić zwycięzcę testu A/B. Jeśli wyższa cena przynosi więcej przychodów, to można rozważyć aktualizację cen.
Prepare for Follow-Up Tests
A/B testowanie nie istnieje w próżni, i to prawie nigdy nie jest jeden i zrobić deal. Optymalizacja konwersji to ciągły proces, który nie ma końca. Zawsze przeprowadzaj eksperymenty, aby określić, jak możesz jeszcze bardziej poprawić swoje wskaźniki konwersji i zwiększyć swoją dolną linię.
Wielkie korzyści dla programistów mobilnych
Obecnie, sklepy z aplikacjami albo nie posiadają środków do testowania A/B (jak Apple App Store) lub oferują ograniczoną funkcjonalność (jak w przypadku Eksperymentów Google Play), pomimo faktu, że ta strategia jest najważniejsza dla identyfikacji tego, co naprawdę zwiększa sprzedaż (a co jest stratą czasu i pieniędzy).
Więc, musisz użyć rozwiązania zaprojektowanego z myślą o programistach mobilnych. SplitMetrics sprawia, że przeprowadzanie testów A/B i dowiadywanie się, co naprawdę działa, jest łatwe.
Korzyści dla programistów mobilnych są prawie nieskończone, ale niektóre z najważniejszych obejmują:
- Wyższe współczynniki konwersji
- Analiza metryk zaangażowania
- Podejmowanie decyzji na podstawie danych i statystyk
- Możliwość przeglądania doświadczeń w sklepie z aplikacjami z punktu widzenia użytkownika
- Lepsze wykorzystanie zasobów
- Wgląd w zachowania klientów
- Osiąganie większych celów biznesowych
Podsumowanie: Testowanie A/B jest doskonałym narzędziem, ponieważ pozwala wszystkim deweloperom zidentyfikować przestrzeń do rozwoju w stronach docelowych ich aplikacji, dokonać znaczących ulepszeń w oparciu o wyniki i oczywiście zrozumieć zachowanie użytkowników. Spostrzeżenia są tam do wzięcia i sprawiają, że określenie tego, co jest właściwe dla Twojej aplikacji, to pestka.