Aby zwiększyć istotność swoich testów AB, musisz zrobić jedną z trzech rzeczy:
- Zwiększyć wielkość próby
- Stworzyć większe Uplift
- Produkować bardziej spójne dane (z mniejszą wariancją)
W kategoriach praktycznych oznacza to, że jest kilka rzeczy, które możesz zrobić…
Praktyczne kroki do zwiększenia wielkości próby
1) Przeprowadzaj swoje testy dłużej, ryzykując szansę, że Twoje dane zostaną zanieczyszczone. Większość przeglądarek usuwa ciasteczka w ciągu jednego miesiąca (niektóre usuwają je po dwóch tygodniach). Ponieważ narzędzia do testowania AB używają ciasteczek do sortowania odwiedzających do grupy A i grupy B, długie testy prowadzą do ryzyka próbkowania krzyżowego.
2) Skieruj więcej ruchu na strony testowe. Możesz to zrobić poprzez włączenie linku ze strony głównej, używając testu jako strony docelowej lub poprzez dostosowanie kolejności stron. Niestety, to również niesie ze sobą ryzyko stworzenia uprzedzenia, ponieważ Twój ruch będzie składał się z różnych rodzajów ludzi (wyszukujących rzeczy).
Praktyczne kroki do stworzenia większego uplift
1) Spróbuj bardziej znaczącego zróżnicowania. Kolory przycisków, teksty CTA i tytuły mogą mieć duży wpływ, ale tylko w niektórych przypadkach. Innym razem, aby wywołać efekt, potrzebne są bardziej znaczące zmiany. Twoje wariacje najprawdopodobniej stworzą Uplift, jeśli będą komunikować Twoją ofertę lub wartość w nowy sposób.
2) Jedną z najbardziej udanych wariacji do wypróbowania jest wersja Twojej strony z zainstalowanymi powiadomieniami perswazyjnymi. Przyciągają one uwagę odwiedzających i mogą być wykorzystane do stworzenia efektów psychologicznych, takich jak Dowód Społeczny, FOMO i Pilność.
3) Innym sposobem na stworzenie Podniesienia jest zmniejszenie tarcia na Twojej stronie. Możesz to zrobić poprzez usunięcie liczby pól w formularzu, dodanie pomocnego tekstu lub wskazówek wizualnych, lub za pomocą powiadomień Friction.
Jak stworzyć bardziej spójne dane
Poszczególne daty mogą mieć nieprzewidywalny wpływ na Twój współczynnik konwersji. Jeśli połączysz wydarzenie takie jak Czarny Piątek z Wielorękim Bandytą, Twoje testy mogą przynieść zwiększoną wariancję. Spróbuj uruchomić swój test w określone dni, lub określone daty, aby wykluczyć anomalie.