För att öka signifikansen för dina AB-test måste du göra en av tre saker:
- Öka din provstorlek
- Skapa en större Uplift
- Producera mer konsekventa data (med mindre varians)
Praktiskt sett innebär det att det finns några saker du kan göra…
Praktiska steg för att öka din provstorlek
1) Kör dina tester längre, vilket innebär att du riskerar risken för att dina data blir förorenade. De flesta webbläsare raderar alla cookies inom en månad (vissa raderar dem efter två veckor). Eftersom AB-testverktyg använder cookies för att sortera dina besökare i grupp A och grupp B, riskerar långa tester att leda till korssampling.
2) Rikta mer av din trafik till dina testsidor. Det kan du göra genom att inkludera en länk från hemsidan, använda ditt test som en landningssida eller genom att justera ordningen på dina sidor. Tyvärr riskerar detta också att skapa en bias, eftersom din trafik kommer att bestå av olika typer av människor (som söker saker).
Praktiska steg för att skapa en större upplyftning
1) Prova en mer betydande variation. Knappfärger, CTA-text och titlar kan ha stor inverkan, men bara i vissa fall. Andra gånger behövs mer betydande ändringar för att skapa en effekt. Dina variationer har störst sannolikhet att skapa ett Uplift när de kommunicerar ditt erbjudande eller ditt värde på ett nytt sätt.
2) En av de mest framgångsrika variationerna att prova är en version av din webbsida med övertygande meddelanden installerade. Dessa fångar dina besökares uppmärksamhet och kan användas för att skapa psykologiska effekter som Social Proof, FOMO och Urgency.
3) Ett annat sätt att skapa Uplift är att minska Friction på din sida. Det kan du göra genom att ta bort antalet fält i ett formulär, lägga till hjälpsam text eller visuella ledtrådar, eller med Friction notifications.
Hur man producerar mer konsekventa data
Partikulära datum kan ha en oförutsägbar effekt på din konverteringsgrad. Om du kombinerar en händelse som Black Friday med en flerarmad bandit kan dina tester ge ökad varians. Försök att köra ditt test på specifika dagar eller specifika datum för att utesluta avvikelser.