O que é teste A/B?
Teste A/B (muitas vezes referido como teste dividido ou teste de balde) é um meio de comparar duas opções e analisar os resultados. Ele pode ser usado para testar, comparar e analisar praticamente qualquer coisa. É mais frequentemente associado a websites e, recentemente, a aplicativos móveis; o teste A/B é usado principalmente para a otimização da taxa de conversão. Empresas online otimizam regularmente suas páginas de destino e melhoram o ROI através da ajuda dos testes A/B.
Como funcionam os testes A/B
Todos os testes começam com a formação da hipótese. O exemplo clássico disto pode ser ‘Sign Up’ vs. links ‘Register’ ou botões ‘Red’ vs. ‘Green’. Uma vez que o objetivo (por exemplo, instalação) e opções para o teste são determinados, o testador começa a conduzir os usuários para as páginas. Todo o tráfego de usuários é distribuído aleatoriamente entre a versão de controle e as outras variações. Os visitantes não devem estar cientes de sua participação no experimento. Se uma variante tem um desempenho significativamente melhor que as outras, pode ser considerada como vencedora e deve ser aplicada.
Você verá que está sendo usada para comparar elementos menores, como estilos de botões de chamada para ação e componentes maiores, assim como o design geral do site. No entanto, os testes A/B funcionam igualmente bem, se não melhor, para aplicações móveis. Muitas vezes negligenciada pelos desenvolvedores móveis, esta ferramenta pode ser usada para determinar a eficácia de ícones, capturas de tela, descrições, armazenar resultados de pesquisa, direções, preços, manchetes e muito mais.
Este excelente método, baseado em dados, para testar estratégias de marketing é tipicamente implementado ao longo de um período de alguns dias a algumas semanas. Também é importante garantir que haja usuários suficientes para gerar resultados precisos.
Pronto para iniciar os testes A/B?
Como executar um teste A/B
Seguir a estratégia delineada abaixo para iniciar o teste A/B:
Executar pesquisa
Determinar seu objetivo. O que quer que você esteja testando deve levar a um objetivo maior, como taxas de conversão mais altas. O ideal é que os testes A/B o ajudem a resolver um problema com o seu aplicativo e levem os seus objetivos comerciais ao sucesso.
Determine Your Variants
O que é que você quer comparar? Identifique um problema que você gostaria de resolver. Pode ser um elemento de design, cópia ou função.
E.g. O que é mais importante para os seus utilizadores: envio grátis ou $15 de desconto na primeira encomenda? Que orientação de captura de tela irá gerar mais instalações para um aplicativo de jogo: retrato ou paisagem? Que estilo de ícone de aplicativo é mais chamativo: multicolorido ou monocromático? Você pode facilmente descobrir com um teste A/B.
Executar o Teste
Após ter formulado sua teoria e identificado o elemento que você quer testar A/B, você precisa criar duas variações da página de destino. (Vamos chamá-las de A e B.) Elas devem ser exatamente as mesmas, a única diferença é o elemento que você quer testar (ícone, captura de tela, descrição, etc.)
Após ter as duas páginas prontas, você precisa identificar sua audiência e levá-las a essas páginas (direcionando 50% dos visitantes para a página A e os outros 50% para a página B). Você então mede quantas instalações cada versão gera para determinar o vencedor. A maneira mais fácil de fazer tudo o que está acima é fazer um teste dividido com o SplitMetrics. Ele permite criar rapidamente páginas de variações que replicam o aplicativo Storу ou Google Play e direcionar o tráfego para eles a partir do seu site/apps, anúncios do Facebook ou outras redes de anúncios. O SplitMetrics coleta todos os dados analíticos, informa qual variação ganhou e lhe dá um relatório abrangente sobre como os usuários interagiram com sua página do aplicativo.
Certifique-se de ter usuários suficientes para alcançar resultados significativos; não é prudente fazer grandes mudanças no seu aplicativo com base nos resultados de um pequeno número de usuários. Uma vez que você tenha conduzido visitantes suficientes à sua experiência, seus resultados são considerados como tendo um alto nível de confiança ou, em outras palavras, a chance de vencer o controle para a sua variação é alta ou baixa.
Analizar Dados e Rever Resultados
Aqui está a parte divertida: determinar o vencedor! Há uma série de fatores a considerar incluindo: tempo na página, interações com diferentes elementos da página do seu aplicativo (screenshots, descrições, etc.), profundidade de rolagem e muito mais. Mas, em última análise, você deve estar olhando para quantas pessoas tocam o botão ‘Instalar’, pois este é o seu objetivo principal.
Lembrar, se você encontrar pouca ou nenhuma diferença, você sempre pode mudar suas variantes e executar um novo teste.
Fazer mudanças com base nos resultados
Se você tiver um corte claro vencedor, vá em frente e comece a fazer mudanças com base nos resultados que você gerou. No caso de testar o ícone do aplicativo, você agora atualizaria o design para refletir o vencedor do seu teste A/B. Se um preço mais alto render mais receita, então você pode considerar atualizar seu preço.
Prepare for Follow-Up Tests
A/B testing does not exist in a vacuum, and it’s hardly ever a one and done deal. A otimização da conversão é um processo contínuo e sem fim. Sempre execute experimentos para determinar como você pode melhorar ainda mais suas taxas de conversão e aumentar seus resultados.
Os Grandes Benefícios para Desenvolvedores de Celulares
Atualmente, as lojas de aplicativos ou não possuem um meio de teste A/B (como a Apple App Store) ou oferecem funcionalidade limitada (como com os Experimentos do Google Play), apesar de esta estratégia ser fundamental para identificar o que realmente aumenta suas vendas (e o que é um desperdício de tempo e dinheiro).
Então, você precisará usar uma solução projetada com os desenvolvedores de celulares em mente. SplitMetrics torna mais fácil executar testes A/B e descobrir o que realmente está funcionando.
Os benefícios para desenvolvedores móveis são quase infinitos, mas alguns dos destaques incluem:
>
- Áreas de conversão mais elevadas
- Análise de métricas de compromisso
- Decisão baseada em dados e estatísticas
- Possibilidade de visualizar a experiência da loja de aplicativos do ponto de vista do usuário
- Melhor uso de recursos
- Informações sobre o comportamento do cliente
- Aquisição de maiores objetivos comerciais
Bottom line: Os testes A/B são a ferramenta perfeita, pois permitem a todos os desenvolvedores identificar espaço para crescimento nas páginas de destino de seus aplicativos, fazer melhorias significativas com base nos resultados e, é claro, entender o comportamento de seus usuários. As percepções estão lá para a tomada e fazer determinar o que é certo para o seu aplicativo uma brisa.