Tarefa

Sua empresa deseja aumentar a conversão de vendas no site testando diferentes opções de design de página.

Passo 1

Qual métrica é melhor escolher?

Se o objetivo do teste A/B é aumentar a conversão de vendas no site, então a métrica que deve ser escolhida é a taxa de conversão. A taxa de conversão reflete a proporção do número de usuários que realizaram uma certa ação alvo (por exemplo, efetuaram uma compra) pelo número total de visitantes do site.

Frequência média de compra por clique:

Portanto, se estamos testando diferentes opções de design de página e ofertas com o objetivo de aumentar as conversões de vendas, devemos escolher a taxa de conversão como a principal métrica para avaliar os resultados do teste.

Passo 2

Para a métrica de taxa de conversão, é melhor escolher amostras que reflitam o fluxo real de usuários. Por exemplo, se a métrica for conversão de compras, então a amostra deve conter visitantes do site que tenham potencial para realizar uma compra. É importante que as amostras sejam representadas por um número suficientemente grande de usuários para garantir a validade estatística dos resultados do teste. Além disso, vale considerar que as amostras devem ser iguais em tamanho e natureza para evitar distorção nos resultados do teste.

Passo 3

O design do botão de compra do produto será alterado para o grupo experimental. Para o grupo de controle, o design permanecerá inalterado.

Passo 4

Testamos ambos os botões e registramos os resultados em duas tabelas no formato csv. Vamos olhá-las:

Agora precisamos adicionar nossa métrica.

Passo 5

E sobre testes A/B?

Até agora, infelizmente, não podemos ter certeza de que os resultados do experimento são representativos. Como nos assegurar disso?

Precisamos realizar testes A/A.