Controlo (A)
12.00%
Variante (B)
14.00%
No significativo
Melhoria relativa +16.67%
Z-score1.33
p-value0.1836
Amostra requerida (80% de poder)47 048 visitantes/variante
Guia de utilização
O que é um teste A/B
Compara duas versões (controlo A e variante B) através de um Z-test de duas proporções para saber se a diferença na taxa de conversão é estatisticamente significativa ou apenas fruto do acaso.
Como usá-lo
Introduz para cada grupo as conversões (sucessos) e os visitantes totais. O resultado é recalculado automaticamente enquanto escreves; as conversões não podem exceder os visitantes.
Interpretar o resultado
A melhoria relativa indica quanto B sobe ou desce face a A. O p-value mede a probabilidade de a diferença ser casual: abaixo de 0,05 é 95% significativo e abaixo de 0,01, 99%. Só então se declara um vencedor.
Amostra necessária
Estima os visitantes por variante necessários para detetar uma melhoria de 5% com 80% de potência. Se a tua amostra for menor, o teste ainda não é conclusivo mesmo que vejas diferenças.
