ToolCabana

Calculadora de teste A/B

Compara duas proporções com incerteza e suposições de teste declaradas.

Favorites are saved in this browser. Find them in My favorites.

Calculadora de teste A/B

Your input stays in this browser unless stated otherwise
Clear your input, files and result, and restore the default settings.
=

Make it yours

Adjust the values, then get your result.

Como usar Calculadora de teste A/B

The A/B test calculator compares two conversion rates from visitor and conversion counts and returns each rate, the difference in percentage points, a confidence interval for that difference and a two-sided p-value. It uses a fixed-horizon pooled two-proportion z test and a Wald interval at a confidence level from 50 to 99.99%.

  1. Digite os valores solicitados no painel de configurações.
  2. Ajuste a configuração básica e abra o modo avançado para opções de exportação e ajuste fino. A configuração personalizada continua ativa ao fechar o painel.
  3. Execute a calculadora de teste A/B, revise a saída e use os controles disponíveis para copiar ou baixar.

O que esta ferramenta suporta

Compara duas proporções com incerteza e suposições de teste declaradas.

Visitantes A
Range: 1 to 100000000
Conversões A
Range: 0 to 100000000
Visitantes B
Range: 1 to 100000000
Conversões B
Range: 0 to 100000000
Confiança (%)
Range: 50 to 99.99

Limites e processamento

Cálculos locais limitados. As entradas numéricas devem ser finitas e estar dentro dos intervalos visíveis. Listas e tabelas têm limites próprios de cada operação. Modelos, estimativas e taxas fornecidas devem ser verificados conforme seu uso pretendido.

Perguntas frequentes

How is the p-value calculated in this A/B test?

The calculator pools both groups to get a combined conversion rate, computes the standard error sqrt(p(1 − p)(1/nA + 1/nB)), and divides the difference in rates by it to get z. The two-sided p-value is 2 × (1 − Φ(|z|)).

What does the confidence interval for the difference mean?

It is a Wald interval for B's rate minus A's rate, in percentage points, using the unpooled standard error. An interval that excludes 0 points to a real difference at that level, though near the boundary it can disagree slightly with the pooled p-value.

When can A/B test results from this calculator be misleading?

The approximation can break down with small conversion counts, when you check results repeatedly and stop early, or when the same visitor appears in both groups. Decide the sample size in advance and read the result once the test ends. Conversions cannot exceed visitors.

Onde minha entrada é processada?

Esta operação processa sua fonte no seu navegador. Copiar e baixar são ações explícitas; a entrada de origem não é salva em conta nem em histórico.

Quais são os limites de entrada?

Cálculos locais limitados. As entradas numéricas devem ser finitas e estar dentro dos intervalos visíveis. Listas e tabelas têm limites próprios de cada operação. Modelos, estimativas e taxas fornecidas devem ser verificados conforme seu uso pretendido.