Práticas recomendadas para teste A/B

Determine uma hipótese para testar

Antes de configurar um teste A/B, determine o que você está tentando testar e como isso pode ajudar a informar sua estratégia de anúncios. Pensar em sua hipótese o ajudará a se concentrar em qual variável para testar e garantirá que você projete e execute um teste A/B "limpo".

Configure grupos de testes com diferenças grandes de variáveis

Ao escolher a variável de teste, recomendamos que a configuração dos dois grupos de testes seja bem diferente. Deve haver diferenças óbvias para garantir que os dois grupos de anúncios não produzam resultados semelhantes para que o sistema possa determinar um grupo de anúncios vencedor.

Defina um orçamento de teste apropriado

O orçamento para seu teste A/B deve produzir resultados suficientes para que você tenha confiança na identificação da melhor estratégia de desempenho. Quando você cria um teste A/B, o sistema demonstrará a potência estimada do teste com base no orçamento definido. Certifique-se de que seu orçamento mostra que a potência estimada do teste é suficiente.

Escolha uma duração adequada para o teste

Recomendamos testar por um período mínimo de sete dias para obter os resultados mais confiáveis. Os testes A/B podem ser executados por no máximo 30 dias. Testes por menos de sete dias podem não ser longos o suficiente para determinar um vencedor, enquanto testes longos podem levar a um déficit no orçamento.

Defina uma audiência ampla

Recomenda-se expandir a audiência para evitar um tamanho de amostra insuficiente durante um teste A/B.

Garanta um alto valor de poder estimado

O valor de poder é a probabilidade de detectar possíveis diferenças em seu grupo de anúncios, o que ajuda a determinar suas chances de encontrar um resultado vencedor. Recomendamos um orçamento que dê a você um valor de poder de, pelo menos, 80%.

Evite fazer alterações no meio do teste

Fazer alterações em seu grupo de anúncios após o início da execução do teste A/B pode afetar os resultados ou fazer com que o grupo de anúncios entre em revisão novamente. Não altere as configurações do teste A/B depois que sua execução tiver iniciado.