Teste A/B: qual versão da mensagem funciona melhor

#Montar o teste

1. 1

   Adicione o bloco

   No editor, em modo Editar, abra a aba Lógica da barra de blocos e escolha Teste A/B. No desenho, o bloco aparece como Randomizador.

2. 2

   Defina as saídas

   No painel, em Saídas do Randomizador, o bloco começa com Saída A e Saída B, 50% cada. Dê um nome a cada uma, ajuste as porcentagens (a soma precisa dar exatamente 100%), use Adicionar Saída para mais braços ou Distribuir Igual para dividir por igual.

3. 3

   Ligue cada saída a uma versão

   Ligue cada saída a um bloco de mensagem ou template diferente. Mude só uma coisa entre as versões (o texto, a imagem ou o botão) para saber o que fez a diferença.

4. 4

   Marque o objetivo (opcional)

   Coloque um bloco Objetivo/Conversão onde o contato chega quando dá certo (por exemplo, depois de clicar no link do grupo). O teste mostra quantos de cada braço chegaram lá.

5. 5

   Salve e ative

   Clique em Salvar e deixe o fluxo Ativo. Cada contato que passa pelo bloco é sorteado para um braço.

#Ler o resultado

Clique no bloco Teste A/B e abra a aba Métricas.

#O veredito

• Vencedor e o nome do braço, quando a diferença é estatisticamente significativa. Ou Sem vencedor ainda, com o melhor braço até agora e a amostra de cada um.
• Uma linha para cada Objetivo/Conversão do fluxo, dizendo se algum braço vence nele.
• Embaixo, o que está sendo comparado: toque em qualquer botão, sobre os entregues.

O teste usa 95% de confiança. Com dois braços, compara as duas proporções; com três ou mais, só declara vencedor quando o melhor bate todos os outros. Enquanto a amostra for pequena, não há vencedor.

#Cada braço

• N sorteados · N entregues · N lidos · N falhas.
• Tocaram em algum botão e o número de cada botão.
• Resposta de pessoa, Resposta automática e Pediu pra sair.
• Clicaram no link.
• Resultados: os objetivos atingidos e as tags que o braço conquistou.

Os selos Vencedor e Melhor até agora marcam o braço da frente. Clique em qualquer número para ver quem são os contatos e abrir a conversa.

#Como as respostas são separadas

Assim uma resposta automática não infla o braço como se fosse interesse.

#Período

Os sorteios contados vão do início do período escolhido no topo do editor até agora (sem período, 30 dias). Respostas, cliques, objetivos e tags contam até 7 dias depois de cada sorteio. Se o mesmo contato entrou mais de uma vez e caiu em braços diferentes, ele conta nos dois, e o painel avisa.

#Perguntas frequentes