Otimizar testes A/B com BrazeAI
Ative Otimizar com BrazeAITM para otimizar automaticamente uma Campaign com múltiplas variantes. O método de otimização depende de a Campaign ser enviada uma única vez ou várias vezes.
Pré-requisitos
Para usar Optimize with BrazeAITM, sua Campaign deve incluir pelo menos duas variantes de mensagem.
Para uma Campaign com múltiplos envios, você também deve:
- Definir pelo menos um evento de conversão.
- Definir a janela de reelegibilidade para 24 horas ou mais.
Ativar a otimização
Na etapa Públicos-alvo, acesse A/B Testing e ative Optimize with BrazeAITM.
Campaigns de envio único
Para uma Campaign de envio único, a Braze envia uma porção inicial do público para cada variante. Após o término da duração do experimento, o BrazeAITM seleciona a variante com melhor desempenho e a envia para o público restante.
A Braze aplica configurações recomendadas quando você ativa a otimização. Para alterar essas configurações, abra Advanced controls:
- Optimization Goal: Selecione a métrica que o BrazeAITM usa para comparar variantes. Os objetivos disponíveis dependem do canal.
- Experiment duration: Selecione 4 horas, 24 horas, 72 horas ou insira uma duração personalizada.
- Variant distribution: Altere a porcentagem atribuída a cada variante ou grupo de controle.
A duração padrão do experimento é de 4 horas. Se você otimizar para um evento de conversão primária, o padrão é 24 horas.
Objetivos de otimização padrão por canal
| Canal | Objetivo padrão |
|---|---|
| Notificações por push | Opens |
| Unique Clicks | |
| SMS, MMS, RCS e WhatsApp | Clicks |
| Outros canais compatíveis | Primary Conversion Event - A |
Campaigns com múltiplos envios
Para Campaigns recorrentes, baseadas em ação e disparadas por API que enviam várias vezes, o BrazeAITM otimiza continuamente a distribuição do seu público. Após o prazo inicial de conversão, a Braze analisa o desempenho a cada 12 horas e direciona mais usuários para as variantes com melhor desempenho.
A distribuição inicial pode ser uniforme enquanto o BrazeAITM coleta dados de desempenho. A distribuição muda conforme a otimização identifica tendências de desempenho.
Abra Controles avançados para adicionar ou remover um grupo de controle. Um grupo de controle fornece uma linha de base para medir o desempenho da Campaign e não recebe uma mensagem.
Relatórios
Após a conclusão de um experimento de envio único, ou após uma Campaign de envio múltiplo ter coletado dados suficientes, a página Campaign Analytics exibe o aumento produzido pela otimização.
Para saber mais, consulte Análise de testes A/B.
Perguntas frequentes
Por que não consigo ativar a opção Otimizar com BrazeAITM?
A otimização não está disponível quando:
- A Campaign tem menos de duas variantes ativas.
- Uma Campaign de envio múltiplo não tem eventos de conversão.
- Uma Campaign de envio múltiplo tem uma janela de reelegibilidade inferior a 24 horas.
Por que minhas variantes têm contagens de envio semelhantes no início?
O BrazeAITM começa com uma distribuição inicial para coletar dados de desempenho. A distribuição é ajustada ao longo do tempo à medida que tendências de desempenho são identificadas.
Uma Campaign de envio múltiplo pode parar de otimizar sem selecionar uma variante?
Sim. A otimização é interrompida quando o BrazeAITM tem 95% de confiança de que continuar o experimento não melhorará a taxa de conversão em mais de 1% da taxa atual.