Otimizando testes A/B com BrazeAITM
Ative Otimizar com BrazeAITM para otimizar automaticamente uma Campaign com múltiplas variantes. O método de otimização depende de a Campaign ser enviada uma única vez ou várias vezes.
Pré-requisitos
Para usar Otimizar com BrazeAITM, sua Campaign deve incluir pelo menos duas variantes de mensagem.
Para uma Campaign com vários envios, você também deve:
- Definir pelo menos um evento de conversão.
- Definir a janela de reelegibilidade para 24 horas ou mais.
Ativar a otimização
Na etapa Públicos-alvo, acesse Testes A/B e ative Optimize with BrazeAITM.
Campaigns de envio único
Para uma Campaign de envio único, a Braze envia uma parte inicial do público para cada variante. Depois que a duração do experimento terminar, o BrazeAITM seleciona a variante com melhor desempenho e a envia para o público restante.
A Braze aplica as configurações recomendadas quando você ativa a otimização. Para alterar essas configurações, abra Controles avançados:
- Meta de otimização: selecione a métrica que o BrazeAITM usa para comparar variantes. As metas disponíveis dependem do canal.
- Duração do experimento: selecione 4 horas, 24 horas, 72 horas ou insira uma duração personalizada.
- Distribuição de variantes: altere a porcentagem atribuída a cada variante ou grupo de controle.
A duração padrão do experimento é de 4 horas. Se você otimizar para um evento de conversão primária, o padrão é de 24 horas.
Metas de otimização padrão por canal
| Canal | Meta padrão |
|---|---|
| Notificações por push | Opens |
| Unique Clicks | |
| SMS, MMS, RCS e WhatsApp | Clicks |
| Outros canais compatíveis | conversão primária Event - A |
Campaigns com múltiplos envios
Para Campaigns recorrentes, baseadas em ação e disparadas por API que enviam várias vezes, o BrazeAITM otimiza continuamente a distribuição do seu público. Após o prazo inicial de conversão, a Braze analisa o desempenho a cada 12 horas e envia mais usuários para as variantes com melhor desempenho.
A distribuição inicial pode ser uniforme enquanto o BrazeAITM coleta dados de desempenho. A distribuição muda conforme a otimização identifica tendências de desempenho.
Abra Controles avançados para adicionar ou remover um grupo de controle. Um grupo de controle fornece uma linha de base para medir o desempenho da Campaign e não recebe uma mensagem.
Relatórios
Após a conclusão de um experimento de envio único, ou depois que uma campanha de envios múltiplos tiver coletado dados suficientes, a página Campaign Analytics mostra o aumento produzido pela otimização.
Para saber mais, consulte Análise de testes A/B.
Perguntas frequentes
Por que não consigo ativar a otimização com BrazeAITM?
A otimização não está disponível quando:
- A Campaign tem menos de duas variantes ativas.
- Uma Campaign de envio múltiplo não tem eventos de conversão.
- Uma Campaign de envio múltiplo tem uma janela de reelegibilidade inferior a 24 horas.
Por que minhas variantes têm contagens de envio semelhantes no início?
BrazeAITM começa com uma distribuição inicial para coletar dados de desempenho. A distribuição é ajustada ao longo do tempo conforme as tendências de desempenho são identificadas.
Uma Campaign de envio múltiplo pode parar de otimizar sem selecionar uma variante?
Sim. A otimização é interrompida quando BrazeAITM tem 95% de confiança de que continuar o experimento não melhorará a taxa de conversão em mais de 1% da taxa atual.