Sélection intelligente
La sélection intelligente est une fonctionnalité qui analyse deux fois par jour les performances d’une Campaign ou d’un Canvas récurrent et ajuste automatiquement le pourcentage d’utilisateurs qui reçoivent chaque variante de message.
Conditions préalables
Avant d’ajouter la sélection intelligente à votre Campaign, assurez-vous d’avoir correctement configuré les éléments suivants :
- Votre Campaign est envoyée selon une planification récurrente. Les Campaigns à envoi unique ne sont pas prises en charge.
- Vous avez ajouté au moins deux variantes de message.
- Vous avez défini un événement de conversion pour mesurer les performances des variantes.
- La fenêtre de rééligibilité est fixée à 24 heures ou plus. Les fenêtres plus courtes ne sont pas prises en charge, car elles affecteraient l’intégrité de la variante de contrôle. Pour en savoir plus, consultez cette FAQ.
Pour utiliser la sélection intelligente dans un Canvas, confirmez les points suivants :
- Votre Canvas comprend au moins deux variantes de message dans une étape de message.
- Vous avez ajouté au moins un événement de conversion.
À propos de la sélection intelligente
Une variante qui semble être plus performante que les autres sera envoyée à un plus grand nombre d’utilisateurs, tandis que les variantes moins performantes cibleront moins d’utilisateurs. Chaque ajustement est effectué à l’aide d’un algorithme statistique qui garantit que Braze s’adapte à de réelles différences de performances et pas seulement au hasard.
La sélection intelligente va :
- Examiner à plusieurs reprises les données de performance et déplacer progressivement le trafic de la Campaign vers les variantes gagnantes.
- Vérifier que davantage d’utilisateurs reçoivent votre variante la plus performante sans sacrifier la confiance statistique.
- Exclure les variantes moins performantes et identifier les variantes très performantes plus rapidement qu’un test A/B traditionnel.
- Tester plus fréquemment et avec une plus grande confiance que vos utilisateurs verront votre meilleur message.
La sélection intelligente fonctionne mieux pour les Campaigns envoyées plusieurs fois. Elle a besoin de données de performance précoces pour commencer à optimiser, de sorte que les Campaigns à envoi unique n’en bénéficieront pas. Pour ces Campaigns, nous vous recommandons plutôt d’utiliser un test A/B traditionnel.
Vous pouvez ajouter la sélection intelligente à vos Campaigns et à vos Canvas.
La sélection intelligente peut être ajoutée à n’importe quelle Campaign multi-envoi dans l’étape Target Audiences du compositeur de Campaign de Braze. Les Campaigns qui n’envoient qu’une seule fois ne peuvent pas bénéficier de cette fonctionnalité.
La sélection intelligente ne peut pas être utilisée dans les Campaigns dont la période de rééligibilité est inférieure à 24 heures, car elle affecterait l’intégrité de la variante de contrôle. Pour en savoir plus, consultez la FAQ sur l’intelligence.
Ajoutez au moins un événement de conversion et deux variantes à votre Canvas. Ensuite, sélectionnez l’un des pourcentages de variante dans l’étape de création.
Vous pouvez ainsi modifier la répartition des variantes et activer la sélection intelligente.
La sélection intelligente ne sera pas disponible si vous n’avez pas encore ajouté d’événements de conversion à votre Canvas ou si votre Campaign est composée d’une seule variante.
Durée d’exécution
Pour les Campaigns et les Canvas, la sélection intelligente s’exécutera jusqu’à ce qu’elle rassemble suffisamment de preuves des taux de conversion « réels » des variantes. Le niveau « suffisant » est déterminé par un indicateur spécial appelé « regret ». Vous pouvez l’assimiler à la confiance, dans la mesure où la sélection intelligente se désactive lorsqu’il y a suffisamment de données pour savoir quelle variante est la meilleure.
Dans la plupart des cas, la sélection intelligente choisira l’une des variantes comme variante gagnante. Cette variante sera envoyée à 100 % de l’audience pour les envois futurs.
Il est possible que la sélection intelligente cesse d’optimiser sans avoir choisi un seul gagnant clair. La sélection intelligente cesse d’optimiser lorsqu’elle est sûre à 95 % que la poursuite de l’expérience n’améliorera pas le taux de conversion de plus de 1 % par rapport au taux actuel.
Distribution des variantes avec la sélection intelligente
La sélection intelligente fonde la distribution des variantes sur l’état actuel des conversions de la Campaign. Elle détermine uniquement les distributions finales après la période de formation.
Cela signifie qu’au début de la Campaign, les sélections intelligentes à 99 % et à 1 % peuvent recevoir environ le même nombre d’envois, mais que les pourcentages finaux pour l’attribution des variantes peuvent être fixés à 99 %–1 %.
Si vous ne souhaitez pas que la sélection intelligente envoie à parts égales au début de la Campaign, nous vous recommandons d’utiliser un test A/B traditionnel avec des variantes fixes.
Questions fréquentes
Pourquoi la rééligibilité dans moins de 24 heures n’est-elle pas disponible lorsqu’elle est associée à la sélection intelligente ?
Nous ne permettons pas aux Campaigns avec sélection intelligente d’avoir une rééligibilité dans une fenêtre trop courte, car cela affecterait l’intégrité de la variante de contrôle. En créant un intervalle de 24 heures, nous contribuons à garantir que l’algorithme disposera d’un ensemble de données statistiquement valide.
Normalement, les Campaigns avec rééligibilité amèneront les utilisateurs à recevoir de nouveau la même variante qu’auparavant. Avec la sélection intelligente, Braze ne peut pas garantir qu’un utilisateur recevra la même variante de Campaign, car la distribution des variantes aurait changé en raison de l’aspect d’allocation optimale de cette fonctionnalité. Si l’utilisateur était autorisé à entrer de nouveau avant que la sélection intelligente ne réexamine les performances de la variante, les données pourraient être biaisées en raison des utilisateurs réentrés.
Par exemple, si une Campaign utilise ces variantes :
- Variante A : 20 %
- Variante B : 20 %
- Contrôle : 60 %
La distribution des variantes pourrait alors être la suivante au deuxième tour :
- Variante A : 15 %
- Variante B : 25 %
- Contrôle : 60 %
Pourquoi mes variantes de sélection intelligente affichent-elles des envois égaux au début de ma Campaign ?
La sélection intelligente alloue les variantes à envoyer en fonction de l’état actuel des conversions de la Campaign. Elle détermine uniquement les attributions de variantes finales après une période de formation durant laquelle les envois sont répartis de manière uniforme entre les variantes. Si vous ne souhaitez pas que la sélection intelligente envoie de manière uniforme au début de votre Campaign, utilisez des variantes fixes pour un test A/B traditionnel.
La sélection intelligente cessera-t-elle d’optimiser sans choisir un gagnant clair ?
La sélection intelligente cessera d’optimiser lorsqu’elle sera sûre à 95 % que la poursuite de l’expérience n’améliorera pas le taux de conversion de plus de 1 % par rapport à son taux actuel.
Pourquoi ne puis-je pas activer la sélection intelligente dans mon Canvas ou ma Campaign (option grisée) ?
La sélection intelligente ne sera pas disponible si :
- Vous n’avez pas ajouté d’événements de conversion à votre Campaign ou Canvas
- Vous créez une Campaign à envoi unique
- Vous avez activé la rééligibilité avec une fenêtre de moins de 24 heures
- Votre Canvas est composé d’une seule variante sans variantes supplémentaires ni groupes de contrôle ajoutés
- Votre Canvas est composé d’un seul groupe de contrôle, sans variantes ajoutées