勝者バリアントまたはパーソナライズされたバリアントによるABテストの最適化
多変量テストやABテストを作成する際に、勝者バリアントやパーソナライズされたバリアントを使用する方法について説明します。
1回送信するようにスケジュールされたメール、プッシュ、Webhook、SMS、WhatsApp CampaignsでABテストを作成する際に、最適化を選択できます。最適化には2つのオプションがあります。勝者バリアントとパーソナライズされたバリアントです。
どちらのオプションも、ターゲットSegmentの一定の割合に初期テストを送信することで機能します。テスト終了後、オーディエンスの残りのユーザーには、最もパフォーマンスの高いバリアント（勝者バリアント）またはエンゲージメントの可能性が最も高いバリアント（パーソナライズされたバリアント）のいずれかが送信されます。
最適化は、Campaign作成のターゲットオーディエンスステップのABテストにあります。
勝者バリアント
勝者バリアントの送信は、標準的なABテストと似ています。このグループのユーザーは、初期テストが完了すると勝者バリアントを受け取ります。
- 勝者バリアントを選択し、Campaignオーディエンスの何パーセントを勝者バリアントグループに割り当てるかを指定します。
- 以下の追加設定を行います。
| フィールド | 説明 |
|---|---|
| 勝者バリアントを判別 | 最適化する指標です。メールの場合はユニーク開封数またはクリック数、プッシュの場合は開封数、すべてのチャネルの場合は1次コンバージョン率のいずれかを選択します。開封数またはクリック数を選択して勝者を決定しても、Campaignのコンバージョンイベントの選択には影響しません。 コントロールグループを使用している場合、コントロールグループのユーザーは開封やクリックを実行できないため、コントロールグループのパフォーマンスは 0 であることが保証されます。その結果、コントロールグループはABテストに勝つことができません。ただし、コントロールグループを使用して、メッセージを受信しないユーザーの他の指標を追跡することもできます。 |
| 勝者バリアントの送信時間 | 勝者バリアントが送信される日時です。 |
| 勝者バリアントを決定できない場合 | 統計的に有意な差でどのバリアントも勝てない場合の動作です。最もパフォーマンスの高いバリアントをそのまま送信するか、テストを終了してそれ以上のメッセージを送信しないかを選択します。 |
パーソナライズされたバリアント
パーソナライズされたバリアントを使用すると、ターゲットSegmentの各ユーザーに、最もエンゲージする可能性の高いバリアントを送信できます。
各ユーザーに最適なバリアントを決定するために、Brazeはまずターゲットオーディエンスの一部に初期テストを送信し、ユーザー特性とメッセージの好みの間の関連性を調べます。初期テストで各バリアントに対するユーザーの反応に基づいて、これらの特性を使用して残りのユーザーがどのバリアントを受け取るかを決定します。関連性が見つからずパーソナライゼーションができない場合は、勝者バリアントが自動的に残りのユーザーに送信されます。パーソナライズされたバリアントの決定方法の詳細については、多変量テストとABテストの分析を参照してください。
- パーソナライズされたバリアントを選択し、Campaignオーディエンスの何パーセントをパーソナライズされたバリアントグループに割り当てるかを指定します。
- 以下の追加設定を行います。
| フィールド | 説明 |
|---|---|
| パーソナライズされたバリアントを判別 | 最適化する指標です。メールの場合はユニーク開封数またはクリック数、プッシュの場合は開封数、すべてのチャネルの場合は1次コンバージョン率のいずれかを選択します。開封数またはクリック数を選択して勝者を決定しても、Campaignのコンバージョンイベントの選択には影響しません。 コントロールグループを使用している場合、コントロールグループのユーザーは開封やクリックを実行できないため、コントロールグループのパフォーマンスは 0 であることが保証されます。その結果、コントロールグループはABテストに勝つことができません。ただし、コントロールグループを使用して、メッセージを受信しないユーザーの他の指標を追跡することもできます。 |
| パーソナライズされたバリアントの送信時間 | パーソナライズされたバリアントが送信される日時です。 |
| パーソナライズされたバリアントを決定できない場合 | パーソナライズされたバリアントが見つからない場合の動作です。代わりに勝者バリアントを送信するか、テストを終了してそれ以上のメッセージを送信しないかを選択します。 |
分析
最適化を使用したABテストの結果については、多変量テストとABテストの分析を参照してください。