Skip to content

実験パスの勝者パス

勝者パスはキャンペーンの勝者バリアントと同様の機能で、A/Bテストを自動化できます。

実験パスステップで勝者パスを有効にすると、指定した期間の経過後、以降のすべてのユーザーはコンバージョン率が最も高いパスに送られます。

勝者パスの使用

ステップ1: 実験パスステップを追加する

キャンバスに実験パスを追加し、勝者パスをオンにします。

「後続のユーザーを勝者パスに配信する」というタイトルの実験パスの設定。このセクションには勝者パスのトグルと、コンバージョンイベントおよび実験ウィンドウの設定オプションが含まれています。

ステップ2: 勝者パスの設定を構成する

勝者を決定するコンバージョンイベントを指定します。利用可能なコンバージョンイベントがない場合は、キャンバス設定の最初のステップに戻り、コンバージョンイベントを割り当ててください。

コンバージョンイベントとして開封またはクリックを選択する場合は、パスの最初のステップがメッセージステップであることを確認してください。Brazeは各パスの最初のメッセージステップからのエンゲージメントのみをカウントします。パスが別のステップ(遅延ステップやオーディエンスパスステップなど)で始まり、メッセージが後で来る場合、そのメッセージはパフォーマンス評価時に含まれません。

次に、実験ウィンドウを設定します。実験ウィンドウは、勝者パスが決定され、それ以降のすべてのユーザーがそのパスに送られるまでの実験の実行期間を指定します。ウィンドウは最初のユーザーがステップに入った時点で開始されます。

コンバージョンイベント「クリック」が選択され、12時間の実験ウィンドウが設定された勝者パスの設定。

ステップ3: フォールバックを決定する

デフォルトでは、テスト結果が統計的に有意な勝者を決定するのに十分でない場合、将来のすべてのユーザーは最もパフォーマンスの高いパスに送られます。代わりに、今後のすべてのユーザーにパスの組み合わせを送信し続けるを選択することもできます。このオプションでは、実験パスの配分で指定されたパーセンテージに従って、将来のユーザーにパスの組み合わせが送信されます。

同点の場合、Brazeは最初に表示されるパスを選択します。

テスト結果が統計的に有意でない場合のユーザーの処理として「今後のすべてのユーザーにパスの組み合わせを送信し続ける」が選択されている画面。

ステップ4: パスを追加してキャンバスを起動する

1つの実験パスコンポーネントには最大4つのパスを含めることができます。ただし、キャンバスが1回限りのエントリに設定されている場合、1つのパスは勝者パスがオンになった際にBrazeが自動的に追加する遅延グループ用に予約する必要があります。つまり、1回限りのエントリのキャンバスでは、実験に最大3つのパスを追加できます。

必要に応じてキャンバスの設定を完了し、起動します。最初のユーザーが実験に入ったら、キャンバスをチェックして分析データの推移を確認し、実験のパフォーマンスをトラッキングできます。

勝者パスが確定した後、キャンバスに入るすべての後続ユーザーは勝者パスに進みます。これには、再エントリして以前は実験パスステップのコントロールグループにいたユーザーも含まれます。

分析

勝者パスが有効になっている場合、分析ビューは初期実験勝者パスの2つのタブに分かれます。

  • 初期実験: 実験時間枠中の各パスの指標、勝者として選択されたパス、およびキャンバスのコンバージョン指標を表示します。勝者パスの設定で構成された勝者を選択するために使用されるコンバージョンイベントは、キャンバスの分析でハイライトされるコンバージョン指標と同じでない場合があります。実験パスの分析がキャンバスのコンバージョンイベントおよび勝者指標とどのように関連するかの詳細については、実験パスを参照してください。
  • 勝者パス: 初期実験が終了した時点からの勝者パスの指標のみを表示します。

知っておくべきこと

1回限りのエントリ

ユーザーが1回だけエントリできるキャンバスで勝者パスを使用する場合、遅延グループが自動的に含まれます。実験期間中、一定の割合のユーザーが遅延グループに保持され、残りのユーザーは実験パスにエントリします。

勝者パス用の遅延グループを含む実験ステップ

テストが終了し勝者パスが決定されると、遅延グループに割り当てられたユーザーは選択されたパスに誘導され、キャンバスを続行します。

遅延グループが勝者パスに送られた実験ステップ

ローカルタイム配信

勝者パスを使用するキャンバスでは、ローカルタイム配信の使用は推奨されません。これは、最初のユーザーが通過した時点で実験ウィンドウが開始されるためです。非常に早いタイムゾーンにいるユーザーがステップにエントリして実験ウィンドウの開始をトリガーすることで、予想よりもはるかに早く実験が開始される可能性があります。その結果、より一般的なタイムゾーンにいる大多数のユーザーがキャンバスにエントリしたりコンバージョンしたりするのに十分な時間がないまま実験が終了してしまうことがあります。

代替手段として、ローカル配信を使用したい場合は、24〜48時間以上の実験ウィンドウを使用してください。そうすることで、早いタイムゾーンのユーザーがキャンバスにエントリして実験の開始をトリガーしても、実験ウィンドウには十分な時間が残ります。遅いタイムゾーンのユーザーも、実験ウィンドウが終了する前にキャンバスや勝者パスを含む実験ステップにエントリし、コンバージョンするのに十分な時間があります。

クリックに基づくバリアント

クリックに基づく勝者パスバリアントを設定する場合、開封とクリックの定義はチャネルによって異なることに注意してください。チャネル別の具体的な指標と定義については、レポート指標用語集およびメールレポート指標用語集を参照してください。

New Stuff!