実験パス
実験パスを使用すると、ユーザージャーニーの任意の時点で、複数のキャンバスパスを相互にテストしたり、1 つのコントロールグループに対してテストできます。
これらのコンポーネントを使用して、パスのパフォーマンスを追跡し、キャンバスジャーニーについて情報に基づいた意思決定を行うことができます。
実験パスステップを含めると、作成したさまざまなパス (またはオプションのコントロールグループ) にユーザーがランダムに割り当てられます。選択したパーセンテージに応じてオーディエンスの一部が異なるパスに割り当てられるため、さまざまなメッセージやパスを相互にテストして、どれが最も効果的かを判断できます。
勝者パスを活用して一定期間にわたるパフォーマンスを追跡し、それ以降のユーザーを最高のパフォーマンスが得られるパスに自動的に送ることができます。
ユースケース
実験パスは、配信、ケイデンス、メッセージコピー、チャネルの組み合わせをテストするのに最適です。
- 配信:ユーザーのアクション (アクションパス) に基づいたインテリジェントタイミングを使用し、異なる時間遅延で送信されたメッセージ間の結果を比較します。
- ケイデンス:特定の期間に複数のメッセージングフローをテストします。例えば、次の 2 つの異なるオンボーディングケイデンスをテストできます。
- ケイデンス 1: ユーザーの最初の 2 週間に 2 通のメッセージを送信する
- ケイデンス 2: ユーザーの最初の 2 週間に 3 通のメッセージを送信する
離脱ユーザーをターゲットにする場合、1 週間に奪還メッセージを 2 回送信する場合と、1 回だけ送信する場合の効果をテストできます。
- メッセージコピー:標準の AB テストと同様に、さまざまなメッセージのコピーをテストして、コンバージョン率が高まる文面や言い回しを判断できます。
- チャネルの組み合わせ:メッセージチャネルのさまざまな組み合わせの効果をテストします。例えば、メールだけを使用した場合と、メールとプッシュ配信を組み合わせた場合の影響を比較できます。
実験パスを作成する
実験パスコンポーネントを作成するには、まずキャンバスにステップを追加します。サイドバーからコンポーネントをドラッグ&ドロップするか、ステップの一番下にある プラスのボタンをクリックし、[実験パス] を選択します。
このコンポーネントのデフォルト構成では、パス 1 とパス 2 の 2 つのデフォルトパスがあり、各パスにオーディエンスの 50% が送られます。コンポーネントをクリックして [実験の設定] パネルを展開すると、コンポーネントの設定オプションが表示されます。
ステップ 1: パスの数とオーディエンスの分布を選択する
[パスを追加] をクリックして最大 4 つのパスを追加できます。オプションのコントロールグループを追加するには [コントロールグループを追加] をオンにします。各パスのパーセンテージボックスを使用して、各パスとコントロールグループに送るオーディエンスの割合を指定できます。次に進むには、入力されたパーセンテージの合計が 100% になる必要があります。使用可能なすべてのパス (およびコントロール) を同じパーセンテージにすばやく設定するには、[パスを均等に配布] をクリックします。
また、コントロールグループのユーザーをキャンバスで次に進めるか、コントロールグループの動作のコンバージョントラッキング期間の経過後に退出させるかを選択することもできます。オプションで、このテストパスで何をテストするのかを他の人に伝える説明を追加したり、役に立つ注意事項などの追加情報を含めたりできます。
キャンバスの再適格性が有効になっている場合、キャンバスに入ってランダムに選択されたパスを進んだユーザーは、再適格となりキャンバスに再び入ると、もう一度同じパスを進みます。これにより、実験とその分析の有効性が維持されます。ステップで常にパスの割り当てをランダム化するには、[実験パスのランダムパス] を選択します。このオプションは、勝者パスまたはパーソナライズされたパスを用いる場合は使用できません。
ステップ 2: 勝者パスまたはパーソナライズされたパスを有効にする (オプション)
[勝者パス] または [パーソナライズされたパス] をオンにして、テストを最適化することができます。どちらの方法も、最初にオーディエンスの一部を対象としてパスをテストすることで機能します。実験が終了すると、それ以降の残りのユーザーは、全体的に最もパフォーマンスの高いパス (勝者パス) か、各ユーザーの最もパフォーマンスの高いパス (パーソナライズされたパス) のいずれかに送られます。
パーソナライズされたパスは現在ベータ版です。ベータ版への参加に興味がある場合は、カスタマーサクセスマネージャーにお問い合わせください。
ステップ 3: パスを作成する
最後に、ダウンストリームのパスを構築する必要があります。[完了] を選択し、キャンバスビルダーに戻ります。各パスの下にある プラスボタンをクリックして、必要に応じて通常のキャンバスツールを使用してジャーニーの作成を開始し、準備ができたらキャンバスを開始します。
パスとそのダウンストリームのステップは、一度作成するとキャンバスから削除できないことに注意してください。ただし、開始後、必要に応じてパス間のオーディエンス配分を変更できます。例えば、キャンバスを開始した翌日に、分析に基づいて 1 つのパスの方が他のパスよりも優れていることがわかった場合は、そのパスを 100% に設定し、他のパスを 0% に設定することができます。あるいは、必要な場合は、引き続きユーザーを複数のパスに送り続けることもできます。
キャンバスの開始後は、実験パスを編集できなくなります。実験が送信途中でメッセージを編集した場合、テストは無駄になり、実験結果はすべて削除される。また、Experiment Pathステップを持つすでにアクティブなキャンバスに対して、Personalized PathやWinning Pathをオンにすることはできない。
詳細については、「開始後のキャンバスの編集」を参照してください。
パフォーマンスのトラッキング
[キャンバス分析] ページから実験パスをクリックして [バリアントの分析] タブとまったく同じ詳細な表を開くと、パス間の詳細なパフォーマンスとコンバージョンの統計を比較することができます。また、表を CSV 形式でエクスポートし、選択したパスまたはコントロールに対する関心指標の変化率を比べることもできます。
各パスの各ステップは、他のキャンバスステップと同様に、[キャンバス分析] ビューに統計情報を表示します。ただし、個々のステップの分析では実験の構造が考慮されないことに注意してください。複数のパスを比較するには、実験ステップの分析を使用する必要があります。
勝者パスとパーソナライズされたパスのパフォーマンス
テストで [勝者パス] または [パーソナライズされたパス] が有効になっている場合の分析の詳細については、以下を参照してください。
追加の設定
実験パスは、各ステップに入り、割り当てられたパスにいる間にコンバージョンに至ったユーザーを記録します。これにより、キャンバスの設定で指定されたすべてのコンバージョンイベントが追跡されます。[その他の設定] タブで、このテストでコンバージョンを追跡したい日数 (1 ~ 30 日) を入力します。ここで指定する時間枠によって、テストでコンバージョンイベント (キャンバスの設定で選択したもの) を追跡する期間が決まります。キャンバスの設定で指定されたイベントごとのコンバージョン期間は、このステップのトラッキングには適用されず、このコンバージョン期間に置き換えられます。