実験パス

実験パスを使用すると、ユーザージャーニーの任意の時点で、複数のキャンバスパスを相互にテストしたり、1 つのコントロールグループに対してテストできます。このコンポーネントを使用して、パスのパフォーマンスを追跡し、キャンバスジャーニーについて情報に基づいた意思決定を行うことができます。

ユーザージャーニーにExperiment Pathsステップを含めると、作成した異なるパス(またはオプションのコントロールグループ)にユーザーがランダムに割り当てられます。オーディエンスの一部は、選択したパーセンテージに応じて異なるパスに割り当てられます。これにより、異なるメッセージまたはパスを互いにテストし、どのパスが最も効果的かを判断できます。

ユースケース

実験パスは、配信、ケイデンス、メッセージコピー、チャネルの組み合わせをテストするのに最適です。

• 配信:ユーザーのアクション (アクションパス) に基づいたインテリジェントタイミングを使用し、異なる時間遅延で送信されたメッセージ間の結果を比較します。
  
  
• ケイデンス:特定の期間に複数のメッセージングフローをテストします。例えば、次の 2 つの異なるオンボーディングケイデンスをテストできます。
  • ケイデンス 1: ユーザーの最初の 2 週間に 2 通のメッセージを送信する
  • ケイデンス 2: ユーザーの最初の 2 週間に 3 通のメッセージを送信する

  離脱ユーザーをターゲットにする場合、1 週間に奪還メッセージを 2 回送信する場合と、1 回だけ送信する場合の効果をテストできます。

• メッセージコピー:標準の AB テストと同様に、さまざまなメッセージのコピーをテストして、コンバージョン率が高まる文面や言い回しを判断できます。
  
  
• チャネルの組み合わせ:メッセージチャネルのさまざまな組み合わせの効果をテストします。例えば、メールだけを使用した場合と、メールとプッシュ配信を組み合わせた場合の影響を比較できます。

前提条件

実験パスを使用するには、キャンバスにコンバージョンイベントが含まれている必要があります。キャンバスの開始後はコンバージョンイベントを追加できませんが、実験パスを追加するために、開始したキャンバスを複製してコンバージョンイベントを追加することができます。

実験パスの作成

実験パスコンポーネントを作成するには、まずキャンバスにステップを追加します。サイドバーからコンポーネントをドラッグ＆ドロップするか、ステップの一番下にある プラスのボタンをクリックし、[実験パス] を選択します。

このコンポーネントのデフォルト構成では、パス 1 とパス 2 の 2 つのデフォルトパスがあり、各パスにオーディエンスの 50% が送られます。コンポーネントをクリックして [実験の設定] パネルを展開すると、コンポーネントの設定オプションが表示されます。

ステップ 1: パスの数とオーディエンスの分布を選択する

[パスを追加] をクリックして最大 4 つのパスを追加できます。オプションのコントロールグループを追加するには [コントロールグループを追加] をオンにします。各パスのパーセンテージボックスを使用して、各パスとコントロールグループに送るオーディエンスの割合を指定できます。次に進むには、入力されたパーセンテージの合計が 100% になる必要があります。使用可能なすべてのパス (およびコントロール) を同じパーセンテージにすばやく設定するには、[パスを均等に配布] をクリックします。

また、コントロールグループのユーザーをキャンバスで次に進めるか、コントロールグループの動作のコンバージョントラッキング期間の経過後に退出させるかを選択することもできます。オプションで、このテストパスで何をテストするのかを他の人に伝える説明を追加したり、役に立つ注意事項などの追加情報を含めたりできます。

ステップ 2: 勝者パスまたはパーソナライズされたパスを有効にする (オプション)

[勝者パス] または [パーソナライズされたパス] をオンにして、テストを最適化することができます。どちらの方法も、最初にオーディエンスの一部を対象としてパスをテストすることで機能します。実験が終了すると、それ以降の残りのユーザーは、全体的に最もパフォーマンスの高いパス (勝者パス) か、各ユーザーの最もパフォーマンスの高いパス (パーソナライズされたパス) のいずれかに送られます。

ステップ 3:パスを作成する

最後に、ダウンストリームのパスを構築する必要があります。[完了] を選択し、キャンバスビルダーに戻ります。各パスの下にある プラスボタンをクリックして、必要に応じて通常のキャンバスツールを使用してジャーニーの作成を開始し、準備ができたらキャンバスを開始します。

パスとそのダウンストリームのステップは、一度作成するとキャンバスから削除できないことに注意してください。ただし、開始後、必要に応じてパス間のオーディエンス配分を変更できます。例えば、キャンバスを開始した翌日に、分析に基づいて 1 つのパスの方が他のパスよりも優れていることがわかった場合は、そのパスを 100% に設定し、他のパスを 0% に設定することができます。あるいは、必要な場合は、引き続きユーザーを複数のパスに送り続けることもできます。

パフォーマンスのトラッキング

Canvas Analyticsページから実験パスを選択すると、詳細なパフォーマンスとコンバージョン統計をパス間で比較するための詳細テーブルが開く。このテーブルは「Analyze Variants」タブと同一のものだ。また、表を CSV 形式でエクスポートし、選択したパスまたはコントロールに対する関心指標の変化率を比べることもできます。

各パスの各ステップは、Canvas Analyticsビューで統計情報を表示する。これは他のCanvasステップと同様である。ただし、個々のステップ分析と実験経路分析ではコンバージョンの測定方法が異なる点に留意する必要がある：

• 実験パス分析は、ユーザーが実験パスのステップに入った時点からコンバージョンをトラッキングする。これは、すべてのパスが同じ起点を持つため、パス間のパフォーマンスを比較するのに推奨される表示方法である。
• 個々のステップ分析（メッセージステップ分析など）は、ユーザーがその特定のステップを受け取った時点（例えばメッセージが送信された時点）からコンバージョンをトラッキングする。

これらのコンバージョンウィンドウは開始点が異なるため、同じパスでも異なるコンバージョン率を示すことがある。特に実験ステップと下流のメッセージの間に遅延がある場合に顕著だ。パス間で最も信頼性の高い比較を行うには、実験パスの分析機能を使うこと。

勝者パスとパーソナライズされたパスのパフォーマンス

勝者パスを活用して一定期間にわたるパフォーマンスを追跡し、それ以降のユーザーを最高のパフォーマンスが得られるパスに自動的に送ることができます。テストで [勝者パス] または [パーソナライズされたパス] が有効になっている場合の分析の詳細については、以下を参照してください。

• 勝者パス
• パーソナライズされたパス

追加の設定

実験パスは、割り当てられたパス内で各ステップに入り、コンバージョンしたユーザーを記録する。これは、キャンバスの設定で指定されたすべてのコンバージョンイベントを追跡する。追加設定タブで、この実験がコンバージョンをトラッキングする日数（1～30日）を入力する。ここで指定する時間枠は、実験においてコンバージョンイベント（キャンバス設定で選択したもの）がトラッキングされる期間を決定する。キャンバス設定で指定されたイベントごとのコンバージョンウィンドウは、このステップのトラッキング, 追跡には適用されず、このコンバージョンウィンドウに置き換えられる。

コンバージョンウィンドウは、ユーザーが実験パスステップに入った時点で開始される。下流メッセージが送信された時点ではない。パスに遅延が含まれる場合―例えば遅延ステップやインテリジェントタイミングなど―それらの遅延はコンバージョンウィンドウの一部を消費する。