グローバルコントロールグループ

グローバルコントロールグループを使用して、キャンペーンやキャンバスを受信しないすべてのユーザーのパーセンタグe を指定すると、メッセージング作業の全体的な影響を時間の経過とともに分析できます。

メッセージングを受け取るユーザーと受け取らない人の行動を比較することで、あなたのマーケティング キャンペーンやキャンバスがセッションsやカスタムイベントsの隆盛にどのように貢献しているかをよりよく理解することができます。

グローバルコントロールグループの仕組み

グローバルコントロールグループでは、すべてのユーザーの割合をコントロールグループとして設定できます。保存すると、グループ内のユーザーs はキャンペーンs またはキャンバスを受信しません。

ユーザーをグローバルコントロールグループにランダムに割り当てる

Braze は、ランダムなバケット番号の複数の範囲をランダムに選択し、選択したバケットのユーザーを含めます。現在、他の目的でランダムバケット番号を使用している場合は、「注意すべきこと」を参照のこと。

グローバルコントロールグループが生成されると、ランダムバケット番号を持つすべてのユーザーsがグループの一部になります。さらに、この時点以降に参加する新しいユーザー(グローバルコントロールグループの生成後に取得されたもの)で、これらの乱数を持つものもグローバルコントロールグループに追加されます。同様に、多くのユーザーが削除された場合、削除されたユーザーのパーセンテージe がこのグループに属しているため、グローバルコントロールグループのサイズが縮小することが予想されます。これにより、グループの大きさは、ユーザー群全体に対する一定のパーセンテージe のタグとして維持されます。

ユーザーsを無作為に治療群に割り当ててレポートする

Braze では、アップリフトをレポートできるように、トリートメントグループも作成されます。トリートメントグループは、グローバルコントロールグループに属さないユーザーからランダムに選ばれたユーザーのグループで、グローバルコントロールグループと同じランダムバケット番号法を用いて生成されます。

治療群のサイズはグローバルコントロールグループとほぼ同じですが、まったく同じサイズである可能性は低くなります。レポートのために、Braze はコントロールグループのユーザーとトリートメントサンプルのユーザーの行動を測定します。各ワークスペースには、最大1つのグローバルコントロールグループと1つのトリートメントサンプルグループがあります。トリートメントサンプルグループは、グローバルコントロールレポートの設定方法に関係なく、同じユーザーグループです。

フィーチャーフラグからユーザーを除外する

グローバルコントロールグループのユーザーに対してフィーチャーフラグをイネーブルメントにすることはできない。つまり、グローバルコントロールグループのユーザーもフィーチャーフラグの実験には参加できない。

ユーザーをグローバルコントロールグループから除外する

グローバルコントロールグループから特定のユーザーs を削除することはできませんが、除外設定s を追加して、指定されたタグs don’t のキャンペーンとキャンバスがグローバルコントロールグループを使用するようにすることができます。また、グローバルコントロールグループを無効にして再有効化し、メンバーシップをシャッフルすることもできます。シャッフルユーザーのアイデア時間は、実行中のテストの種類によって異なりますが、月に1 回までシャッフルすることをお勧めします。

グローバルコントロールグループの作成

ステップ1: グローバルコントロールグループ設定に移動します

ダッシュボードから、[オーディエンス] > [グローバルコントロールグループ] に移動します。

ステップ2: このコントロールグループに全ユーザーの割合を割り当てる

コントロールグループの割合を入力し、[保存] を選択します。入力すると、Brazeには、グローバルコントロール、治療、および治療の検体に含まれるユーザーの数の推定値が表示されます。ワークスペース内のユーザーが多いほど、この見積もりのキュレートが多くなることに注意してください。

グローバルコントロールグループのユーザー数は、ワークスペースにユーザーが追加された場合に、この割合に比例するように、初期設定後に自動的に更新されます。また、グローバルコントロールグループの設定後に参加し、ランダムバケット番号を持つユーザーもグローバルコントロールグループに追加されます。多くのユーザーが追加されると、グローバルコントロールグループのサイズが大きくなり、ユーザー群全体に対して一定のパーセンテージe のタグが維持されます。グローバルコントロールグループのサイズが大きくなると、以前にグループに属していたユーザーはグループ内に残ります(グループを無効にして新しいグループを作成してグループに変更を加えた場合を除く)。

割合のガイドラインについては、「ベストプラクティスのセクション」を参照してください。

ステップ 3:除外設定を割り当てる

タグを使用して、グローバルコントロールグループに除外設定を追加します。除外設定に含まれるタグを使用するキャンペーンやキャンバスでは、グローバルコントロールグループは使用されません。これらのキャンペーンとキャンバスは、グローバルコントロールグループ内のものを含め、引き続き対象オーディエンス内のすべてのユーザーに送信されます。

ステップ 4: コントロールグループを保存する

この時点で、Braze はランダムに選択されたユーザーグループを生成し、ユーザー群全体の選択された割合を構成します。保存すると、除外設定のいずれかのタグを含むキャンペーンまたはキャンバスを除き、現在アクティブなキャンペーンと今後のキャンペーンおよびキャンバスはすべて、このグループのユーザーに送信されなくなります。

グローバルコントロールグループに変更を加える

グローバルコントロールグループを無効にし、新しいグループを作成することによってのみ、グローバルコントロールグループに変更を加えることができる。例えば、オーディエンスの10%を占めるグローバルコントロールグループを設定し、そのサイズを5%に下げたい場合には、現在のグローバルコントロールグループを無効にし、新しいグローバルコントロールグループを再度イネーブルメントにする必要があります。

Global Control Group SettingsタブからいつでもGlobal Control Groupを無効にすることができますが、これを行うと、このグループのユーザーsがすぐにキャンペーンおよびキャンバスに適格になることに留意してください。

コントロールグループを無効にする前に、後で参照する必要がある場合に備えて、そのグループ内のユーザーの CSV をエクスポートすることをお勧めします。コントロールグループを無効にすると、Braze がグループを復元したり、このグループに属していたユーザーを特定したりすることはできません。

コントロールグループを無効にした後、新しいコントロールグループを保存できます。割合を入力して保存すると、Braze はランダムに選択された新しいユーザーグループを生成します。以前と同じパーセンテージeを入力すると、Brazeはコントロール群と治療群に対して新しいユーザーs群を生成します。

コントロールグループメンバーをエクスポートする

グローバルコントロールグループのユーザーを確認したい場合は、CSVまたはAPIでグループのメンバーをエクスポートできる。

CSV エクスポートを実行するには、[グローバルコントロールグループ設定] タブに移動し、[エクスポート] をクリックします。API 経由でエクスポートするには、エンドポイント/users/export/global_control_groupを使用します。

ユーザーがグローバルコントロールグループに属しているかどうかを表示する。

グローバルコントロールグループのメンバーシップは、個別のユーザープロファイルの [エンゲージメント] タブにある [その他] セクションで確認できます。

レポート

レポートメトリックについては、「グローバルコントロールグループのレポート」を参照してください。

トラブルシューティング

グローバルコントロールグループs を設定し、レポートを表示すると、次のようなエラーが発生する可能性があります。

問題	トラブルシューティング
グローバルコントロールグループの指定時に入力したパーセンテージeを保存できません。	この問題は、整数以外または1 ～ 15 (両端を含む) 以外の整数を入力した場合に発生します。
「Braze はグローバルコントロールグループを更新できません」というエラーがグローバルコントロール設定ページに表示される。	これは、通常、このページの一部のコンポーネントが変更されたことを示します。これは、おそらく、Brazeのアカウント上の別のユーザーによるアクションが原因です。この場合は、ページを更新して再試行してください。
グローバルコントロールグループレポートにはデータがありません。	グローバルコントロールグループを保存せずにグローバルコントロールグループレポートにアクセスした場合、レポートにデータは表示されません。グローバルコントロールグループを作成して保存し、再試行します。
コンバージョン率が0%であるか、または、発生している事象が0を超えているにもかかわらずグラフディスプレイが表示されていない。	コンバージョン数が非常に小さく、コントロールグループまたはトリートメントグループが非常に大きい場合、コンバージョン率が 0% に丸められ、グラフに表示されないことがあります。これを確認するには、「イベント数の合計」指標を確認します。インクリメンタルアップリフトパーセントメトリックを使用して、2 つのグループの有効性を比較できます。
データの表示期間によって、コンバージョン率 (または他の測定指標) が劇的に変化している。	短期間のデータを表示している場合、指標が日ごとまたは週ごとに変動する可能性があります。少なくとも 1 か月間の指標を表示することをお勧めします。

注意すべき点

ランダムなバケット番号の重複

グローバルコントロールグループはランダムバケット番号を使用して形成されます。したがって、ランダムバケット番号Segment フィルターsを使用して他のテストを実行している場合は、作成するSegmentとグローバルコントロールグループユーザーsとの間に重複が存在する可能性があることに注意してください。

メールアドレスが重複している

異なるユーザーIDを持つ2つの外部ユーザーが同じメールアドレスを持ち、これらのユーザーsの1つがコントロールグループにあり、もう1つがそうでない場合、メールは、非コントロールグループ ユーザーがメールに適格であるときに、そのメールアドレスに送信されます。これが発生すると、両方のユーザープロファイルs がそのメールを含むキャンペーンまたはキャンバスを受信したことを示します。

グローバルコントロールグループおよびメッセージ固有のコントロールグループ

グローバルコントロールグループを持つことも、キャンペーン固有またはキャンバス固有のコントロールグループを使用することもできます。キャンペーン固有またはキャンバス固有のコントロールグループを持つことで、特定のメッセージの影響を測定できます。

グローバルコントロールグループのユーザーは、タグ例外のあるメッセージ以外のメッセージの受信を保留され、キャンペーンまたはキャンバスにコントロールを追加すると、Braze はグローバルトリートメントグループの一部がその特定のキャンペーンまたはキャンバスを受信することを保留します。つまり、グローバルコントロールグループのメンバーが特定のキャンペーンまたはキャンバスを受信する資格がない場合、それらはその特定のキャンペーンまたはキャンバスのコントロールグループには存在しません。

つまり、グローバルコントロールグループのユーザーは、エントリの前にキャンペーンまたはキャンバスオーディエンスから除外されます。キャンペーンまたはキャンバスに入力したユーザーのうち、そのうちの一定割合がコントロールバリアントに割り当てられます。

開発者コンソールのグローバルコントロールグループセグメント

[API キー] ページの [追加の API 識別子] セクションに複数のグローバルコントロールセグメントが表示される場合があります。これは、グローバルコントロールグループが有効または無効になるたびに、新しいグローバルコントロールグループが形成されるためです。これにより、「グローバルコントロールグループ」というラベルの付いた複数のセグメントが作成されます。

これらのセグメントの1つだけがアクティブであり、/users/export/global_control_groupエンドポイントを使用してクエリを実行したり、ダッシュボードからエクスポートしたりできます。ダッシュボードからのエクスポートでは、このグローバルコントロールグループを構成するサブセグメントが明確に示されます。

テストのベストプラクティス

最適なコントロールグループのサイズ

覚えておくべき2つの主なルールは次のとおりです**。

1. コントロールグループは1000ユーザー以上である必要があります。
2. コントロールグループは、オーディエンス全体の10%以下にする必要があります。

オーディエンスの合計が10,000人未満の場合は、割合を増やして1,000人を超えるユーザーのグループを作成する必要があります。この場合、割合を15%より大きくしないでください。ワークスペースの規模が小さければ小さいほど、統計的に厳密な検定を行うのが難しくなることに注意してください。

• コントロールグループのサイズを考える際に考慮すべきトレードオフは、作成された行動分析が信頼できるものとなるように、コントロールグループにかなりの数の顧客が必要であることです。ただし、コントロールグループが大きければ大きいほど、キャンペーンを取得する顧客が少なくなります。これはキャンペーンを使用してエンゲージメントとコンバージョンを促進している場合にはデメリットとなります。
• 総オーディエンスのアイデアl パーセンテージe は、総オーディエンスの大きさによって異なります。オーディエンスの総数が多ければ多いほど、割合は小さくなります。ただし、小さなオーディエンスがある場合は、コントロールグループのパーセンタグe を大きくする必要があります。

実験期間

理想的な期間を選択する

コントロールグループのメンバーシップを再シャッフルするまでにテストを実施する期間は、テストする内容とユーザーのベースライン行動によって異なります。よくわからない場合は、1四半期 (3か月) から始めるのが良いでしょうが、1か月未満にしないでください。

実験の適切な時間を決定するには、どのような質問に答えたいかを検討します。たとえば、セッションに違いがあるかどうかを確認していますか?その場合は、ユーザーがどのくらいの頻度でセッションを組織的に行うかを考えてください。ユーザーが毎日セッションを行うブランドは、ユーザーが月に数回しかセッションを行わないブランドよりも短いテストを実施できます。

また、カスタムイベントに関心がある可能性があるため、ユーザーがそのカスタムイベントをトリガーする頻度が低い場合には、この実験は、セッションを調べる実験よりも長く実行する必要がある可能性があります。

実験の早期終了の制限を試みる

実験を開始する前に実験を実行する時間を決定する必要があります。この事前に決定されたポイントに到達した後で、実験を終了し、最終的な結果を収集する必要があります。実験を早期に終了するか、有望なデータが見つかるたびに、バイアスが発生します。

価値ある指標について考える

最も関心のあるメトリックのベースライン動作を検討します。年単位でのみ更新されるサブスクリプションプランの購入料金に関心がありますか?または、顧客は測定したいイベントについて毎週の習慣がありますか?ユーザーがメッセージングによって行動を変える可能性が生じるまでにどのくらいの時間がかかるかを考えてみてください。どのくらいの期間実験を行うかを決めたら、実験を終わらせたり、最終結果を早めに記録したりしないでください。そうしないと、結果にバイアスがかかります。