インテリジェントセレクション
インテリジェント・セレクションは、定期的なキャンペーンやキャンバスのパフォーマンスを1日2回分析し、各メッセージのバリエーションを受け取るユーザーの割合を自動的に調整する機能である。
他よりもパフォーマンスが良いと思われるバリアントは、より多くのユーザーに送られ、パフォーマンスの低いバリアントは、より少ないユーザーにターゲットとされる。各調整は[統計的アルゴリズム][227] ]を使って行われ、単なるランダムな偶然ではなく、実際のパフォーマンスの違いを調整していることを確認する。
インテリジェントセレクションは以下のことを行います。
- パフォーマンスデータを繰り返し見て、キャンペーンのトラフィックを徐々にWinning Variantsにシフトさせる。
- 統計的な信頼性を犠牲にすることなく、より多くのユーザーが最もパフォーマンスの高いバリアントを受け取れるようにする。
- 従来のA/Bテストよりも早く、パフォーマンスの低いバリアントを除外し、パフォーマンスの高いバリアントを特定する。
- より頻繁にテストを行い、ユーザーが最高のメッセージを目にすることをより確信できるようにする。
インテリジェント・セレクションは、複数回送信するようスケジュールされているキャンペーンに最適である。キャンペーンを調整し始めるには、最初の結果が必要である。従って、一度しか送信しないキャンペーンは有益ではない。こうしたキャンペーンでは、A/Bテストがより効果的だろう。
キャンペーンにインテリジェント・セレクションを追加するには?
キャンペーン・インテリジェント・セレクション
インテリジェントセレクションは、Brazeのキャンペーンコンポーザーのターゲットオーディエンスのステップで、マルチ送信キャンペーンに追加することができる。一度しか送信しないキャンペーンは、この機能を利用できない。
キャンバス・インテリジェント・セレクション
キャンバスにバリアントを追加するとき、バリアントパーセンテージの一つをクリックする。これにより、バリアント分布を編集し、インテリジェントセレクションをオンにすることができる。
キャンバスにまだコンバージョンイベントを追加していない場合、またはキャンペーンがソロバリアントで構成されている場合、インテリジェントセレクションは利用できない。
私たちは、24時間以内に再入会資格が有効になるキャンペーンでのインテリジェントセレクションの使用を許可していない。詳しくはインテリジェンスFAQをご覧いただきたい。
いつまで走るのか?
キャンペーンとキャンバスでは、インテリジェントセレクションは、バリアントの「真の」コンバージョン率について十分な証拠を集めるまで実行される。”十分 “は “後悔 “と呼ばれる特別な尺度によって決定される。インテリジェント・セレクションは、どのバリアントがベストかを知るのに十分なデータがあれば、勝手にオフになるという点で、確信に似ていると考えることができる。
ほとんどの場合、Intelligent SelectionはいずれかのバリエーションをWinning Variantとして選ぶ。このバリアントは、今後送信される観客の100%に与えられる。
インテリジェント・セレクションが、明確な勝者を1人も選ばずに最適化をやめてしまうことはあり得る。インテリジェント・セレクションは、実験を続けてもコンバージョン率が現在の1%以上改善されないと95%確信した時点で、最適化を中止する。
[227] : https://en.wikipedia.org/wiki/Multi-armed_bandit