Skip to content

インテリジェントセレクション

インテリジェントセレクションは、定期的なキャンペーンまたはキャンバスのパフォーマンスを 1 日に 2 回分析し、各メッセージバリアントを受信するユーザーの割合を自動的に調整する機能です。

インテリジェントセレクションについて

パフォーマンスが他のバリアントより優れていると見なされたバリアントは、より多くのユーザーに送信され、パフォーマンスの低いバリアントは、より少ないユーザーをターゲットにします。各調整は統計アルゴリズムを使用して行われるため、単なる偶然ではなく実際のパフォーマンスの差に応じて調整されます。

インテリジェントセレクションを有効にしたキャンペーンの [AB テスト] セクション。

インテリジェントセレクションは以下のことを行います。

  • パフォーマンスデータを繰り返し確認して、キャンペーンのトラフィックを段階的に勝者バリアントにシフトする。
  • 統計的な信頼度を損なうことなく、より多くのユーザーが最もパフォーマンスの高いバリアントを受信していることをチェックする。
  • 従来の AB テストよりも迅速にパフォーマンスの低いバリアントを除外し、パフォーマンスの高いバリアントを特定する。
  • 最適なメッセージがユーザーに表示されるように、より頻繁に、かつより高い信頼度でテストする。

インテリジェントセレクションは、複数回送信するキャンペーンに最適です。最適化を開始するために早期のパフォーマンスデータが必要であるため、単発キャンペーンではメリットがありません。このようなキャンペーンには、代わりに従来のABテストを使うことをお勧めします。

前提条件

キャンペーンにインテリジェントセレクションを追加する前に、設定が正しいことを確認します。

  • キャンペーンが定期的なスケジュールで送信される。単一送信キャンペーンはサポートされていない。
  • 少なくとも 2 つのメッセージバリアントが追加されている。
  • バリアント全体のパフォーマンスを測定するためにコンバージョンイベントを定義している。
  • 再適格期間が 24 時間以上に設定されている。これよりも短い期間は、コントロールバリアントの整合性に影響する可能性があるため、サポートされていません。詳細については、インテリジェンスに関する FAQ を参照してください。

インテリジェントセレクションをキャンバスで使用するには、以下の点を確認します。

  • キャンバスのメッセージステップに、少なくとも 2 つのメッセージバリアントが含まれている。
  • 少なくとも 1 つのコンバージョンイベントを追加している。

インテリジェントセレクションの追加

キャンペーンとキャンバスにインテリジェントセレクションを追加できます。

インテリジェントセレクションは、Braze のキャンペーン作成画面のターゲットオーディエンスステップで、任意の複数回送信キャンペーンに追加できます。一度だけ送信するキャンペーンでは、この機能を利用できません。

キャンバスに少なくとも 1 つのコンバージョンイベントと 2 つのバリアントを追加します。次に、ビルドステップでバリアントパーセンテージの 1 つを選択します。

それぞれのバリアント分布が 50% に設定された 2 つのバリアントがあり、インテリジェントセレクションを有効にできるキャンバス。

これにより、バリアント分布を編集してインテリジェントセレクションをオンにすることができます。

キャンバスで [インテリジェントセレクション] オプションがオンになっている

キャンバスにコンバージョンイベントをまだ追加していない場合、またはキャンペーンが単一のバリアントで構成されている場合は、インテリジェントセレクションを使用できません。

実行時間

キャンペーンおよびキャンバスの場合、インテリジェントセレクションは、バリアントの「真」のコンバージョン率に関する十分な証拠を収集するまで実行されます。「十分」かどうかは、「後悔」と呼ばれる特別な指標によって判定されます。インテリジェントセレクションは、どのバリアントが最良かを判定するために十分なデータがあれば、自動でオフになるという点で、信頼度に似ていると考えることができます。

ほとんどの場合、インテリジェントセレクションはいずれかのバリアントを勝者バリアントとして選択します。このバリアントは、今後送信されるオーディエンスの 100% に使用されます。

よくある質問 (FAQ)

インテリジェントセレクションと組み合わせた場合、24 時間が経過しないと再適格性が利用できないのはなぜですか?

インテリジェントセレクションのキャンペーンは、コントロールバリアントの整合性に影響を与える可能性があるため、時間枠が短すぎると再適格性を得ることはできません。24 時間のギャップを持たせることで、確実にアルゴリズムが統計的に有効なデータセットを使用できるようにしています。

通常、再適格性のあるキャンペーンでは、ユーザーは以前に受信したものと同じバリアントに再エントリします。インテリジェントセレクションを使用した場合、この機能に最適な割り当てによってバリアントへの配布が移動するため、ユーザーが同じキャンペーンバリアントを受信するとは限りません。インテリジェントセレクションがバリアントのパフォーマンスを再評価する前にユーザーの再エントリが許可されていた場合、ユーザーの再エントリが原因でデータに歪みが生じる可能性があります。

例えば、キャンペーンで次のバリアントを使用しているとします。

  • バリアント A: 20%
  • バリアント B: 20%
  • コントロール: 60%

その後、第 2 ラウンドのバリアント分布は次のようになるとします。

  • バリアント A: 15%
  • バリアント B: 25%
  • コントロール: 60%

キャンペーンの初期段階で、インテリジェントセレクションのバリアントが等しい送信数を示す理由は何ですか?

インテリジェントセレクションは、キャンペーンのコンバージョンの現在のステータスに基づいて、送信するバリアントを割り当てます。これは、トレーニング周期を 1 度経た後の最終的なバリアント割り当てのみを決定し、ここでは送信がバリアント間で均等に割り当てられます。キャンペーンの初期段階でインテリジェントセレクションに均等な送信をさせない場合は、従来の AB テストに固定バリアントを使用します。

インテリジェントセレクションは、明確な勝者を選択せずに最適化を停止しますか?

インテリジェントセレクションは、実験を継続してもコンバージョン率の改善は現在の 1% を超えないという信頼度が 95% に達すると、最適化を停止します。

キャンバスまたはキャンペーンでインテリジェントセレクションを有効にできない (グレー表示) のはなぜですか?

インテリジェントセレクションは、次の場合に使用できません。

  • キャンペーンまたはキャンバスにコンバージョンイベントを追加していない
  • 単一送信キャンペーンを作成している
  • 24 時間未満のウィンドウで再適格性を有効にしている
  • キャンバスが 1 つのバリアントで構成されており、追加のバリアントやコントロールグループが追加されていない
  • キャンバスが 1 つのコントロールグループで構成され、バリアントが追加されていない
Github   GitHub でこのページを編集
「このページはどの程度役に立ちましたか?」
New Stuff!