実験パス
実験パスを使用すると、ユーザージャーニーの任意の時点で、複数のキャンバスパスを相互にテストしたり、1 つのコントロールグループに対してテストできます。このコンポーネントを使用すると、パスのパフォーマンスを追跡して、キャンバスのジャーニーに関する情報に基づいた決定を行うことができます。
ユーザージャーニーにExperiment Pathsステップを含めると、作成した異なるパス(またはオプションのコントロールグループ)にユーザーがランダムに割り当てられます。オーディエンスの一部は、選択したパーセンテージに応じて異なるパスに割り当てられます。これにより、異なるメッセージまたはパスを互いにテストし、どのパスが最も効果的かを判断できます。
ユースケース
実験パスは、配信、ケイデンス、メッセージコピー、チャネルの組み合わせをテストするのに最適です。
- 配信:ユーザーのアクション (アクションパス) に基づいたインテリジェントタイミングを使用し、異なる時間遅延で送信されたメッセージ間の結果を比較します。
- ケイデンス:特定の期間に複数のメッセージングフローをテストします。例えば、次の 2 つの異なるオンボーディングケイデンスをテストできます。
- ケイデンス 1: ユーザーの最初の 2 週間に 2 通のメッセージを送信する
- ケイデンス 2: ユーザーの最初の 2 週間に 3 通のメッセージを送信する
離脱ユーザーをターゲットにする場合、1 週間に奪還メッセージを 2 回送信する場合と、1 回だけ送信する場合の効果をテストできます。
- メッセージコピー:標準の AB テストと同様に、さまざまなメッセージのコピーをテストして、コンバージョン率が高まる文面や言い回しを判断できます。
- チャネルの組み合わせ:メッセージチャネルのさまざまな組み合わせの効果をテストします。例えば、メールだけを使用した場合と、メールとプッシュ配信を組み合わせた場合の影響を比較できます。
前提条件
実験パスを使用するには、キャンバスに変換イベントが含まれている必要があります。Canvas の起動後に変換イベントを追加することはできませんが、起動したCanvas のクローンを作成し、変換イベントを追加してExperiment Paths を追加できます。
実験パスを作成する
実験パスコンポーネントを作成するには、まずキャンバスにステップを追加します。サイドバーからコンポーネントをドラッグ&ドロップするか、ステップの一番下にある プラスのボタンをクリックし、[実験パス] を選択します。
このコンポーネントのデフォルト構成では、パス 1 とパス 2 の 2 つのデフォルトパスがあり、各パスにオーディエンスの 50% が送られます。コンポーネントをクリックして [実験の設定] パネルを展開すると、コンポーネントの設定オプションが表示されます。
ステップ 1: パスの数とオーディエンスの分布を選択する
[パスを追加] をクリックして最大 4 つのパスを追加できます。オプションのコントロールグループを追加するには [コントロールグループを追加] をオンにします。各パスのパーセンテージボックスを使用して、各パスとコントロールグループに送るオーディエンスの割合を指定できます。次に進むには、入力されたパーセンテージの合計が 100% になる必要があります。使用可能なすべてのパス (およびコントロール) を同じパーセンテージにすばやく設定するには、[パスを均等に配布] をクリックします。
また、コントロールグループのユーザーをキャンバスで次に進めるか、コントロールグループの動作のコンバージョントラッキング期間の経過後に退出させるかを選択することもできます。オプションで、このテストパスで何をテストするのかを他の人に伝える説明を追加したり、役に立つ注意事項などの追加情報を含めたりできます。
キャンバスの再適格性が有効になっている場合、キャンバスに入ってランダムに選択されたパスを進んだユーザーは、再適格となりキャンバスに再び入ると、もう一度同じパスを進みます。これにより、実験とその分析の有効性が維持されます。ステップで常にパスの割り当てをランダム化するには、[実験パスのランダムパス] を選択します。このオプションは、勝者パスまたはパーソナライズされたパスを用いる場合は使用できません。
ステップ 2: 勝者パスまたはパーソナライズされたパスを有効にする (オプション)
[勝者パス] または [パーソナライズされたパス] をオンにして、テストを最適化することができます。どちらの方法も、最初にオーディエンスの一部を対象としてパスをテストすることで機能します。実験が終了すると、残りのユーザとそれ以降のユーザは、最良性能のパス全体(Winning Path)または各ユーザの最良性能のパス(Personalized Paths)のいずれかに送信されます。
ステップ 3:パスを作成する
最後に、ダウンストリームのパスを構築する必要があります。[完了] を選択し、キャンバスビルダーに戻ります。各パスの下にある プラスボタンをクリックして、必要に応じて通常のキャンバスツールを使用してジャーニーの作成を開始し、準備ができたらキャンバスを開始します。
パスとそのダウンストリームのステップは、一度作成するとキャンバスから削除できないことに注意してください。ただし、開始後、必要に応じてパス間のオーディエンス配分を変更できます。例えば、キャンバスを開始した翌日に、分析に基づいて 1 つのパスの方が他のパスよりも優れていることがわかった場合は、そのパスを 100% に設定し、他のパスを 0% に設定することができます。あるいは、必要な場合は、引き続きユーザーを複数のパスに送り続けることもできます。
キャンバスの開始後は、実験パスを編集できなくなります。実験が送信途中でメッセージを編集した場合、テストは無駄になり、実験結果はすべて削除される。また、実験パスステップのあるすでにアクティブなキャンバスで、[パーソナライズされたパス] または [勝者パス] のステップをオンにすることはできません。
詳細については、「開始後のキャンバスの編集」を参照してください。
パフォーマンスのトラッキング
[キャンバス分析] ページから実験パスをクリックして [バリアントの分析] タブとまったく同じ詳細な表を開くと、パス間の詳細なパフォーマンスとコンバージョンの統計を比較することができます。また、表を CSV 形式でエクスポートし、選択したパスまたはコントロールに対する関心指標の変化率を比べることもできます。
各パスの各ステップは、他のキャンバスステップと同様に、[キャンバス分析] ビューに統計情報を表示します。ただし、個々のステップの分析ではnot は実験の構造を考慮に入れていることに注意してください。複数のパスを比較するには、実験ステップの分析を使用する必要があります。
勝者パスとパーソナライズされたパスのパフォーマンス
勝者パスを活用して一定期間にわたるパフォーマンスを追跡し、それ以降のユーザーを最高のパフォーマンスが得られるパスに自動的に送ることができます。テストで [勝者パス] または [パーソナライズされたパス] が有効になっている場合の分析の詳細については、以下を参照してください。
追加の設定
実験パスは、各ステップに入り、割り当てられたパスにいる間にコンバージョンに至ったユーザーを記録します。これにより、キャンバスの設定で指定されたすべてのコンバージョンイベントが追跡されます。[その他の設定] タブで、このテストでコンバージョンを追跡したい日数 (1 ~ 30 日) を入力します。ここで指定した時間枠によって、キャンバス設定で選択した変換イベントがどのくらいの時間トラッキングされるかが決まります。キャンバス設定で指定されたイベントごとの変換ウィンドウは、このステップの追跡には適用されず、この変換ウィンドウに置き換えられます。