A/B テスト
A/B テスト エレメントを使用して、メッセージのさまざまなバリエーションをオーディエンスの一部に送信し、どのバリエーションが最もパフォーマンスが高いかを測定し、勝ったメッセージを残りのオーディエンスに自動的に送信します。勝者を選ぶための手動ステップはありません。
A/B テストの仕組み [#how-it-works]
A/B テスト エレメントをジャーニーに追加すると、テストオーディエンス (テストの実行に使用される総オーディエンスの割合) を定義します。これを 10% から 95% までの任意の値に設定します。デフォルトは 30% です。
テストオーディエンスは、メッセージバリアントに均等に分割されます。たとえば、2 つのバリエーションを作成し、テスト オーディエンスを 30% に設定すると、各バリエーションはオーディエンス全体の 15% に送信されます。
残りのオーディエンス (テストオーディエンス以外のすべてのユーザー) は、テスト中にメッセージを受信しません。テストが終了すると、残りのオーディエンスは自動的に勝ったメッセージを受信します。
全体的なフローは次のとおりです。
- 同じチャネルに 2 つから 4 つのメッセージバリアント (バージョン A、バージョン B など) を作成します。
- テストオーディエンスのサイズを設定し、開封率とクリック率のどちらで勝者を決定するかを選択します。
- 勝者を決定するまでの待機時間を設定します。
- このエレメントは、各バリアントをテスト対象ユーザーのシェアに送信します。
- 待機時間が終了すると、エレメントは結果を評価し、勝ったバリアントを選択します。
- 残りのオーディエンスは自動的に当選メッセージを受信します。
始める前に [#before-you-begin]
A/B テスト エレメントには、配置できる場所と構成方法に影響を与える要件と制約があります。
A/B テスト エレメントを体験に追加する前に、以下を確認してください。
- A/B テスト エレメントは、ジャーニーでのみ使用できます。
- テスト内のすべてのバリアントは、同じチャネルを使用する必要があります。
- 定義済みのオーディエンスエントリーポイントの後にエレメントを追加します。
このエレメントは、すべてのジャーニー・エントリー・ポイントに追加できます。エントリーポイント 1 回 は、大勢のオーディエンスに使用します。
- 各テストには、最小 2 つ、最大 4 つのバリアントを含める必要があります。
サポートチャネル
A/B テスト エレメントは、次のチャネルをサポートします。
- SMS、
- モバイルプッシュ通知
- Viber
- メール
- RCS
- アップルメッセージ
- LINEです。
1 つの A/B テストでは、1 つのチャネルのみが使用されます。ABテストが異なれば、使用するチャネルも異なる場合があります。
A/B テストエレメントを追加する [#add-element]
- ジャーニービルダーで、+ を選択して [エレメントの選択 パネルを開きます。
- アクションカテゴリで、A/Bテストを選択します。
エレメントの構成 [#configure]
A/B テスト エレメントに次のフィールドを設定します。
| フィールド | 説明 |
|---|---|
| テストノートを追加 | テストを説明するメモを入力します。最大 160 文字。例: パーソナライズされた件名と一般的な件名のバリエーションをテストします。 このフィールドはオプションです。 |
| 総視聴者のテストサイズ | 勝ったメッセージの評価に使用する総オーディエンスの割合を設定します。テストバリアントは、この割合に均等に分散されます。デフォルトは 30% です。 |
| バージョンA、バージョンBなど | チャネルを選択し、各バリエーションのメッセージを作成します。バリアントの名前を入力します。[別のバリエーションを追加] を選択して、最大値までさらにバリエーションを作成します。 |
| 当選メッセージはで決定されます | 勝者の決定に使用する成功指標(開封率またはクリック率)を選択します。 |
| 待ち時間 | エレメントが勝者を決定するまでの待機時間を分、時間、または日数で設定します。 |
クリック率 オプションでは、選択したすべてのメッセージに対して トラッキング URL オプションを有効にする必要があります。
テストを監視する [#monitor]
テストの実行中は、エレメントパネルに進行状況を示すバナーが表示されます。例: テストは 60% 完了し、1.2 時間で終了します。
各バリアントには、次のライブ統計が表示されます。
- Recipients (受信者数)
- Sent (送信数)
- Open rate (開封率)
- クリック率
勝者の決定方法 [#winner]
勝者は、選択した指標(開封率またはクリック率)で最良の結果をもたらしたバリアントです。明確な勝者がいない場合は、ランダムに勝者が選ばれます。
テスト結果 [#results]
テストが終了すると、エレメントパネルに結果を確認するバナーが表示されます。例: *テストが完了しました。バリアント C の開封率が高く、残りのオーディエンスに送信されました。
当選バリアントには、Winner! バッジが表示されます。各バリアントは最終的な統計を示します。
- Recipients (受信者数)
- Sent (送信数)
- Open rate (開封率)
- クリック率
制限 [#limitations]
- 開封率とクリック率のみを使用して勝者を選出できます。
- 送信時間の最適化や配信時間枠などの高度な送信時間オプションは、A/B テスト エレメントでは使用できません。
ユースケース [#use-cases]
- パーソナライズされた件名と一般的な件名の 2 つの件名をテストして、どちらが開封率が高いかを確認します。
- さまざまなメッセージのコピーや行動喚起をテストして、どちらがクリック数が多いかを確認します。