ABテストキャンペーンの各バージョンを分析して、どのバージョンが最もパフォーマンスが高いかを判断します。送信の連絡先の残りの残高は、その勝者バージョンに送信されます。これにより、最もパフォーマンスの高い変数を使用してキャンペーンのパフォーマンスをテストし、最大化できます。
ABテストの勝者を判断する指標 (開封数、クリック数、ROI) を選択できます。
ROI 指標を選択するには、アカウントにROI トラッキングがすでに設定されている必要があります。ROI は、アカウントでアドバンスト収益アトリビューションを使用している場合、ABテスト指標のオプションとして利用できません。
始める前に
知っておくべきこと:
ABテストを利用する前に、メールキャンペーンの作成と送信の基本を理解しておく必要があります。
ABテストを作成します
ABテストの設定は、キャンペーン構築プロセスの作成ステップで構成します。
ABテストメールキャンペーンを作成するには:
キャンペーン > メールにアクセスし、新規キャンペーンを選択して新しいメールキャンペーンを作成するか、キャンペーン名選択して既存のキャンペーンを編集します。既存のキャンペーンを編集する場合は、キャンペーン作成プロセスのコンテンツステップでキャンペーンが開くことがあります。右上の階層リンクメニューから作成を選択して、ABテストの設定を構成します。
ABテストの設定を選択します。
ABテストの設定サイドパネルで、使用するABテスト機能を有効に切り替えます。
適用を選択して設定を保存し、ABテストメールを作成します。
ABテストメールを使用します
ABテストを有効にすると、デフォルトで2つの異なるバージョンのキャンペーンが利用可能になり、左上のタブからアクセスできます。+記号を選択すると、最大10個までバージョンが追加されます。バージョンを削除するには、X記号を選択します。
件名、フレンドリ名、または送信者アドレスに基づくABテストの場合、作成ステップにバージョンタブが表示されます。クリエイティブの場合は、コンテンツステップにバージョンタブが表示されます。
バージョンを追加できるのは作成ステップのみで、コンテンツステップではありません。
タブを選択すると、そのキャンペーンバージョンが表示されます。各バージョンのコンテンツを入力し、保存または保存して続行を選択します。
ABテストキャンペーンの設定と送信を行います
ABテストするキャンペーン要素を設定したら、送信する前にABテストのオプションを設定する必要があります。これらのオプションは、次の3つの主要なコンポーネントで構成されています。
選択した連絡先のうち、ABテストを送信するサンプルの割合です。
レスポンスを測定する時間数です。
勝者バージョンの判断に使用する指標:開封数、クリック数、ROIデータです。
ABテストのオプション
ABテストのオプションは、キャンペーン作成プロセスの連絡先ステップで設定できます。
連絡先の選択とキャンペーンのスケジュール設定画面で、まずキャンペーンの送信先の顧客を選択する必要があります。これは、キャンペーンを送信したいリスト、セグメント、またはマーケティングの好みです。
次に、送信時間を設定する必要があります。
キャンペーンの設定が完了したらすぐにキャンペーンを送信する場合、即時を選択し、将来の指定した日時にキャンペーンを送信するにはスケジュールされた日時を選択します。
次に、ABテストのオプションを設定する必要があります。
ABテストの顧客の割合を設定
ABテストに使用したい連絡先の割合をパーセンテージで入力します。デフォルトの設定は5%です。ここで選択される連絡先の数は、テストするキャンペーンのバリエーションごとに分割されます (たとえば、10%を選択し、AとABテストキャンペーンBがある場合、5%にAが送信され、5%にBが送信されます)。テスト期間が終了した後、選ばれた顧客の残り90%に対して、勝ち抜いたキャンペーンバージョンを送信します
ABテストの長さ(時間)
応答を測定する時間数を入力します。デフォルトの設定は5時間です。これは、5時間後に残りの連絡先に、ABテストの勝者である最も効果的なキャンペーンが送信されることを意味します。
測ります
回答を記録するとき、開封率、クリック率、またはROIのどれに基づいてキャンペーンの成功を測定するか選択します。
テストの評価基準として、クリック数または設定されている場合はROIを使用することをお勧めします。これは、一部のオペレーティングシステムのメールクライアントがデータの開封を処理する方法が、このメトリックの正確さに影響を与える可能性があるためです。
ABテストと外部ダイナミックコンテンツ
ABテストキャンペーンで外部ダイナミックコンテンツを使用している場合、設定した制限時間内にABテスト送信の完了が待機の可能性があります。
これは、各外部ダイナミックコンテンツブロックがHTTPリクエストを実行するため、通常は実行に時間がかかる可能性があるためです。キャンペーンに外部ダイナミックコンテンツブロックが多数ある場合、送信速度が大幅に低下する可能性があり、この待機は設定した待機時間を超える可能性があります。
ROI指標
ROI 指標を選択した場合は、ドロップダウンメニューを展開してマーカーの1つを選択するように求められます。
どのマーカーを選択するか、それに対応するデータ型 (テキスト、数値、日付、またははい/いいえ) によって、次のオプションセットが決まります。
たとえば、数値データ型のマーカーでは、ヒット数、合計数、平均値を選択できます。これは、数値データ型のマーカーは、Webサイトページへの訪問者だけがヒットするわけではないためです。マーカーに含まれる数値は、各ABテストバージョンの合計と平均を計算できることを意味します。
CheckOutAmount
の場合、すべてのお客様の支出総額とすべてのお客様の平均支出に基づいて勝者を決定できます。
マーカーの数値データ型以外のものでは、ヒット指標のみがデフォルトで選択され、これらのデータ型ではこれ以上何も計算できません。
別のメトリックオプションを選択すると、メトリックの意味と有用性に関する詳細情報を提供するボックスが表示されます。
ABテストを保存して送信します
オプションに問題がなければ、保存して続行を選択します。
キャンペーン設定が表示され、確認することができます。変数の各セットは、異なるサマリータブとして表示されます。
送信する準備ができたとき、または送信をスケジュールしたとき、キャンペーンの送信時間に選択したオプションに応じて、すぐにキャンペーンを送信またはスケジュールされたキャンペーンを確認を選択します。
確認メッセージが表示されます。確認を選択します。
キャンペーンは処理のために配信フォルダに移動され、これはステータス列の下に表示されるインジケーターで示されます。送信が完了すると、キャンペーンは配信済みタブに移動します。
ABテストのレポート
ABテストが送信されたら、キャンペーンレポートを表示して、送信に関する統計と各B/Bテストバージョンのパフォーマンスを確認できます。キャンペーンレポートを表示するには、次の手順に従ってください。
キャンペーン > メール > 配信済みタブ、または分析レポート > レポートにアクセスします。
キャンペーン名を選択します。
ABテストが配信フォルダにある場合は、ABテストの期間が終了するまでの残り時間を確認できます。
キャンペーンレポートには、ABテスト結果というタイトルのセクションが表示され、デフォルトでは勝者のABテストが表示されます。選択したメトリックは、件名行、差出人アドレス、およびフレンドリ差出人名とともにパーセンテージで表示されます。+ 負けた分割を表示を選択すると、キャンペーンの他のバージョンと同じ情報が表示されます。
デザインの表示を選択して、関連するキャンペーンバージョンを表示するキャンペーンプレビューウィンドウを開きます。
同点の場合には…
選択したメトリクスに基づいて勝者を判断できない場合は、バージョン Aが残りの連絡先に送信されます。
これは、最初のテスト期間中にキャンペーンへのエンゲージメントがなかった場合に発生する可能性があります。たとえば、メトリクスとしてクリック数を選択しているが、テスト期間中に連絡先がクリックされなかった場合などです。この場合、勝者バージョンでレポートをフィルター処理するとエンゲージメントが表示される場合がありますが、フィルターにはテスト期間と、勝者バージョンが送信された後の期間の両方のデータが表示されます。
ABテストのバリエーションでフィルタリングします
フィルターを選択します。すべて表示、次に、フィルターレポートサイドパネルで、選択したABテストバリエーションを受け取ったユーザーを選択します。
ABテストの選択を選択し、フィルタリングするキャンペーンバージョンのラジオボタンを選択します。
適用を選択します。レポートが更新され、関連する統計が表示されます。