ABテスト

コンテンツやレコメンド場所の効果を測定するために行うABテストをRtoaster action+で実施するには、
いくつかの方法があります。

効果比較対象 レコメンドの種類 参照項目
コンテンツ同士を比較する ルールベースレコメンド 複数コンテンツを出し分ける
ABテストグループを利用する
自動レコメンド同士を比較する ルールベースレコメンド 自動レコメンドを出し分ける
デフォルトコンテンツと
レコメンドコンテンツを比較する
ルールベースレコメンド コントロール群を利用する
ポップアップのABテスト
自動レコメンドのABテスト
※コントロール群を利用する

複数コンテンツを出し分ける

Webコンテンツグループに複数のコンテンツを登録して、比率指定でコンテンツを出し分けます。

  • Webコンテンツグループの設定方法
    1. 「アクション・効果測定」>「Web設定」>「Webコンテンツグループ設定
    2. 「Webコンテンツグループを作成」をクリックします
    3. Webコンテンツタイプ選択画面で「通常」を選択します
    4. Webコンテンツグループ編集画面で任意のWebコンテンツグループ名を入力します
    5. 「コンテンツを追加」をクリックしてコンテンツAを作成します
    6. Webコンテンツグループ編集画面でもう一度「コンテンツを追加」をクリックして
      コンテンツBを作成します
    7. Webコンテンツグループ編集画面のコンテンツ選択方法のプルダウンから比率指定を選択します
    8. 「表示比率を設定」をクリックしてコンテンツAとコンテンツBの表示比率を指定します
      ※ユーザーのセッション内は同一のコンテンツを表示させたい場合
       (リロードするごとに表示されるコンテンツが変更されないようにする)には
       『セッション内は同一のコンテンツを表示する』を有効にしてください。
    9. 「OK」をクリックしてWebコンテンツグループ編集画面を閉じます

作成したABテスト用のWebコンテンツグループを利用してWebレコメンド設定を行います。

関連記事

『セッション内は同一のコンテンツを表示する』を有効にした場合にコンテンツの表示回数を制御するには》

Webコンテンツグループの表示回数を設定してください。
コンテンツ毎に表示回数を設定し、セッション内で表示回数を満たしたコンテンツがある場合、
『セッション内は同一のコンテンツを表示する』オプションを設定していても、表示回数を満たしていない別のコンテンツが表示されます。

■ 効果測定の確認

  1. 「アクション・効果測定」>「効果測定(Web・アプリ)
  2. 「キャンペーン(ルールベース)」のタブを選択します
  3. 表示する軸/並び順の1軸目でプルダウンから「コンテンツ」を選択します
  4. 絞込条件の「コンテンツグループ」をクリックします
  5. 絞り込み条件画面でABテスト用のコンテンツグループを選択し「OK」をクリックします
  6. 「表示」をクリックします
    ※適宜、画面右上の期間指定をご変更ください

ABテストグループを利用する

ユーザーグループを利用してコンテンツを出し分けます。

  1. ABテストに利用するWebコンテンツグループA・Bを用意します
  2. ABテストを行うWebレコメンド場所を作成します
  3. ルールの設定手順は以下をご参照ください
  • Webレコメンドルールの設定方法
    1. Webレコメンドルール一覧画面で「Webレコメンドルールを作成」をクリックします
    2. Webレコメンドルール編集画面で任意のレコメンドルール名を入力します
    3. 「対象ユーザーの条件を設定」をクリックします
    4. 条件選択画面で「ABテストグループ」をクリックします
      ユーザーグループ種別とユーザーグループを選択して「OK」をクリックします
      例) ユーザーグループ種別:セッション ユーザーグループ:1、2、3、4、5
    5. 「コンテンツを設定」をクリックしてABテストに利用するWebコンテンツグループを設定します
    6. コンテンツ編集画面で「OK」をクリックしてWebレコメンドルール編集画面へ戻ります
    7. 「OK」をクリックしてWebレコメンドルール編集画面を閉じます
    8. Webレコメンドルール一覧画面でもう一度「Webレコメンドルールを作成」をクリックします
    9. Webレコメンドルール編集画面で任意のレコメンドルール名を入力します
    10. 「対象ユーザーの条件を設定」をクリックします
    11. 条件選択画面で「ABテストグループ」をクリックします
      ユーザーグループ種別とユーザーグループを選択して「OK」をクリックします
      例) ユーザーグループ種別:セッション ユーザーグループ:6、7、8、9、10
    12. 「コンテンツを設定」をクリックしてABテストに利用するWebコンテンツグループを設定します
    13. コンテンツ編集画面で「OK」をクリックしてWebレコメンドルール編集画面へ戻ります
    14. 「OK」をクリックしてWebレコメンドルール編集画面を閉じます
    15. 「OK」をクリックしてWebレコメンドルール一覧を閉じます

関連記事

■ 効果測定の確認

  1. 「アクション・効果測定」>「効果測定(Web・アプリ)
  2. 「キャンペーン(ルールベース)」のタブを選択します
  3. 表示する軸/並び順の1軸目でプルダウンから「ルール」を選択します
  4. 絞込条件の「レコメンド場所」をクリックします
  5. 絞り込み条件画面でABテスト用のレコメンド場所を選択し「OK」をクリックします
  6. 「表示」をクリックします
    ※適宜、画面右上の期間指定をご変更ください

ポップアップのABテスト

ポップアップコンテンツ表示あり/なしでABテストを実施する場合、非表示のポップアップコンテンツはクリックするコンテンツがサイト上に表示されず、コンバージョンを計測することができません

非表示のポップアップコンテンツのクリック計測を行うためには、コンテンツのHTMLにRtoaster.click()を記述します。

  • 非表示のポップアップコンテンツの設定方法
    1. 「アクション・効果測定」>「Web設定」>「Webコンテンツグループ設定
    2. 「Webコンテンツグループを作成」をクリックします
    3. Webコンテンツタイプ選択画面で「ポップアップ」をクリックします
    4. Webコンテンツグループ編集(ポップアップ)画面で任意のWebコンテンツグループ名を入力します
    5. 「コンテンツを追加」をクリックして「通常」をクリックします
    6. ポップアップコンテンツテンプレート選択画面でHTMLで書くを選択します
    7. 任意のコンテンツ名を入力します
    8. コンテンツにRtoaster.click()を記述します (※非表示のコンテンツ記述例参照)
    9. 「OK」をクリックしてコンテンツ編集画面を閉じます
    10. 「OK」をクリックしてWebコンテンツグループ編集(ポップアップ)画面を閉じます

関連記事

自動レコメンドを出し分ける

Ver. 5.16

Webレコメンドの場合、レコメンドルールの条件でABテストグループを利用することで自動レコメンド同士の効果比較を行うことができます。
ABテストの対象とする自動レコメンドをルールベースレコメンドのコンテンツに設定します。
レコメンドタイプが「通常」の場合のWebレコメンド設定の設定手順は以下をご参照ください。

  • Webレコメンド場所の設定方法
    1. 「アクション・効果測定」>「Web設定」>「Webレコメンド設定
    2. 「Webレコメンド場所を作成」をクリックします
    3. レコメンドタイプ・レコメンド方法選択画面で「通常」を選択します
    4. レコメンド方法選択で「ルールベースレコメンド」を選択して「OK」をクリックします
    5. Webレコメンド場所編集画面で任意のWebレコメンド場所名を入力します
    6. 任意のエレメントIDを入力します
      ※適宜『このレコメンド場所にアイテムを複数表示する』を有効にして複数枠設定を行ってください
    7. 「保存してレコメンドルールの設定」をクリックしてルールの設定を行います
  • Webレコメンドルールの設定方法
    1. Webレコメンドルール一覧画面で「Webレコメンドルールを作成」をクリックします
    2. Webレコメンドルール編集画面で任意のレコメンドルール名を入力します
    3. 「対象ユーザーの条件を設定」をクリックします
    4. 条件選択画面で「ABテストグループ」をクリックします
    5. ユーザーグループ種別とユーザーグループを選択して「OK」をクリックします
      例) ユーザーグループ種別:セッション ユーザーグループ:1、2、3、4、5
    6. 「コンテンツを設定」をクリックしてコンテンツ編集画面でコンテンツ種別「自動レコメンド」を選択します
    7. ABテスト対象のレコメンド方法を選択します
    8. Webテンプレートを新規作成するか既存から選択します
    9. コンテンツ編集画面で「OK」をクリックしてWebレコメンドルール編集画面へ戻ります
    10. 「OK」をクリックしてWebレコメンドルール編集画面を閉じます
    11. Webレコメンドルール一覧画面でもう一度「Webレコメンドルールを作成」をクリックします
    12. Webレコメンドルール編集画面で任意のレコメンドルール名を入力します
    13. 「対象ユーザーの条件を設定」をクリックします
    14. 条件選択画面で「ABテストグループ」をクリックします
    15. ユーザーグループ種別とユーザーグループを選択して「OK」をクリックします
      例) ユーザーグループ種別:セッション ユーザーグループ:6、7、8、9、10
    16. 「コンテンツを設定」をクリックしてコンテンツ編集画面でコンテンツ種別「自動レコメンド」を選択します
    17. ABテスト対象のレコメンド方法を選択します
    18. Webテンプレートを新規作成するか既存から選択します
    19. コンテンツ編集画面で「OK」をクリックしてWebレコメンドルール編集画面へ戻ります
    20. 「OK」をクリックしてWebレコメンドルール編集画面を閉じます
    21. 「OK」をクリックしてWebレコメンドルール一覧を閉じます

■ 効果測定の確認

ルールベースレコメンドのコンテンツに設定した自動レコメンドの効果測定結果は〔キャンペーン(ルールベース)〕タブから確認します。

  1. 「アクション・効果測定」>「効果測定(Web・アプリ)
  2. 〔キャンペーン(ルールベース)〕のタブを選択します
  3. 表示する軸/並び順の1軸目でプルダウンから「ルール」を選択します
  4. 絞込条件の「レコメンド場所」をクリックします
  5. 絞り込み条件画面でABテスト用のレコメンド場所を選択し「OK」をクリックします
  6. 「表示」をクリックします
    ※適宜、画面右上の期間指定をご変更ください

コントロール群を利用する

Webレコメンドまたはアプリレコメンドでは、ルールベースレコメンドのコントロール群を利用することでレコメンドコンテンツとデフォルトコンテンツで効果比較を行うことができます。

《自動レコメンドのABテストについて》Ver. 5.16

Webレコメンドの場合、ルールベースレコメンドのコントロール群を利用することで自動レコメンドとデフォルトコンテンツの効果比較を行うことができます。

Webレコメンド設定でコントロール群を設定する場合の設定例は以下のとおりです。

  • Webレコメンドのコントロール群設定方法
    1. 「アクション・効果測定」>「Web設定」>「Webレコメンド設定
    2. 「Webレコメンド場所を作成」をクリックします
    3. Webレコメンド場所タイプ選択画面で「通常」を選択します
    4. レコメンド方法選択画面で「ルールベースレコメンド」を選択します
    5. Webレコメンド場所編集画面で任意のWebレコメンド場所名を入力します
    6. 任意のエレメントIDを入力します
      ※自動レコメンドのABテストを行う場合は適宜複数枠設定を行ってください
    7. 「オプション」を展開してコントロール群を使用した効果測定の『比較対象としてデフォルトコンテンツを表示する』を有効にします
    8. 任意のデフォルトコンテンツの割合(%)を入力します
    9. 「保存してレコメンドルールの設定」をクリックしてルールの設定を行います
      ※自動レコメンドのABテストを行う場合はコンテンツで「自動レコメンド」を選択してください

関連記事

《コントロール群の表示判定について》

サイト訪問ユーザーコントロール群が適用されるか否かは、セッション開始後に初めて該当するレコメンド場所が表示されたタイミングで決定されます。
この表示判定はセッションが終了するまで保持されます。

コントロール群とはユーザーのセッション開始時に設定した割合でレコメンドルールを適用
しないグループに振り分けます。(ユーザー×セッション単位)

そのため、50%と設定するとセッション開始時にその確率でコントロール群に振り分けます。

コントロール群に振り分けられたユーザーは、そのセッション中はレコメンドルールが適用
されなくなります。

なお、コントロール群の割合が異なるレコメンド場所がある場合は、割合毎にコントロール
群の振り分けが行われ、同じ割合の場合は共通です。

■ 効果測定の確認

効果測定画面でレコメンドを適用した場合と、適用しなかった場合の結果を比較できます。

  1. 「アクション・効果測定」>「効果測定(Web・アプリ)
  2. 「キャンペーン(ルールベース)」のタブを選択します
  3. 表示する軸/並び順の1軸目でプルダウンから「ルール」を選択します
  4. 絞込条件の「レコメンド場所」をクリックします
  5. 絞り込み条件画面でABテスト用のレコメンド場所を選択し「OK」をクリックします
  6. コントロール群のチェックが入っていることを確認します(デフォルトで有効)
  7. 「表示」をクリックします
    ※適宜、画面右上の期間指定をご変更ください