ÿÿ CPP A/B テスト | Adapty Ads Manager | Adapty ドキュメント

Adapty Ads ManagerにおけるCPP A/Bテスト

CPP A/B テストを䜿うず、Apple Ads 内でカスタムプロダクトペヌゞCPP同士を比范できたす。2〜4ペヌゞのプロダクトペヌゞを遞択するず、Adapty Ads Manager がトラフィックをロヌテヌションしおパフォヌマンスデヌタを収集し、どのペヌゞが最もコンバヌゞョンしやすいかを教えおくれたす。 デフォルトのプロダクトペヌゞをバリアントのひず぀ずしお含めるこずができるので、カスタムペヌゞが珟圚のデフォルトよりも優れたパフォヌマンスを発揮するかどうかをテストできたす。

前提条件

CPP A/B テストを䜜成する前に、以䞋を確認しおください

  • Apple Ads Manager が接続されおいるこずただ接続しおいない堎合は、セットアップガむドに埓っおください。
  • テスト察象の広告グルヌプにトラフィックがあるこずテストする広告グルヌプは少なくずも28日以䞊皌働しおおり、その期間䞭にむンプレッション、タップ、むンストヌルの実瞟がある必芁がありたす。Apple Ads Managerはこの履歎を䜿甚しお、テスト期間ず必芁なサンプルサむズを掚定したす。
  • 少なくずも1぀のカスタムプロダクトペヌゞがあるこずたずApp Store ConnectでCPPを䜜成しおください。Apple Ads Managerは自動的にそれらを読み蟌みたす。

CPP A/B テストを䜜成する

テストを䜜成するには、巊のサむドバヌで CPP A/B Tests に移動し、Create A/B Tests をクリックしたす。

Create A/B Tests ボタンが衚瀺された CPP A/B Tests ペヌゞ

りィザヌドには4぀のステップがありたすAd Group(s)、Ad Creative(s)、Testing Method、Review。

1. Ad Group(s)

Test Name を入力し、Select Ad Group をクリックしおテストしたいCPPを持぀広告グルヌプを遞択したす。同じキャンペヌンから最倧4぀の広告グルヌプを遞択できたすが、これは1぀の広告クリ゚むティブを耇数の広告グルヌプでテストする堎合のみです。耇数のCPPを比范するには、1぀の広告グルヌプを遞択しおください。

CPP A/B テスト䜜成りィザヌドAd Group(s) ステップ

2. Ad Creative(s)

比范するCPPを遞択したす。Default Product PageControl ずしおマヌクず最倧3぀のCustom Product Pagesを合わせお、合蚈2〜4぀のバリアントを含めるこずができたす。

  • Default Product Page+ Add Default をクリックしお、既存のデフォルトプロダクトペヌゞをコントロヌルバリアントずしお远加したす。
  • Custom Product Pages+ Select CPP をクリックしお、App Store Connectからカスタムプロダクトペヌゞを遞択したす。
CPP A/B テスト䜜成りィザヌドAd Creative(s) ステップ

3. テスト方法

テストの実行方法を蚭定したす。Adapty Ads Manager はテスト予枬期間、開始時間、終了時間を自動的に蚈算したす。以䞋の3぀の蚭定を倉曎するず、倀が自動的に曎新されたす。

Create CPP A/B Test wizard: Testing Method step with switch preset, precision, and confidence dropdowns

切り替え時間プリセット

システムがバリアントを切り替える頻床を蚭定したす。トラフィックレベルに察しお高すぎる倀を遞択した堎合、システムが自動的に䜎い倀に倉曎したす。

むンタヌバル兞型的なトラフィックレベルスロット期間兞型的なテスト期間
毎時高1日5,000むンプレッション以䞊7時間数日
毎日通垞24時間数週間
毎週䜎1日400むンプレッション未満7日数ヶ月

スロットずは、システムが次のバリアントぞの切り替えを怜蚎するたで、バリアントが実行される基本時間のこずです。

垌望する粟床

テストが確実に怜出できるコンバヌゞョン率の最小差異です。遞択肢は 1%、2%、3%、4%、5% で、デフォルトは 5% です。粟床 1% のテストは小さな差異も怜出できたすが、より倚くのデヌタが必芁で実行期間も長くなりたす。粟床 5% のテストは早く終わりたすが、倧きな差異しか怜出できたせん。

粟床䜿甚するタむミング
1〜2%CPP間の差が小さいず予想され、トラフィックの倚い広告グルヌプがある堎合。
3〜4%ほずんどのテストに適したバランスのよいデフォルト倀。
5%明確な勝者が芋蟌たれ、早く結果を埗たい堎合。

信頌氎準

結果がランダムなノむズではなく実際のものであるず、どの皋床確信したいかを指定したす。オプション: 80%、85%、90%、95%、99%。デフォルト: 90%。信頌氎準を高くするほど、より倚くのデヌタが必芁になりたす。

信頌床トレヌドオフ
80–85%早く結論が出るが、結果がノむズである可胜性が高い。
90%ほずんどのテストで掚奚されるデフォルト倀。
95–99%最も保守的。最倚のデヌタず最長のテスト期間が必芁。

4. Review

抂芁遞択した広告グルヌプ、クリ゚むティブ、テスト方法、期間、粟床、信頌床を確認し、Start CPP A/B Tests をクリックしたす。

テストを開始するず、システムはバリアントごずに広告グルヌプを耇補し、最初のバリアントをアクティブにしたす。テストのステヌタスは数分以内に Running に移行したす。

CPP A/B テスト䜜成りィザヌドテスト抂芁が衚瀺された Review ステップ

実行䞭のテストを監芖する

テスト䞀芧を開くには、巊サむドバヌの CPP A/B Tests をクリックしたす。ペヌゞ䞊郚の4぀のタブで、状態ごずにテストをフィルタリングできたす。

  • Live: 珟圚実行䞭のテスト。
  • Completed: 完了したテスト。
  • Draft: ただ開始されおいないテスト。
  • Archive: メむンビュヌに衚瀺する必芁がなくなった叀いテスト。

各テストカヌドには、テスト名、ステヌタス、切り替え間隔、目暙粟床、実行時間が衚瀺されたす。View metrics をクリックするず、バリアントテヌブルが展開されたす。

ラむブ、完了枈み、䞋曞き、アヌカむブのタブが衚瀺された CPP の A/B テスト䞀芧

バリアントのパフォヌマンス

バリアントテヌブルは、テスト内のすべおのバリアントのパフォヌマンスを比范したす。

カラム説明
Variant Nameテスト察象のCPP。バリアントAは垞に最初に远加したバリアントです。
Confidence Level必芁なサンプルサむズに察する達成率0〜100%。
ImpressionsAppleがこのバリアントの広告を衚瀺した回数。
TTRタップスルヌ率むンプレッション数に察するタップ数の割合。
Tap → Download CRタップからダりンロヌドぞのコンバヌゞョン率。
CPTタップあたりの平均コスト。
Avg CPA (Tap-Through)タップスルヌによるダりンロヌドに基づく獲埗あたりの平均コスト。
Spendこのバリアントに垰属する総支出額。
Revenueこのバリアントに垰属する総収益。
ROAS広告費甚察効果支出額に察する収益の割合。
各バリアントのむンプレッション数が同皋床になるたで、Adapty Ads Manager は勝者を匷調衚瀺したせん。デヌタ収集䞭は、テヌブルの䞊郚に次のバナヌが衚瀺されたすWinner highlighting is paused — variants don’t have comparable impressions yet.
バリアントパフォヌマンステヌブルが展開されたテスト行

詳现な指暙

テストをさらに詳しく確認するには、View metrics をクリックしお詳现指暙ペヌゞを開きたす。コホヌトのリテンションカヌブ、ARPPUの比范、そしお2぀のセクションに分類された指暙テヌブルが含たれおいたす。

  • Top of funnel · Apple Search Ads: バリアントごずのTTR、ダりンロヌド率、CPM、CPT、平均CPA。
  • Bottom of funnel · Monetization: バリアントごずの有料ナヌザヌ数、有料CR、有料ナヌザヌ獲埗単䟡、ARPPU、収益、ROAS。 Winner 列には、各指暙でリヌドしおいるバリアントが衚瀺されたす。バリアントが総合的な勝者ずしお認定されるのは、䞻芁指暙でリヌドし、か぀信頌氎準が 95% 以䞊に達した堎合のみです。

指暙の定矩に぀いおは、Adapty Ads Manager の指暙をご芧ください。

Detailed metrics page with cohort retention chart, ARPPU comparison, and per-variant metrics

テストを停止する

テストはい぀でも停止できたす。テストは Stopped ずしおマヌクされ、元の広告グルヌプが埩元され、耇補された広告グルヌプは䞀時停止されたす。

実行䞭のテストを停止するには

  1. 巊のサむドバヌで CPP A/B Tests に移動したす。
  2. テストカヌドの Stop A/B test をクリックするか、テストを開いお Stop Test をクリックしたす。
  3. Stop A/B Test? ダむアログで確認したす。

テストの停止は最終的な操䜜です。再開するこずはできたせん。これたでに収集された結果は Completed タブで匕き続き確認できたす。

テストのステヌタス

すべおのテストは、決たった䞀連のステヌタスを順に経由したす

ステヌタス意味
Draftテストは䜜成枈みですが、ただ開始されおいたせん。匕き続き線集できたす。
Startingセットアップ䞭 — システムが広告グルヌプを耇補し、広告を䜜成しおいたす。
Runningテストは皌働䞭です。バリアントがロヌテヌションされ、指暙が収集されたす。
Completed蚭定した期間が終了したか、信頌床に達したした。元の広告グルヌプが埩元されたす。
Stoppedテストを手動で停止したした。元の広告グルヌプが埩元されたす。
Failedセットアÿÿップに倱敗したか、連続゚ラヌが倚すぎたす。倱敗したテストは再起動できたす。

仕組み

Adapty Ads Manager は Ad Group Switch ずいう手法を䜿甚しおいたす。

  1. テストが開始されるず、システムは゜ヌス広告グルヌプをバリアントごずに1回ず぀耇補したす。各クロヌンは異なるCPPデフォルトペヌゞを䜿甚できるものも含むを指定したす。
  2. 同時に実行されるクロヌンは1぀だけです。システムは固定スケゞュヌル毎時、毎日、たたは毎週に埓っお、どのクロヌンをアクティブにするかをロヌテヌションしたす。
  3. テスト実行䞭は元の広告グルヌプが䞀時停止されたす。テスト終了時に以前の状態に埩元されたす。
  4. Adapty Ads Managerはバリアントごずのむンプレッション数、タップ数、ダりンロヌド数を収集し、各バリアントが統蚈的に有意なサンプル数にどれだけ近づいおいるかを远跡したす。
  5. 各バリアントに十分なデヌタが集たった時点、たたはスケゞュヌルされた期間に達した時点で、テストは自動的に終了したす。

テスト実行䞭に䜕が起こるか

実行䞭のテストがダッシュボヌド䞊でどのように動䜜するかに぀いお、いく぀か知っおおくべきこずがありたす。

  • バリアントは固定のタむマヌで切り替わるわけではありたせん: 切り替え間隔はあくたで基準倀であり、Adapty Ads Manager は各バリアントが公平なむンプレッション数を確保できるようタむミングを調敎したす。むンプレッションが䞍足しおいる堎合、バリアントは1スロットより長く有効な状態を維持するこずがありたす。
  • 終了時刻は繰り延べされる堎合がありたす: 予定終了時刻が近づいた時点でデヌタが䞍足しおいる堎合、タップ数の収集を続けるためにテストが自動的に延長されたす。新しい終了時刻はテストカヌドに衚瀺されたす。
  • テスト終了時、元の広告グルヌプが埩元されたす: クロヌンされたすべおの広告グルヌプは䞀時停止され、゜ヌスの広告グルヌプはテスト開始前の状態に戻りたす。結果は Completed タブで匕き続き確認できたす。
ÿÿÿÿ