ÿÿ A/B Test CPP | Adapty Ads Manager | Tài liệu Adapty

A/B Test CPP trong Adapty Ads Manager

A/B Test CPP cho phép bạn so sánh các trang sản phẩm tùy chỉnh (CPP) vá»›i nhau trong Apple Ads. Bạn chá»n từ 2 đến 4 trang sản phẩm, và Adapty Ads Manager sẽ luân phiên phân phối traffic giữa chúng, thu thập dữ liệu hiệu suất, và cho bạn biết trang nào có tá»· lệ chuyển đổi tốt nhất. Bạn có thể đưa trang sản phẩm mặc định cá»§a mình vào như má»™t trong các biến thể, để kiểm tra xem trang tùy chỉnh có hiệu quả hÆ¡n trang mặc định hiện tại hay không.

Äiá»u kiện tiên quyết

Trước khi tạo CPP A/B test, hãy đảm bảo:

  • Apple Ads Manager đã được kết nối: Làm theo hướng dẫn cài đặt nếu bạn chưa thá»±c hiện.
  • Nhóm quảng cáo nguồn có lưu lượng truy cập: Nhóm quảng cáo bạn muốn kiểm tra phải ít nhất 28 ngày tuổi và có lượt hiển thị, lượt nhấn, và lượt cài đặt trong khoảng thá»i gian đó. Apple Ads Manager sá»­ dụng lịch sá»­ này để ước tính thá»i gian chạy test và kích thước mẫu cần thiết.
  • Bạn có ít nhất má»™t trang sản phẩm tùy chỉnh: Tạo CPPs trong App Store Connect trước. Apple Ads Manager sẽ Ä‘á»c chúng tá»± động.

Tạo CPP A/B test

Äể tạo test, trong thanh bên trái, vào CPP A/B Tests và nhấn Create A/B Tests.

Trang CPP A/B Tests với nút Create A/B Tests

Trình hướng dẫn có bốn bước: Ad Group(s), Ad Creative(s), Testing Method, và Review.

1. Ad Group(s)

Nhập Test Name và nhấn Select Ad Group để chá»n nhóm quảng cáo chứa các CPP bạn muốn kiểm tra. Bạn có thể chá»n tối Ä‘a bốn nhóm quảng cáo từ cùng má»™t chiến dịch, nhưng chỉ khi bạn muốn kiểm tra má»™t ad creative duy nhất cho tất cả chúng. Äể so sánh nhiá»u CPP, hãy chá»n má»™t nhóm quảng cáo.

Trình hướng dẫn Create CPP A/B Test: bước Ad Group(s)

2. Ad Creative(s)

Chá»n các CPP bạn muốn so sánh. Bạn có thể thêm Default Product Page (được đánh dấu là Control) cùng tối Ä‘a ba Custom Product Pages, tổng cá»™ng từ 2 đến 4 biến thể.

  • Default Product Page: Nhấn + Add Default để thêm trang sản phẩm mặc định hiện tại làm biến thể kiểm soát.
  • Custom Product Pages: Nhấn + Select CPP để chá»n trang sản phẩm tùy chỉnh từ App Store Connect.
Trình hướng dẫn Create CPP A/B Test: bước Ad Creative(s)

3. Phương pháp kiểm tra

Cấu hình cách thức chạy test. Adapty Ads Manager tự động tính toán Calculated Test Duration, Start Time, và End Time — các giá trị sẽ cập nhật mỗi khi bạn thay đổi một trong ba cài đặt dưới đây.

Create CPP A/B Test wizard: Testing Method step with switch preset, precision, and confidence dropdowns

Switch Time Preset

Tần suất hệ thống luân chuyển giữa các biến thể. Nếu bạn chá»n giá trị quá cao so vá»›i lưu lượng truy cập thá»±c tế, hệ thống sẽ tá»± động hạ xuống mức phù hợp.

Khoảng thá»i gianMức lưu lượng truy cập thông thưá»ngThá»i lượng slotÄá»™ dài test thông thưá»ng
HourlyCao (5.000+ lượt hiển thị má»—i ngày)7 giá»Vài ngày
DailyBình thưá»ng24 giá»Vài tuần
WeeklyThấp (ít hơn 400 lượt hiển thị mỗi ngày)7 ngàyVài tháng

Slot là khoảng thá»i gian cÆ¡ bản mà má»™t biến thể chạy trước khi hệ thống xem xét chuyển sang biến thể tiếp theo.

Äá»™ chính xác mong muốn

Mức chênh lệch nhá» nhất vá» tá»· lệ chuyển đổi mà A/B test có thể phát hiện má»™t cách đáng tin cậy. Các tùy chá»n: 1%, 2%, 3%, 4%, 5%. Mặc định: 5%. A/B test vá»›i độ chính xác 1% có thể phát hiện những khác biệt rất nhá» nhưng cần nhiá»u dữ liệu hÆ¡n và chạy lâu hÆ¡n. A/B test vá»›i độ chính xác 5% kết thúc nhanh hÆ¡n nhưng chỉ phát hiện được những khác biệt lá»›n hÆ¡n.

Äá»™ chính xácKhi nào nên dùng
1–2%Bạn mong đợi sự khác biệt nhỠgiữa các CPP và có nhóm quảng cáo có lưu lượng truy cập cao.
3–4%Mặc định cân bằng cho hầu hết các bài kiểm tra.
5%Bạn mong đợi có ngưá»i chiến thắng rõ ràng và muốn có kết quả nhanh chóng.

Mức độ tin cậy

Bạn muốn chắc chắn đến mức nào rằng kết quả là thật chứ không phải nhiá»…u ngẫu nhiên. Các tùy chá»n: 80%, 85%, 90%, 95%, 99%. Mặc định: 90%. Mức độ tin cậy càng cao thì càng cần nhiá»u dữ liệu hÆ¡n.

Äá»™ tin cậyÄánh đổi
80–85%Kết thúc nhanh hơn, nhưng khả năng kết quả là nhiễu cao hơn.
90%Mặc định được khuyến nghị cho hầu hết các test.
95–99%Bảo thá»§ nhất. Cần nhiá»u dữ liệu và thá»i gian test dài nhất.

4. Review

Kiểm tra lại tóm tắt — các nhóm quảng cáo đã chá»n, creatives, phương pháp kiểm tra, thá»i gian, độ chính xác, và mức độ tin cậy — rồi nhấn Start CPP A/B Tests.

Sau khi bạn bắt đầu test, hệ thống sẽ sao chép nhóm quảng cáo cho mỗi biến thể, kích hoạt biến thể đầu tiên, và trạng thái test chuyển sang Running trong vài phút.

Trình hướng dẫn Create CPP A/B Test: bước Review với tóm tắt test

Theo dõi test đang chạy

Äể mở danh sách test, vào CPP A/B Tests ở thanh sidebar bên trái. Bốn tab ở đầu trang lá»c test theo trạng thái:

  • Live: Các test Ä‘ang chạy.
  • Completed: Các test đã hoàn thành.
  • Draft: Các test chưa được bắt đầu.
  • Archive: Các test cÅ© mà bạn không cần hiển thị ở màn hình chính nữa.

Má»—i thẻ test hiển thị tên, trạng thái, khoảng thá»i gian chuyển đổi, độ chính xác mong muốn và thá»i gian đã chạy. Nhấp View metrics để mở rá»™ng bảng biến thể.

Danh sách A/B test CPP với các tab Live, Completed, Draft và Archive

Hiệu suất biến thể

Bảng biến thể so sánh hiệu suất của tất cả các biến thể trong A/B test:

CộtMô tả
Variant NameCPP đang được kiểm tra. Biến thể A luôn là biến thể đầu tiên bạn thêm vào.
Confidence LevelMức độ gần đạt kích thước mẫu yêu cầu của biến thể, tính theo phần trăm từ 0 đến 100.
ImpressionsSố lần Apple hiển thị quảng cáo cho biến thể này.
TTRTỷ lệ nhấn qua (tap-through rate): số lần nhấn chia cho số lần hiển thị.
Tap → Download CRTỷ lệ chuyển đổi từ nhấn sang tải xuống.
CPTChi phí trung bình mỗi lần nhấn.
Avg CPA (Tap-Through)Chi phí thu hút khách hàng trung bình dựa trên lượt tải xuống qua tap-through.
SpendTổng chi tiêu được ghi nhận cho biến thể.
RevenueTổng doanh thu được ghi nhận cho biến thể.
ROASLợi nhuận trên chi tiêu quảng cáo: doanh thu chia cho chi tiêu.
Cho đến khi má»—i biến thể có số lần hiển thị tương đương nhau, Adapty Ads Manager sẽ không đánh dấu ngưá»i chiến thắng. Trong khi dữ liệu vẫn Ä‘ang được thu thập, bạn sẽ thấy má»™t thông báo phía trên bảng: Winner highlighting is paused — variants don’t have comparable impressions yet.
Hàng test được mở rộng với bảng hiệu suất biến thể

Chỉ số chi tiết

Äể xem chi tiết hÆ¡n vá» test, nhấn View metrics để mở trang chỉ số chi tiết. Trang này bao gồm đưá»ng cong giữ chân cohort, so sánh ARPPU và bảng chỉ số được nhóm thành hai phần:

  • Top of funnel · Apple Search Ads: TTR, Download Rate, CPM, CPT và Avg CPA theo từng biến thể.
  • Bottom of funnel · Monetization: Paid users, Paid CR, Cost per Paid, ARPPU, Revenue và ROAS theo từng biến thể. Cá»™t Winner hiển thị biến thể dẫn đầu trên từng chỉ số. Má»™t biến thể chỉ được công nhận là ngưá»i chiến thắng tổng thể khi dẫn đầu trên chỉ số chính và đạt mức độ tin cậy ít nhất 95%.

Äể xem định nghÄ©a các chỉ số, hãy tham khảo Chỉ số trong Adapty Ads Manager.

Trang chỉ số chi tiết với biểu đồ giữ chân cohort, so sánh ARPPU và chỉ số theo từng biến thể

Dừng test

Bạn có thể dừng test bất cứ lúc nào. Test sẽ được đánh dấu là Stopped, nhóm quảng cáo gốc sẽ được khôi phục, và các nhóm quảng cáo đã sao chép sẽ bị tạm dừng.

Äể dừng test Ä‘ang chạy:

  1. Vào CPP A/B Tests trong thanh bên trái.
  2. Nhấn Stop A/B test trên thẻ test, hoặc mở test và nhấn Stop Test.
  3. Xác nhận trong hộp thoại Stop A/B Test?.

Dừng test là hành động cuối cùng — bạn không thể tiếp tục lại. Kết quả đã thu thập được vẫn có sẵn trong tab Completed.

Trạng thái của A/B test

Má»—i A/B test Ä‘á»u trải qua má»™t tập hợp trạng thái cố định:

Trạng tháià nghĩa
DraftA/B test đã được tạo nhưng chưa bắt đầu. Bạn vẫn có thể chỉnh sửa.
StartingÄang thiết lập — hệ thống Ä‘ang sao chép các nhóm quảng cáo và tạo quảng cáo.
RunningA/B test đang chạy. Các biến thể được luân phiên và các chỉ số đang được thu thập.
CompletedThá»i gian đã lên lịch hết hạn hoặc đã đạt đến độ tin cậy. Nhóm quảng cáo gốc được khôi phục.
StoppedBạn đã dừng A/B test theo cách thủ công. Nhóm quảng cáo gốc được khôi phục.
FailedThiết lập thất bại hoặc xảy ra quá nhiá»u lá»—i liên tiếp. Bạn có thể khởi động lại A/B test bị lá»—i.

Cách thức hoạt động

Adapty Ads Manager sử dụng phương pháp Ad Group Switch:

  1. Khi bắt đầu test, hệ thống sao chép nhóm quảng cáo nguồn một lần cho mỗi biến thể. Mỗi bản sao trỠđến một CPP khác nhau (một trong số đó có thể là trang mặc định của bạn).
  2. Má»—i lần chỉ có má»™t bản sao chạy. Hệ thống luân phiên bản sao nào Ä‘ang hoạt động theo lịch cố định (theo giá», ngày hoặc tuần).
  3. Nhóm quảng cáo gốc bị tạm dừng trong thá»i gian test. Nó sẽ được khôi phục vá» trạng thái trước đó khi test kết thúc.
  4. Adaptyÿÿ Ads Manager thu thập số lượt hiển thị, lượt nhấn và lượt tải xuống cho từng biến thể, đồng thá»i theo dõi mức độ má»—i biến thể đã tiến gần đến mẫu có ý nghÄ©a thống kê.
  5. Test tá»± động kết thúc khi má»—i biến thể có đủ dữ liệu, hoặc khi đạt đến thá»i hạn đã đặt.

Những Ä‘iá»u cần biết khi test Ä‘ang chạy

Dưới đây là má»™t số Ä‘iá»u cần lưu ý vá» cách A/B test hoạt động trên dashboard khi Ä‘ang chạy:

  • Các biến thể không chuyển đổi theo đồng hồ cố định: Khoảng thá»i gian chuyển đổi chỉ là mốc cÆ¡ bản, nhưng Adapty Ads Manager sẽ Ä‘iá»u chỉnh thá»i Ä‘iểm để má»—i biến thể thu thập được lượng hiển thị công bằng. Má»™t biến thể có thể duy trì lâu hÆ¡n má»™t slot nếu nó còn thiếu lượt hiển thị.
  • Thá»i gian kết thúc có thể bị dá»i lại: Nếu má»™t biến thể còn thiếu dữ liệu khi đến gần thá»i Ä‘iểm kết thúc đã lên lịch, A/B test sẽ tá»± động được kéo dài để tiếp tục thu thập lượt nhấp. Thá»i gian kết thúc má»›i sẽ hiển thị trên thẻ test.
  • Khi test kết thúc, nhóm quảng cáo gốc được khôi phục: Tất cả các nhóm quảng cáo đã clone sẽ bị tạm dừng và nhóm quảng cáo nguồn trở vá» trạng thái trước khi test. Kết quả vẫn có thể xem trong tab Completed.
ÿÿÿÿ