什么是拆分對比實驗？| 騰訊廣告平臺

功能介紹

拆分對比實驗是面向廣告主的自助實驗工具，通過實驗系統實現待測廣告的競爭隔離，得到有效實驗結論。通過該工具，廣告主可以了解到不同的投放策略對廣告表現的影響，從而依據實驗結論有效進行后續的廣告投放優化。

新策略測試、新賬戶測試和合約投放前測試，這三種情況下都強烈建議使用拆分對比實驗。通過實驗系統實現隔離競爭，避免多條對比策略之間的內部擠壓，營造公平環境。可以讓不同策略快速積累足量、無偏的實驗數據，得到有效實驗結論。

1. 拆分對比實驗原理

拆分對比實驗將實驗中的廣告進行流量隔離，每個廣告只能獲得自身的1/n流量（n=實驗廣告數）。如您創建的實驗中有2條實驗廣告，則每條廣告可以獲得自身50%的流量。通過實驗廣告間的流量隔離保證實驗廣告處于相同的競爭環境中，得到公平的測試結果。需要說明的是，實驗廣告只會相互隔離，和賬戶中的其他廣告還是具有競爭關系的。

2. 拆分對比實驗的優勢有哪些？

（1）操作簡單：通過一次實驗創建，最多同時驗證5種投放策略，無需分別創建廣告，節省實驗操作時間，提高實驗效率。

（2）專屬報表&系統判定實驗結論：實驗數據采用單獨報表展示，方便廣告主直接對比實驗效果。同時，隨著實驗進程的發展，廣告主可以借助“全量推薦度”了解目前的實驗數據是否充分，借助“優勝廣告”的判定輔助進行結果解讀。

（3）隔離競爭，結果無偏：實驗工具通過隔離多條待測廣告間的競爭關系，讓多條廣告面臨完全一致的競爭環境，保證效果數據可比，得到無偏的實驗結論。

（4）實驗后優勝廣告一鍵全量：對于投放效果好的廣告，實驗工具提供直接全量功能讓廣告持續投放。通過實驗驗證投放策略，快速觀察策略情況進而全量表現好的廣告，可以保證廣告在全周期內合理分配流量，提升投放效果。

使用指引

1. 拆分對比實驗如何創建？

（1）拆分對比實驗支持的變量：

定向、出價方式、創意等廣告策略均可以成為拆分對比實驗支持的測試變量。

a. 單一變量模式：

創意—每天新上多套素材、文案，到底哪個創意方向更適合您？

定向—新標簽（標簽組合）測試、人群包測試均可支持，哪種定向設置效果更好？

出價方式—用oCPA還是CPC？用哪種優化目標進行優化？出多少價格更適合您平衡量和成本？

為保證實驗結果有效性，選擇上述變量測試時，一次實驗僅支持一個變量的測試。同時需要說明的是，出價價格為默認變量，廣告主在選定任意變量時，均可對不同廣告出相同/不同價格來進行實驗驗證。

b. 自由變量模式：

想要進行變量間的組合測試？想要設置廣告創建過程中的其他信息為變量？

您可以選擇自由變量方式測試：

自由變量—支持將廣告設置中任意信息作為變量控制（可以是創意、定向、出價方式，也可以是其他信息，還可以用來測試新產品功能），且無需嚴苛控制單一變量，達到快速創建自由變量對照實驗，快速觀察自由變量/組合策略下，廣告效果的目的。

（2）具體使用步驟：

Step1了解實驗：

通過工具箱-投放輔助-拆分對比實驗路徑，進入拆分對比實驗頁面。

Step2新建實驗：

設置想要測試的實驗變量、實驗廣告數和其他廣告設置

Step3觀察效果：

到達實驗時間自動開啟實驗，積累實驗數據，通過拆分對比實驗模塊中的報表隨時查看各實驗廣告的數據對比。

Step4全量實驗：

積累充分的實驗數據后得到實驗結論，選擇實驗全量，將投放效果更佳的實驗廣告保持繼續投放。

常見問題

1. 如何查看實驗結論，全量推薦度和優勝廣告分別是什么？

當實驗開啟后，廣告主可以通過在廣告列表，點擊管理實驗廣告，訪問實驗詳情頁；也可以到工具箱-拆分對比實驗中查看到已創建的實驗詳情：在同一個報表頁面，可以查看到實驗開啟到現在的全部數據，廣告主可以選擇自己關注的指標進行直觀便捷的對比。同時，也可以參考系統給到的指引來輔助進行結果判斷，包括“全量推薦度”及“優勝廣告”兩項指標。

全量推薦度：根據目前的實驗數據充分性，系統會給到全量推薦度指標，分為1星到5星五個等級。實驗數據越充分，實驗對比結論越可信，此時全量推薦度越高，反之則全量推薦度越低。當全量推薦度達到4星及以上時，此時已得到的實驗結論具備統計意義；當全量推薦度在3星及以下時，建議廣告主繼續實驗，待全量推薦度提升后再觀察實驗結論，一般需要1-3天。

優勝廣告：依據實驗數據，當某條/某幾條實驗廣告顯著優于其他實驗廣告時，會判定該條/多條廣告為優勝廣告，建議廣告主全量實驗并將優勝廣告置于開啟狀態。

智能全量：如果在實驗創建初期，授權了“智能放量”，則在系統判斷出優勝廣告后，會自動為優勝廣告傾斜更多流量：僅在此條實驗計劃背后流量不再等分，整個實驗廣告加和仍為100%流量，其中優勝廣告拿到更多流量，劣勢廣告逐步減少流量分配。

同前，當觀察到優勝廣告的顯著優勢后，建議通過全量實驗并將該條廣告置于開啟狀態，來放大優勢。

2. 拆分對比實驗支持修改嗎，推薦使用編輯功能修改的情況有哪些？

可以修改。普通列表視圖下，支持觀察實驗，不可編輯；轉入管理實驗廣告列表后，現已支持編輯，操作方式與普通廣告一致，靈活方便。

以下場景推薦使用編輯功能，幫助實驗順利啟動、觀察數據：

a)審核未通過，實驗無法進行時，通過編輯對創意、和落地頁等予以優化；

b)App類推廣，需配置、或更新渠道包跟進轉化效果時，通過編輯選取應用渠道包進行推廣；

c)必須對某些投放內容進行優化，如修改投放時間、活動細則、定向更新等非實驗變量條件時：將所有實驗廣告均予以同樣編輯修改（此時請注意：不要因編輯修改增加實驗變量因素，使得差異復雜化，難以得到有效結論）。

為控制投放風險，也可以隨時通過快捷編輯入口修改廣告出價，以及隨時暫停或開啟實驗中的任一條廣告。

3. 拆分對比實驗支持復制嗎？

普通列表視圖下，支持觀察實驗，不可復制；轉入管理實驗廣告列表后，現已支持復制，操作方式與普通廣告一致，靈活方便。

拆分對比實驗廣告復制后，是一條普通廣告，并非在實驗條件下新增。在實驗廣告列表中，選中一條實驗廣告點擊復制后，會和復制普通廣告操作一樣，進入廣告的創建流程：

復制后的廣告默認位于當前實驗廣告所在計劃內，可以選擇放入其他計劃、或者新建計劃放入。

復制后的廣告名稱默認是“原實驗廣告名稱”-副本。

4. 對于不同種類的廣告主，建議的實驗方案分別是什么？

對于初期使用拆分對比實驗的廣告主來說，建議選定明確的測試目標（如測試A/B兩個標簽的效果，或測試兩個素材的效果），并將測試目標設置成唯一變量，價格保持相同。在測試過程中，如需調整價格，保證實驗中的廣告同時調整并調整為相同價格。通過嚴格的控制變量法得到有效的實驗結果。建議通過實驗驗證7天以上時間，全量后選取效果較好的實驗廣告繼續投放。

對于有經驗的廣告主來說，價格可以成為您調整實驗的關鍵。在實驗開始后，您可以通過對價格的調整將多條實驗廣告的轉化成本或轉化量調平，來在相同成本的情況下對比轉化量的大小或在相同轉化量的情況下對比成本的高低。

以上講解了“什么是拆分對比實驗？” 對于廣告投放，廣告主可通過該實驗了解到不同的投放策略對廣告表現的影響，從而依據結果有效進行廣告投放優化。如有需要了解更多關于騰訊廣告投放的問題，歡迎您咨詢巨宣網絡！

公司優勢

開戶流程

注意事項