導(dǎo)語(yǔ)
本期文章向您介紹關(guān)于Google AdMob中介進(jìn)行A/B測(cè)試的原理,設(shè)置步驟和分析方案。此外,最佳做法中的4個(gè)要點(diǎn)也將幫助您更合理地實(shí)施操作流程。
AdMob中介A/B測(cè)試的
工作原理
借助A/B測(cè)試,您可以對(duì)中介組中的2個(gè)變體進(jìn)行評(píng)估,然后比較評(píng)估結(jié)果。例如您在使用現(xiàn)有中介組后,為該中介組創(chuàng)建一個(gè)變體,看看哪個(gè)中介組的效果更好。該測(cè)試會(huì)在現(xiàn)有中介組設(shè)置和變體之間同時(shí)實(shí)施,并對(duì)您的應(yīng)用進(jìn)行用戶進(jìn)行分配,以便對(duì)兩者的效果進(jìn)行對(duì)比衡量。
您可通過(guò)以下方法更改變體B中的中介組設(shè)置:
·添加或移除廣告來(lái)源,看看它們對(duì)中介組的影響
·通過(guò)更改廣告來(lái)源的人工有效每千次展示費(fèi)用值來(lái)采用不同的廣告瀑布流順序
·啟用或停用對(duì)廣告瀑布流中廣告來(lái)源的優(yōu)化
·更改向廣告來(lái)源發(fā)出廣告請(qǐng)求的次數(shù)
廣告請(qǐng)求數(shù)必須至少達(dá)到10000個(gè),這樣AdMob才能得出測(cè)試結(jié)果。
測(cè)試案例樣圖
測(cè)試為期90天,不過(guò)您可隨時(shí)停止測(cè)試。根據(jù)測(cè)試結(jié)果,您可以決定是使用原來(lái)的中介組設(shè)置(變體A)還是使用變體(變體B)。
A/B測(cè)試開始后,您無(wú)法對(duì)變體A或變體B進(jìn)行更改,直到測(cè)試停止或結(jié)束。這有助于確保測(cè)試公平準(zhǔn)確。
設(shè)置A/B測(cè)試
請(qǐng)完成以下步驟來(lái)設(shè)置測(cè)試:
1.訪問(wèn)https://apps.admob.com并登錄您的AdMob帳號(hào)。
2.點(diǎn)擊邊欄中的中介。
3.在要為其創(chuàng)建A/B測(cè)試的中介組旁邊,點(diǎn)擊設(shè)置A/B測(cè)試。
4.為您的測(cè)試命名。
5.設(shè)置用戶分配比例??梢允?0%、10%或1%。該比例決定著變體B所獲用戶的占比。例如,如果您將用戶分配比例設(shè)置為10%,變體A(現(xiàn)有中介組設(shè)置)將獲得您應(yīng)用90%的用戶,而變體B將獲得10%的用戶。
6.更改變體B中的廣告來(lái)源配置。您可以:
·添加或移除廣告來(lái)源,看看它們對(duì)中介組的影響
·通過(guò)更改人工有效每千次展示費(fèi)用值來(lái)改變廣告瀑布流的順序
·啟用或停用對(duì)廣告瀑布流中廣告來(lái)源的優(yōu)化
·更改向廣告來(lái)源發(fā)出廣告請(qǐng)求的次數(shù)
7.為保證報(bào)告的準(zhǔn)確性,在變體A和變體B中使用同一廣告來(lái)源時(shí),建議您使用不重復(fù)的廣告單元映射。例如,使用變體A中尚未使用的映射。
·點(diǎn)擊廣告單元映射列中的修改。在大多數(shù)情況下,您可以在廣告聯(lián)盟使用的帳號(hào)中找到映射詳細(xì)信息。
·詳細(xì)了解如何添加廣告瀑布流中的廣告來(lái)源和出價(jià)廣告來(lái)源。
8.點(diǎn)擊保存。
9.點(diǎn)擊開始測(cè)試。
A/B測(cè)試開始后,您將無(wú)法對(duì)中介組(包括變體A或變體B)進(jìn)行更改,直到測(cè)試停止或結(jié)束為止。在實(shí)驗(yàn)運(yùn)行期間,任何更改都可能會(huì)影響結(jié)果。即,不能在此期間修改廣告單元、地理位置定位等。
10.點(diǎn)擊確認(rèn)框中的開始,測(cè)試便會(huì)在幾分鐘內(nèi)開始。
默認(rèn)情況下,測(cè)試為期90天,不過(guò)您可以根據(jù)可用數(shù)據(jù)選擇采取措施并結(jié)束測(cè)試。
不可忽略的最佳做法
·選擇獲得了足夠流量的廣告單元進(jìn)行測(cè)試,以便確定出一個(gè)結(jié)果。測(cè)試必須先收到至少10000個(gè)廣告請(qǐng)求,然后AdMob才能確定出一個(gè)結(jié)果。
·一次只能更改一項(xiàng)設(shè)置,以便更準(zhǔn)確地將效果差異歸因于特定更改。
·測(cè)試至少運(yùn)行兩周。數(shù)據(jù)越詳盡,系統(tǒng)就越能準(zhǔn)確地評(píng)估哪個(gè)變體的效果最好。
·考慮在變體A和變體B中使用不同的映射。這有助于確保廣告瀑布流中廣告來(lái)源的測(cè)試數(shù)據(jù)和報(bào)告準(zhǔn)確無(wú)誤。
對(duì)A/B測(cè)試結(jié)果進(jìn)行分析并
采取相應(yīng)的措施
中介組頁(yè)面上的數(shù)據(jù)會(huì)定期更新。在為期90天的測(cè)試期內(nèi),您隨時(shí)可以根據(jù)相關(guān)數(shù)據(jù)結(jié)束測(cè)試并將流量分配給某個(gè)變體。將流量分配給某個(gè)變體意味著針對(duì)所有用戶將其中一個(gè)變體作為您的中介組配置。
要進(jìn)行A/B測(cè)試并監(jiān)控測(cè)試結(jié)果,請(qǐng)按以下步驟操作:
·訪問(wèn)https://apps.admob.com并登錄您的AdMob帳號(hào)。
·點(diǎn)擊邊欄中的中介。
·選擇您要查看的A/B測(cè)試所在的中介組。
為了幫助您分析A/B測(cè)試的結(jié)果,AdMob會(huì)報(bào)告變體A和變體B按比例推算的每月收入。按比例推算的每月收入是一個(gè)估算值,表示如果您向所有用戶應(yīng)用此變體,在28天內(nèi)預(yù)計(jì)獲得的收入。這樣做可以公平進(jìn)行比較,更準(zhǔn)確地了解每個(gè)變體的效果。
在您啟動(dòng)A/B測(cè)試4天,且累積10000次展示后,AdMob會(huì)開始計(jì)算按比例推算的每月收入。
在A/B測(cè)試頁(yè)面頂部查看按比例推算的每月收入差異,了解變體之間的差異大小。
您還會(huì)看到變體A和變體B的估算收入、有效每千次展示費(fèi)用和匹配率(這些數(shù)據(jù)在整個(gè)測(cè)試過(guò)程中會(huì)持續(xù)更新)。這些數(shù)據(jù)還可顯示每個(gè)廣告來(lái)源在各個(gè)變體中的效果,以便您輕松比較同一個(gè)廣告來(lái)源在兩個(gè)變體中的效果。
了解結(jié)果
測(cè)試開始后,AdMob會(huì)比較每個(gè)變體的按比例推算的每月收入,以確定哪個(gè)變體的效果更好。確定某個(gè)變體的效果始終明顯優(yōu)于另一個(gè)變體時(shí),AdMob會(huì)在A/B測(cè)試頁(yè)面上顯示效果更好的變體。我們還會(huì)提供建議采取的措施:“保留原廣告”(變體A的效果更好時(shí))或“應(yīng)用變體”(變體B的效果更好時(shí))。
此外,我們還提供百分比形式的大致幾率,來(lái)表示AdMob在確定效果更好的變體方面的確定程度,例如,“變體A的效果比變體B更好的幾率為99%(估算值)”。
AdMob會(huì)根據(jù)以下條件確定效果更好的變體及百分比形式的大致幾率:
·某變體的效果優(yōu)于另一變體的持續(xù)時(shí)間如何。
·兩個(gè)變體之間的差異程度。
·可用的數(shù)據(jù)量。建議選擇流量大的廣告單元,以增加測(cè)試期間的可用數(shù)據(jù)量。請(qǐng)注意,廣告請(qǐng)求數(shù)必須至少達(dá)到10000個(gè),這樣AdMob才能得出測(cè)試結(jié)果。
持續(xù)時(shí)間越長(zhǎng)、效果差異越大、數(shù)據(jù)量越多,越有助于AdMob提高百分比形式的大致幾率。
如果上述任一條件未得到滿足,AdMob便無(wú)法確定哪個(gè)變體的效果更好,“A/B測(cè)試”頁(yè)面也不會(huì)顯示最終結(jié)果。不過(guò),您仍然可以查看測(cè)試期間每個(gè)變體的各項(xiàng)指標(biāo)。
設(shè)置的用戶分配比例低于50%時(shí),變體B的數(shù)據(jù)將按一定的比例計(jì)算,從而確保對(duì)數(shù)據(jù)進(jìn)行公平的比較,因?yàn)锳dMob會(huì)假設(shè)變體B所獲用戶數(shù)與變體A相同,然后對(duì)其數(shù)據(jù)進(jìn)行計(jì)算。
例如,如果將變體B的用戶分配比例設(shè)置為10%,那么該變體帶來(lái)的估算收入將乘以9。這樣一來(lái),您就可以將變體B與變體A(用戶分配比例為90%)進(jìn)行公平比較。如果變體B帶來(lái)的收入為¥10,則按比例計(jì)算后,變體B帶來(lái)的收入為¥90。
采取措施
我們建議讓測(cè)試至少持續(xù)兩周,然后再采取措施。在90天的測(cè)試期內(nèi),您隨時(shí)可以將流量分配給某個(gè)變體。將流量分配給某個(gè)變體意味著針對(duì)所有用戶將其中一個(gè)變體作為您的中介組配置。在決定將流量分配給某個(gè)變體時(shí),請(qǐng)考慮兩個(gè)變體的估算收入的差距及百分比形式的大致幾率。
您可以選擇保留變體A,也可以選擇應(yīng)用變體B:
·要選擇變體A,請(qǐng)點(diǎn)擊保留。原來(lái)的中介組配置將保持不變。
·要選擇變體B,請(qǐng)點(diǎn)擊應(yīng)用。我們會(huì)將該變體的設(shè)置應(yīng)用到您的帳號(hào)。
如果您在90天測(cè)試期結(jié)束時(shí)仍未將流量分配給某個(gè)變體,系統(tǒng)會(huì)停止測(cè)試并針對(duì)所有用戶使用變體A,即使變體A并非測(cè)試效果最好的變體。
在實(shí)驗(yàn)結(jié)束后到測(cè)試到期且變體B被刪除之前,您有30天的時(shí)間選擇變體。
希望以上內(nèi)容對(duì)你了解AdMob中介A/B測(cè)試功能有所幫助。