導(dǎo)語
本期文章向您介紹關(guān)于Google AdMob中介進(jìn)行A/B測試的原理,設(shè)置步驟和分析方案。此外,最佳做法中的4個(gè)要點(diǎn)也將幫助您更合理地實(shí)施操作流程。
AdMob中介A/B測試的
工作原理
借助A/B測試,您可以對中介組中的2個(gè)變體進(jìn)行評(píng)估,然后比較評(píng)估結(jié)果。例如您在使用現(xiàn)有中介組后,為該中介組創(chuàng)建一個(gè)變體,看看哪個(gè)中介組的效果更好。該測試會(huì)在現(xiàn)有中介組設(shè)置和變體之間同時(shí)實(shí)施,并對您的應(yīng)用進(jìn)行用戶進(jìn)行分配,以便對兩者的效果進(jìn)行對比衡量。
您可通過以下方法更改變體B中的中介組設(shè)置:
·添加或移除廣告來源,看看它們對中介組的影響
·通過更改廣告來源的人工有效每千次展示費(fèi)用值來采用不同的廣告瀑布流順序
·啟用或停用對廣告瀑布流中廣告來源的優(yōu)化
·更改向廣告來源發(fā)出廣告請求的次數(shù)
廣告請求數(shù)必須至少達(dá)到10000個(gè),這樣AdMob才能得出測試結(jié)果。
測試案例樣圖
測試為期90天,不過您可隨時(shí)停止測試。根據(jù)測試結(jié)果,您可以決定是使用原來的中介組設(shè)置(變體A)還是使用變體(變體B)。
A/B測試開始后,您無法對變體A或變體B進(jìn)行更改,直到測試停止或結(jié)束。這有助于確保測試公平準(zhǔn)確。
設(shè)置A/B測試
請完成以下步驟來設(shè)置測試:
1.訪問https://apps.admob.com并登錄您的AdMob帳號(hào)。
2.點(diǎn)擊邊欄中的中介。
3.在要為其創(chuàng)建A/B測試的中介組旁邊,點(diǎn)擊設(shè)置A/B測試。
4.為您的測試命名。
5.設(shè)置用戶分配比例。可以是50%、10%或1%。該比例決定著變體B所獲用戶的占比。例如,如果您將用戶分配比例設(shè)置為10%,變體A(現(xiàn)有中介組設(shè)置)將獲得您應(yīng)用90%的用戶,而變體B將獲得10%的用戶。
6.更改變體B中的廣告來源配置。您可以:
·添加或移除廣告來源,看看它們對中介組的影響
·通過更改人工有效每千次展示費(fèi)用值來改變廣告瀑布流的順序
·啟用或停用對廣告瀑布流中廣告來源的優(yōu)化
·更改向廣告來源發(fā)出廣告請求的次數(shù)
7.為保證報(bào)告的準(zhǔn)確性,在變體A和變體B中使用同一廣告來源時(shí),建議您使用不重復(fù)的廣告單元映射。例如,使用變體A中尚未使用的映射。
·點(diǎn)擊廣告單元映射列中的修改。在大多數(shù)情況下,您可以在廣告聯(lián)盟使用的帳號(hào)中找到映射詳細(xì)信息。
·詳細(xì)了解如何添加廣告瀑布流中的廣告來源和出價(jià)廣告來源。
8.點(diǎn)擊保存。
9.點(diǎn)擊開始測試。
A/B測試開始后,您將無法對中介組(包括變體A或變體B)進(jìn)行更改,直到測試停止或結(jié)束為止。在實(shí)驗(yàn)運(yùn)行期間,任何更改都可能會(huì)影響結(jié)果。即,不能在此期間修改廣告單元、地理位置定位等。
10.點(diǎn)擊確認(rèn)框中的開始,測試便會(huì)在幾分鐘內(nèi)開始。
默認(rèn)情況下,測試為期90天,不過您可以根據(jù)可用數(shù)據(jù)選擇采取措施并結(jié)束測試。
不可忽略的最佳做法
·選擇獲得了足夠流量的廣告單元進(jìn)行測試,以便確定出一個(gè)結(jié)果。測試必須先收到至少10000個(gè)廣告請求,然后AdMob才能確定出一個(gè)結(jié)果。
·一次只能更改一項(xiàng)設(shè)置,以便更準(zhǔn)確地將效果差異歸因于特定更改。
·測試至少運(yùn)行兩周。數(shù)據(jù)越詳盡,系統(tǒng)就越能準(zhǔn)確地評(píng)估哪個(gè)變體的效果最好。
·考慮在變體A和變體B中使用不同的映射。這有助于確保廣告瀑布流中廣告來源的測試數(shù)據(jù)和報(bào)告準(zhǔn)確無誤。
對A/B測試結(jié)果進(jìn)行分析并
采取相應(yīng)的措施
中介組頁面上的數(shù)據(jù)會(huì)定期更新。在為期90天的測試期內(nèi),您隨時(shí)可以根據(jù)相關(guān)數(shù)據(jù)結(jié)束測試并將流量分配給某個(gè)變體。將流量分配給某個(gè)變體意味著針對所有用戶將其中一個(gè)變體作為您的中介組配置。
要進(jìn)行A/B測試并監(jiān)控測試結(jié)果,請按以下步驟操作:
·訪問https://apps.admob.com并登錄您的AdMob帳號(hào)。
·點(diǎn)擊邊欄中的中介。
·選擇您要查看的A/B測試所在的中介組。
為了幫助您分析A/B測試的結(jié)果,AdMob會(huì)報(bào)告變體A和變體B按比例推算的每月收入。按比例推算的每月收入是一個(gè)估算值,表示如果您向所有用戶應(yīng)用此變體,在28天內(nèi)預(yù)計(jì)獲得的收入。這樣做可以公平進(jìn)行比較,更準(zhǔn)確地了解每個(gè)變體的效果。
在您啟動(dòng)A/B測試4天,且累積10000次展示后,AdMob會(huì)開始計(jì)算按比例推算的每月收入。
在A/B測試頁面頂部查看按比例推算的每月收入差異,了解變體之間的差異大小。
您還會(huì)看到變體A和變體B的估算收入、有效每千次展示費(fèi)用和匹配率(這些數(shù)據(jù)在整個(gè)測試過程中會(huì)持續(xù)更新)。這些數(shù)據(jù)還可顯示每個(gè)廣告來源在各個(gè)變體中的效果,以便您輕松比較同一個(gè)廣告來源在兩個(gè)變體中的效果。
了解結(jié)果
測試開始后,AdMob會(huì)比較每個(gè)變體的按比例推算的每月收入,以確定哪個(gè)變體的效果更好。確定某個(gè)變體的效果始終明顯優(yōu)于另一個(gè)變體時(shí),AdMob會(huì)在A/B測試頁面上顯示效果更好的變體。我們還會(huì)提供建議采取的措施:“保留原廣告”(變體A的效果更好時(shí))或“應(yīng)用變體”(變體B的效果更好時(shí))。
此外,我們還提供百分比形式的大致幾率,來表示AdMob在確定效果更好的變體方面的確定程度,例如,“變體A的效果比變體B更好的幾率為99%(估算值)”。
AdMob會(huì)根據(jù)以下條件確定效果更好的變體及百分比形式的大致幾率:
·某變體的效果優(yōu)于另一變體的持續(xù)時(shí)間如何。
·兩個(gè)變體之間的差異程度。
·可用的數(shù)據(jù)量。建議選擇流量大的廣告單元,以增加測試期間的可用數(shù)據(jù)量。請注意,廣告請求數(shù)必須至少達(dá)到10000個(gè),這樣AdMob才能得出測試結(jié)果。
持續(xù)時(shí)間越長、效果差異越大、數(shù)據(jù)量越多,越有助于AdMob提高百分比形式的大致幾率。
如果上述任一條件未得到滿足,AdMob便無法確定哪個(gè)變體的效果更好,“A/B測試”頁面也不會(huì)顯示最終結(jié)果。不過,您仍然可以查看測試期間每個(gè)變體的各項(xiàng)指標(biāo)。
設(shè)置的用戶分配比例低于50%時(shí),變體B的數(shù)據(jù)將按一定的比例計(jì)算,從而確保對數(shù)據(jù)進(jìn)行公平的比較,因?yàn)锳dMob會(huì)假設(shè)變體B所獲用戶數(shù)與變體A相同,然后對其數(shù)據(jù)進(jìn)行計(jì)算。
例如,如果將變體B的用戶分配比例設(shè)置為10%,那么該變體帶來的估算收入將乘以9。這樣一來,您就可以將變體B與變體A(用戶分配比例為90%)進(jìn)行公平比較。如果變體B帶來的收入為¥10,則按比例計(jì)算后,變體B帶來的收入為¥90。
采取措施
我們建議讓測試至少持續(xù)兩周,然后再采取措施。在90天的測試期內(nèi),您隨時(shí)可以將流量分配給某個(gè)變體。將流量分配給某個(gè)變體意味著針對所有用戶將其中一個(gè)變體作為您的中介組配置。在決定將流量分配給某個(gè)變體時(shí),請考慮兩個(gè)變體的估算收入的差距及百分比形式的大致幾率。
您可以選擇保留變體A,也可以選擇應(yīng)用變體B:
·要選擇變體A,請點(diǎn)擊保留。原來的中介組配置將保持不變。
·要選擇變體B,請點(diǎn)擊應(yīng)用。我們會(huì)將該變體的設(shè)置應(yīng)用到您的帳號(hào)。
如果您在90天測試期結(jié)束時(shí)仍未將流量分配給某個(gè)變體,系統(tǒng)會(huì)停止測試并針對所有用戶使用變體A,即使變體A并非測試效果最好的變體。
在實(shí)驗(yàn)結(jié)束后到測試到期且變體B被刪除之前,您有30天的時(shí)間選擇變體。
希望以上內(nèi)容對你了解AdMob中介A/B測試功能有所幫助。