© 2025 上海天擎天拓信息(xi)技術股份有限公司 版(ban)權所有
對于廣(guang)大應用(yong)開(kai)(kai)(kai)發團(tuan)隊,尤(you)其是游戲APP的開(kai)(kai)(kai)發者(zhe)們來說,持續優化應用(yong)界面和設(she)置的常(chang)用(yong)方(fang)式(shi)之(zhi)一是開(kai)(kai)(kai)展 A/B 測試。
什么(me)是(shi) A/B 測試
將兩個測試(shi)版本同時呈現給分組(zu)的用戶進行實(shi)驗,并保(bao)持各組(zu)用戶的組(zu)成和(he)屬性相似,最終(zhong)在測試(shi)完(wan)成后(hou)選(xuan)出(chu)較好(hao)的選(xuan)項實(shi)行操作(zuo),整個過程我們稱為 A/B 測試(shi)。

然而在進行測(ce)試(shi)(shi)時,開發(fa)者們一(yi)旦遇到新(xin)的問題,不得不重新(xin)打包一(yi)個(ge)甚至多個(ge)版本來重復測(ce)試(shi)(shi)和(he)比對數(shu)據,這一(yi)切(qie)都需要耗費大量的人(ren)力精力。本期(qi)內容由谷歌(ge)的變現合作(zuo)伙伴 WebEye為大家介紹Firebase 的 A/B 測(ce)試(shi)(shi)流(liu)程(cheng)和(he)特點,學會(hui)之后(hou)能(neng)幫助大家成為 A/B 測(ce)試(shi)(shi)小能(neng)手(shou),優(you)化應用品(pin)質,賺取更高收益。
Firebase A/B 測試 3個(ge)亮點
1、參數設置簡單,容易上手
通(tong)過在 Remote Config 里更改(gai)幾個(ge)參數值(zhi)就(jiu)能(neng)自動(dong)修改(gai)應用設置,不用寫(xie)代碼(ma)或重新打包數據。
2、平(ping)均分(fen)配流量(liang),提升精度(du)
以(yi)設置百(bai)分比的方式平均分配流量,達到讓全部或部分用戶參與實驗(yan)的目標(biao),確保每一個變體在(zai)測試投放時都擁有相同(tong)的用戶屬性,變量試驗(yan)靈(ling)活。

3、對比試(shi)驗結(jie)果,快速決策
Firebase 自帶(dai)的(de) Analytics 工具可(ke)(ke)呈現實時可(ke)(ke)視(shi)化圖表,幫助開(kai)發者們在觀察試驗(yan)結果后迅速做出判斷。這個特點能有效(xiao)減免分析人員每日篩數據(ju)做圖表的(de)重復工作,之后只(zhi)需通過查看可(ke)(ke)視(shi)化圖表就(jiu)能及時了解測試情況。

看(kan)完(wan)三大(da)特點之后,你(ni)(ni)是不是心動得想立即試(shi)用 Firebase 的測(ce)試(shi)功能呢?歡迎了解并收藏以(yi)下的測(ce)試(shi)流程(cheng)。我(wo)們以(yi)一款個性化主題頁(ye)面的應(ying)用為(wei)例,為(wei)你(ni)(ni)分步驟(zou)解析。
1.測試目的
在設計應用(yong)首頁時(shi),研發團隊一開始并不確定是否需要在頂部設置滾動輪播橫幅海(hai)報。為(wei)了更好地了解用(yong)戶的行(xing)為(wei)與喜好,團隊針(zhen)對“頂部滾動輪播橫幅”這(zhe)一元素進行(xing)了 Firebase A/B 測試。

2.測試準備工(gong)作
在為應用開(kai)發一(yi)個新的功能(neng)點時,開(kai)發人員可(ke)以(yi)針對這項功能(neng)在 Firebase 的 Remote Config 中設(she)置參數。此做法不僅可(ke)以(yi)為之后的 A/B 測試做準備,而(er)且可(ke)以(yi)在未來當功能(neng)點發生故障時及時調整或關閉,盡可(ke)能(neng)降(jiang)低因(yin)為 bug 帶來的損失。
案例(li)中,研(yan)發(fa)團隊首(shou)先在 Remote Config 界面(mian)設置(zhi)了(le)一(yi)個頂部滾動橫幅海(hai)報空間的(de)參(can)數(shu),并設置(zhi)默認值為(wei)“TRUE”,即為(wei)默認打開。完成(cheng)開關(guan)(guan)設置(zhi)之后(hou),我們在后(hou)續進行 A/B 測(ce)試時可以直(zhi)接通過關(guan)(guan)閉功能來(lai)完成(cheng)變體設置(zhi),非常(chang)方便。

3.四項測(ce)試步驟
步驟一:創建實(shi)驗(yan)并(bing)設置變量
創(chuang)建(jian)試(shi)驗名稱,選(xuan)擇目標用戶(hu)人群(qun),選(xuan)定參考指標等(deng)。
步驟二:選擇目標用(yong)戶范圍
在定位目(mu)標用戶群(qun)時,你可(ke)以選(xuan)擇(ze)讓所有的(de)用戶都參(can)與(yu)到(dao)測(ce)試中(zhong)(zhong),即在目(mu)標用戶的(de)百分(fen)比(bi)填寫(xie)100%;或(huo)者選(xuan)擇(ze)把(ba)控風險,僅選(xuan)擇(ze)讓一部分(fen)的(de)用戶參(can)與(yu)到(dao)試驗過程(cheng)中(zhong)(zhong),比(bi)如在此(ci)次試驗中(zhong)(zhong)僅選(xuan)擇(ze)讓50%的(de)用戶參(can)與(yu)到(dao)測(ce)試中(zhong)(zhong)。

步驟三(san):設置最(zui)主(zhu)要的參數指標
在(zai) Remote Config 界(jie)面(mian)中你需要設(she)定一個最主(zhu)要的(de)(de)(de)指(zhi)標,用于以(yi)后確定試驗(yan)中的(de)(de)(de)領先(xian)變體,同時(shi)額外設(she)置多個追蹤的(de)(de)(de)其他指(zhi)標,以(yi)便更(geng)全面(mian)地了解(jie)試驗(yan)數(shu)據。
例如在(zai)這個案(an)例中(zhong),團(tuan)隊將用戶的(de)一日留存(cun)作為最主(zhu)要的(de)參數指(zhi)標,并額外設(she)置了三個衡(heng)量指(zhi)標:主(zhu)題瀏覽量,主(zhu)頁(ye)停(ting)留時(shi)長和應用使用時(shi)間。

步驟(zou)四(si):設置對照組與試驗變體
在參數列表里(li)選擇自己之前(qian)設(she)置好的(de)功能參數,通過(guo)更改一個(ge)參數值就(jiu)能完成對照組和(he)變體的(de)設(she)置。在一些針對應用界面顏(yan)色,廣告時長等參數的(de)試驗時,也可以(yi)同時設(she)置多個(ge)變體,來選擇一個(ge)最優的(de)配置。

4.數據(ju)分析
根據(ju)預設好的(de)觀測(ce)指標,Firebase 的(de) A/B 測(ce)試(shi)連續數據(ju)追蹤(zong)與分析,自動評估最優試(shi)驗結果。
5.測試(shi)結果
在(zai)本次的試驗中,系統根據數據判定(ding)沒有(you)頂部(bu)滾動橫幅(fu)是(shi)更好的選擇。因此(ci)應用團隊在(zai)確(que)定(ding)結果后(hou),自動將應用全部(bu)調整為首頁沒有(you)滾動橫幅(fu)的版本。經過這次測試與優化,應用次日(ri)留存提升了19%,整體收益(yi)提升23%。

閱讀完此次測(ce)試的(de)整個過(guo)程(cheng)(cheng),相信你(ni)已經體會到(dao) Firebase 的(de) A/B 測(ce)試有哪(na)些優勢。例如(ru)完全(quan)不需要(yao)技術(shu)開發(fa)人員(yuan)參與(yu)流程(cheng)(cheng),運營(ying)人員(yuan)就能輕松搞(gao)定。相信 Firebase 的(de) A/B 測(ce)試會成為你(ni)們的(de)新幫手,挖掘出更廣闊(kuo)的(de)應(ying)用的(de)潛力(li)與(yu)價值。
文章標簽(qian): 谷(gu)歌廣告
版權聲明:文章來源互聯(lian)網,如有侵權行為,請聯(lian)系我們刪除。
對(dui)于廣(guang)大應(ying)用開(kai)發團隊(dui),尤(you)其是(shi)游戲(xi)APP的(de)開(kai)發者們來說(shuo),持續(xu)優化應(ying)用界面和設置的(de)常用方(fang)式之一是(shi)開(kai)展 A/B 測(ce)試。
什么是(shi) A/B 測試
將兩個測試版本(ben)同時呈現給分組的用(yong)戶進行實驗,并保持各組用(yong)戶的組成和屬性(xing)相(xiang)似,最終在(zai)測試完(wan)成后選(xuan)出較好的選(xuan)項實行操(cao)作,整個過(guo)程(cheng)我們稱為 A/B 測試。

然而在(zai)進行(xing)測(ce)試(shi)時,開發者(zhe)們一(yi)(yi)旦(dan)遇(yu)到新的(de)(de)問(wen)題(ti),不得不重新打包一(yi)(yi)個甚至多個版(ban)本(ben)來重復測(ce)試(shi)和(he)比(bi)對(dui)數據,這一(yi)(yi)切都需要耗(hao)費大量的(de)(de)人力(li)(li)精力(li)(li)。本(ben)期內容由谷歌的(de)(de)變(bian)現(xian)合(he)作(zuo)伙(huo)伴 WebEye為(wei)大家介紹Firebase 的(de)(de) A/B 測(ce)試(shi)流程(cheng)和(he)特點(dian),學會之后能幫助大家成為(wei) A/B 測(ce)試(shi)小(xiao)能手,優化(hua)應用品質,賺(zhuan)取更(geng)高收益(yi)。
Firebase A/B 測試 3個亮點
1、參數設置簡單,容(rong)易(yi)上手(shou)
通過在(zai) Remote Config 里更改幾個參數(shu)值就(jiu)能自動修改應用(yong)設置,不用(yong)寫(xie)代碼或重新打包數(shu)據。
2、平均(jun)分配流(liu)量(liang),提(ti)升精(jing)度
以設(she)置(zhi)百分(fen)比的(de)方式平均分(fen)配流量,達到讓全部(bu)或(huo)部(bu)分(fen)用戶(hu)參與實驗的(de)目標,確保每一個變(bian)體在測(ce)試投放時都擁有相(xiang)同(tong)的(de)用戶(hu)屬性,變(bian)量試驗靈(ling)活。

3、對(dui)比(bi)試驗結果(guo),快速決(jue)策
Firebase 自帶的(de) Analytics 工(gong)具可(ke)呈(cheng)現實時可(ke)視(shi)化(hua)圖表,幫(bang)助開發者(zhe)們(men)在觀察試驗結(jie)果后迅速(su)做(zuo)出判斷(duan)。這個(ge)特點(dian)能(neng)(neng)有效減免分(fen)析(xi)人員每日篩數據(ju)做(zuo)圖表的(de)重復工(gong)作,之后只需通過(guo)查(cha)看可(ke)視(shi)化(hua)圖表就(jiu)能(neng)(neng)及(ji)時了解測試情況。

看完三大特點之后(hou),你(ni)是不是心動得想立即試用 Firebase 的測試功能呢?歡(huan)迎了解并(bing)收藏以下的測試流程。我們以一款個(ge)性化主題(ti)頁面的應用為例(li),為你(ni)分(fen)步驟(zou)解析(xi)。
1.測試目的
在設計應用首頁時,研發團隊一(yi)開始并不確(que)定(ding)是(shi)否需要在頂(ding)部(bu)(bu)設置滾(gun)動輪(lun)播橫幅(fu)海報。為了更好地了解用戶的行為與喜好,團隊針對“頂(ding)部(bu)(bu)滾(gun)動輪(lun)播橫幅(fu)”這(zhe)一(yi)元素進行了 Firebase A/B 測試。

2.測(ce)試(shi)準備工作
在(zai)為(wei)(wei)應用開發(fa)一(yi)個新的(de)(de)(de)功能(neng)點(dian)時,開發(fa)人員可以(yi)針(zhen)對這(zhe)項功能(neng)在(zai) Firebase 的(de)(de)(de) Remote Config 中設置(zhi)參數。此(ci)做法(fa)不(bu)僅可以(yi)為(wei)(wei)之(zhi)后的(de)(de)(de) A/B 測試(shi)做準備,而且(qie)可以(yi)在(zai)未來當功能(neng)點(dian)發(fa)生故障時及時調(diao)整(zheng)或關閉,盡可能(neng)降低(di)因為(wei)(wei) bug 帶來的(de)(de)(de)損(sun)失。
案例中,研發團隊(dui)首先在 Remote Config 界面設置了一個頂部滾(gun)動(dong)橫(heng)幅海報(bao)空(kong)間(jian)的參數,并設置默認值(zhi)為(wei)“TRUE”,即為(wei)默認打開。完成開關(guan)(guan)設置之(zhi)后,我們在后續進(jin)行 A/B 測(ce)試時(shi)可以(yi)直接通過關(guan)(guan)閉功能來完成變體設置,非常方便。

3.四(si)項測試步驟
步驟一:創建(jian)實驗并設置變(bian)量(liang)
創建(jian)試驗名稱,選擇目標用(yong)戶人群,選定參考指標等。
步驟(zou)二(er):選擇目標用戶范圍
在定位目標用(yong)戶群(qun)時,你可(ke)以(yi)選擇讓(rang)所有的(de)(de)用(yong)戶都(dou)參(can)與到測試中,即在目標用(yong)戶的(de)(de)百分比填寫100%;或者(zhe)選擇把控(kong)風險,僅選擇讓(rang)一部(bu)分的(de)(de)用(yong)戶參(can)與到試驗(yan)過程中,比如在此次(ci)試驗(yan)中僅選擇讓(rang)50%的(de)(de)用(yong)戶參(can)與到測試中。

步驟三:設(she)置最主要的參數指標
在(zai) Remote Config 界面(mian)(mian)中(zhong)你需要(yao)設定一個最主要(yao)的(de)指標,用于(yu)以后確(que)定試驗中(zhong)的(de)領先(xian)變體,同時額(e)外設置(zhi)多個追蹤(zong)的(de)其他指標,以便更全面(mian)(mian)地了解試驗數據。
例如在這個(ge)(ge)案例中(zhong),團隊(dui)將用(yong)戶(hu)的一日(ri)留存(cun)作為最(zui)主(zhu)要的參數(shu)指標,并額外設置了三個(ge)(ge)衡量指標:主(zhu)題瀏覽(lan)量,主(zhu)頁停(ting)留時(shi)長和應用(yong)使(shi)用(yong)時(shi)間。

步驟四:設置對照組與試(shi)驗(yan)變體
在參數列表里選擇(ze)自(zi)己(ji)之(zhi)前設置好的功(gong)能參數,通過(guo)更改(gai)一個參數值就能完成對(dui)照組(zu)和變體(ti)的設置。在一些針(zhen)對(dui)應用界(jie)面顏色,廣告時長等參數的試(shi)驗時,也可(ke)以同(tong)時設置多個變體(ti),來選擇(ze)一個最優的配置。

4.數據分析
根據預設好的觀測(ce)指標,Firebase 的 A/B 測(ce)試(shi)連(lian)續數據追蹤(zong)與(yu)分(fen)析,自動評估最優試(shi)驗(yan)結果。
5.測試(shi)結(jie)果
在本次(ci)的(de)試驗中,系統(tong)根據數據判定沒有頂部滾動橫(heng)(heng)幅是更好的(de)選擇。因此應用團(tuan)隊在確定結(jie)果后(hou),自動將應用全(quan)部調整為首頁沒有滾動橫(heng)(heng)幅的(de)版本。經過這次(ci)測試與優化,應用次(ci)日留存提(ti)升了19%,整體收(shou)益提(ti)升23%。

閱讀完此次測(ce)試(shi)的(de)整個(ge)過程,相(xiang)信你已經體會到 Firebase 的(de) A/B 測(ce)試(shi)有(you)哪些優勢(shi)。例如完全不需要技術開發(fa)人員參與(yu)流程,運(yun)營人員就能輕松(song)搞(gao)定。相(xiang)信 Firebase 的(de) A/B 測(ce)試(shi)會成為你們的(de)新幫手,挖掘(jue)出更(geng)廣闊的(de)應用的(de)潛力與(yu)價值。
文章(zhang)標(biao)簽(qian): 谷歌(ge)廣告(gao)
版權聲(sheng)明:文章來(lai)源(yuan)互(hu)聯網,如(ru)有侵權行為,請聯系我們刪除。