A/B測(cè)試是為Web或App界面或流程制作兩個(gè)(A/B)或多個(gè)(A/B/n)版本,在同一時(shí)間維度,分別讓組成成分相同(相似)的訪客群組(目標(biāo)人群)隨機(jī)的訪問(wèn)這些版本,收集各群組的用戶體驗(yàn)數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù),最后分析、評(píng)估出最好版本,正式采用。
| 問(wèn)題解答
A/B測(cè)試就是為同一個(gè)目標(biāo)制定兩個(gè)版本,這兩個(gè)版本只有某個(gè)方面不一樣,其他方面保持一致,例如兩個(gè)版本只有按鈕的顏色不一樣。
讓一部分用戶使用A版本(實(shí)驗(yàn)組),另一部分用戶使用 B版本(對(duì)照組)。試運(yùn)行一段時(shí)間后,分別統(tǒng)計(jì)兩組用戶的表現(xiàn), 然后對(duì)兩組數(shù)據(jù)進(jìn)行對(duì)比分析,最后選擇效果更好的版本正式發(fā)布給全部用戶。
| 拓展閱讀
A/B測(cè)試的實(shí)施步驟
1. 現(xiàn)狀分析:分析業(yè)務(wù)數(shù)據(jù),確定當(dāng)前最關(guān)鍵的改進(jìn)點(diǎn)。
2. 假設(shè)建立:根據(jù)現(xiàn)狀分析作出優(yōu)化改進(jìn)的假設(shè),提出優(yōu)化建議。
3. 設(shè)定目標(biāo):設(shè)置主要目標(biāo),用來(lái)衡量各優(yōu)化版本的優(yōu)劣;設(shè)置輔助目標(biāo),用來(lái)評(píng)估優(yōu)化版本對(duì)其他方面的影響。
4. 界面設(shè)計(jì):制作2(或多)個(gè)優(yōu)化版本的設(shè)計(jì)原型。
5. 技術(shù)實(shí)現(xiàn):
(1)網(wǎng)站、App(Android/iOS) 、微信小程序和服務(wù)器端需要添加各類A/B測(cè)試平臺(tái)提供的SDK代碼,然后制作各個(gè)優(yōu)化版本。
(2)Web平臺(tái)、Android和iOS APP需要添加各類A/B測(cè)試平臺(tái)提供的SDK代碼,然后通過(guò)編輯器制作各個(gè)優(yōu)化版本。
(3)通過(guò)編輯器設(shè)置目標(biāo),如果編輯器不能實(shí)現(xiàn),則需要手工編寫(xiě)代碼。使用各類A/B測(cè)試平臺(tái)分配流量。初始階段,優(yōu)化方案的流量設(shè)置可以較小,根據(jù)情況逐漸增加流量。
6. 采集數(shù)據(jù):通過(guò)各大平臺(tái)自身的數(shù)據(jù)收集系統(tǒng)自動(dòng)采集數(shù)據(jù)。
7. 分析A/B測(cè)試結(jié)果:統(tǒng)計(jì)顯著性達(dá)到95%或以上并且維持一段時(shí)間,實(shí)驗(yàn)可以結(jié)束;如果在95%以下,則可能需要延長(zhǎng)測(cè)試時(shí)間;如果很長(zhǎng)時(shí)間統(tǒng)計(jì)顯著性不能達(dá)到95%甚至90%,則需要決定是否中止試驗(yàn)。
[免責(zé)聲明]
文章標(biāo)題: A/B測(cè)試是什么?
文章內(nèi)容為網(wǎng)站編輯整理發(fā)布,僅供學(xué)習(xí)與參考,不代表本網(wǎng)站贊同其觀點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé)。如涉及作品內(nèi)容、版權(quán)和其它問(wèn)題,請(qǐng)及時(shí)溝通。發(fā)送郵件至36dianping@36kr.com,我們會(huì)在3個(gè)工作日內(nèi)處理。