消息推送的文案選擇

中糧我買網(wǎng)是由世界500強(qiáng)企業(yè)中糧集團(tuán)有限公司于2009年投資創(chuàng)辦的食品類B2C電子商務(wù)網(wǎng)站。商品包括：食品、糧油、酒水、茶葉等百種品類。是辦公室白領(lǐng)、居家生活和年輕一族的首選食品網(wǎng)絡(luò)購物網(wǎng)站。我買網(wǎng)手機(jī)客戶端有時(shí)會在通知欄中推送一些商品促銷、購物指南的消息，以此來吸引用戶點(diǎn)擊，從而提高用戶粘性并帶來業(yè)務(wù)上的提升。當(dāng)運(yùn)營團(tuán)隊(duì)在設(shè)計(jì)推送消息的文案時(shí)，總是會有很多不一樣的想法，內(nèi)部有時(shí)就會提出好幾個(gè)版本。為此，我買網(wǎng)的運(yùn)營團(tuán)隊(duì)決定使用AB測試來選出一個(gè)最優(yōu)的文案。

參數(shù)化方法進(jìn)行AB測試

這次的AB測試采用了全棧API的方案，通過參數(shù)化的方式把推送消息的文案變成一個(gè)變量，最后在云眼控制臺中為各個(gè)版本設(shè)置對應(yīng)的變量值。在試驗(yàn)剛剛開始的時(shí)候，選擇了1%的全網(wǎng)流量進(jìn)行試驗(yàn)，各版本均分流量。當(dāng)測試進(jìn)行了一段時(shí)間后，運(yùn)營團(tuán)隊(duì)決定把實(shí)驗(yàn)流量增加到5%。由于消息推送的特殊性，試驗(yàn)只進(jìn)行了一天的時(shí)間（活動(dòng)只持續(xù)了一周，活動(dòng)結(jié)束后再拿到結(jié)果就沒有意義了）。

結(jié)果表明，最好文案比最差文案的點(diǎn)擊率要高出42%。統(tǒng)計(jì)顯著性指標(biāo)的結(jié)果也超過了95%，試驗(yàn)可以認(rèn)定為有效。所以，在活動(dòng)開始后的第二天，我買網(wǎng)使用最優(yōu)版本的文案在全網(wǎng)推送了消息。