消息推送的文案選擇

中糧我買網(wǎng)是由世界500強(qiáng)企業(yè)中糧集團(tuán)有限公司于2009年投資創(chuàng)辦的食品類B2C電子商務(wù)網(wǎng)站。商品包括：食品、糧油、酒水、茶葉等百種品類。是辦公室白領(lǐng)、居家生活和年輕一族的首選食品網(wǎng)絡(luò)購(gòu)物網(wǎng)站。我買網(wǎng)手機(jī)客戶端有時(shí)會(huì)在通知欄中推送一些商品促銷、購(gòu)物指南的消息，以此來(lái)吸引用戶點(diǎn)擊，從而提高用戶粘性并帶來(lái)業(yè)務(wù)上的提升。當(dāng)運(yùn)營(yíng)團(tuán)隊(duì)在設(shè)計(jì)推送消息的文案時(shí)，總是會(huì)有很多不一樣的想法，內(nèi)部有時(shí)就會(huì)提出好幾個(gè)版本。為此，我買網(wǎng)的運(yùn)營(yíng)團(tuán)隊(duì)決定使用AB測(cè)試來(lái)選出一個(gè)最優(yōu)的文案。

參數(shù)化方法進(jìn)行AB測(cè)試

這次的AB測(cè)試采用了全棧API的方案，通過(guò)參數(shù)化的方式把推送消息的文案變成一個(gè)變量，最后在云眼控制臺(tái)中為各個(gè)版本設(shè)置對(duì)應(yīng)的變量值。在試驗(yàn)剛剛開(kāi)始的時(shí)候，選擇了1%的全網(wǎng)流量進(jìn)行試驗(yàn)，各版本均分流量。當(dāng)測(cè)試進(jìn)行了一段時(shí)間后，運(yùn)營(yíng)團(tuán)隊(duì)決定把實(shí)驗(yàn)流量增加到5%。由于消息推送的特殊性，試驗(yàn)只進(jìn)行了一天的時(shí)間（活動(dòng)只持續(xù)了一周，活動(dòng)結(jié)束后再拿到結(jié)果就沒(méi)有意義了）。

結(jié)果表明，最好文案比最差文案的點(diǎn)擊率要高出42%。統(tǒng)計(jì)顯著性指標(biāo)的結(jié)果也超過(guò)了95%，試驗(yàn)可以認(rèn)定為有效。所以，在活動(dòng)開(kāi)始后的第二天，我買網(wǎng)使用最優(yōu)版本的文案在全網(wǎng)推送了消息。