芥末堆芥末堆

產(chǎn)品經(jīng)理小課堂:看灰度測試如何幫助Duolingo獲取2億用戶

作者:孟小白 發(fā)布時(shí)間:

產(chǎn)品經(jīng)理小課堂:看灰度測試如何幫助Duolingo獲取2億用戶

作者:孟小白 發(fā)布時(shí)間:

摘要:灰度測試不容易,尤其是當(dāng)你有70個測試點(diǎn)子的時(shí)候。

mbb09xl4htzij91f.PNG!1200.jpg

語言學(xué)習(xí)平臺Duolingo(中文:多鄰國),在全球擁有2億用戶,是移動端語言學(xué)習(xí)app的鼻祖;36氪對其發(fā)布過多篇報(bào)道。公司負(fù)責(zé)用戶增長的總裁Gina Gotthilf近日通過First Round Review分享了灰度測試幫助用戶從300萬到2億的歷程,本文分享2個例子。

推遲用戶注冊

Duolingo有段時(shí)間面臨新注冊用戶數(shù)量大幅下降的問題,包括大量的用戶下載并簡單使用了app之后沒有注冊;而不注冊就意味著Duolingo沒法向用戶提供長期穩(wěn)定的有價(jià)值服務(wù)。團(tuán)隊(duì)提出了一個反直覺的假設(shè):推遲注冊邀請,讓用戶先使用產(chǎn)品。結(jié)果,嘗試帶來出人意料的效果,僅僅將注冊頁面移后幾步,就將日活量提升了20%。 

接下來,團(tuán)隊(duì)認(rèn)為注冊頁面的“放棄”選項(xiàng)過于顯眼容易引導(dǎo)用戶點(diǎn)擊,所以將“放棄”改為了“稍后再說”,并將這些允許用戶暫時(shí)忽略注冊邀請、進(jìn)而繼續(xù)體驗(yàn)產(chǎn)品的頁面稱為“軟墻”。Duolingo會設(shè)置多道“軟墻”,當(dāng)用戶跳過幾次之后,就會遇到“硬墻”,如果不注冊就不能再繼續(xù)使用產(chǎn)品了(如下圖,左邊為硬墻,右邊為軟墻)。

sr2r5ey4vdigluzh.jpg!1200.jpg團(tuán)隊(duì)嘗試了“軟墻”設(shè)置時(shí)間和“軟墻”數(shù)量各種組合的灰度測試后,確定下現(xiàn)在三面“軟墻”的方案,它們都會被設(shè)置在用戶明顯感受到產(chǎn)品價(jià)值的時(shí)候。如果沒有這些“軟墻”,“硬墻”在獲取客戶方面的表現(xiàn)明顯更糟糕;但“軟硬墻”組合在一起,把日活提升了8.2%。 

保持連續(xù)記錄

為了幫助用戶將英語學(xué)習(xí)變成習(xí)慣,Duolingo參考游戲產(chǎn)業(yè)的做法:如果你不每天做點(diǎn)什么的話,你就會失去類似排位的東西;于是,團(tuán)隊(duì)邀請用戶自己設(shè)定每天要在Duolingo上學(xué)習(xí)的時(shí)間。目標(biāo)設(shè)定進(jìn)而影響了通知推送的目的;不再是與用戶無關(guān)的“Duolingo歡迎你回來”,而是“你設(shè)置了自己的計(jì)劃,來達(dá)成今天的目標(biāo)吧”。

接著,推送目的的改變引發(fā)了對推送時(shí)間和內(nèi)容的灰度測試。在全天任何不合適的時(shí)間推送通知,都會變成惹人煩的信息。對全世界的用戶測試后,團(tuán)隊(duì)發(fā)現(xiàn)沒有統(tǒng)一的通知時(shí)間,更容易綁定用戶的方式是在用戶昨天使用app的時(shí)間通知他。通知內(nèi)容方面,團(tuán)隊(duì)對比了不同風(fēng)格的測試:展示用戶今天要學(xué)習(xí)的單詞、彈出可愛的卡通形象Duo、或者提出需要用戶作答的一個小測試。最后測試證明,最有效的通知方式,是一條簡單的“Hi,這是Duo”的信息;獨(dú)自一條改變就將日活量提高5%。

但是,令團(tuán)隊(duì)沒想到的是,丟失連續(xù)記錄對用戶造成了困擾。所以,團(tuán)隊(duì)測試“周末附身符”,用戶可以使用連續(xù)記錄換取積分、并在周五用積分購買“附身符”,以免自己周末時(shí)忘記練習(xí)而失去連續(xù)記錄。幫助用戶保持記錄是留存用戶的方式,因?yàn)橐恍┯脩粢坏┩蝗粏适нB續(xù)記錄就可能放棄使用Duolingo。灰度測試證明,“護(hù)身符”機(jī)制引入的7天后,日活增長2.1%;引入14天后,日活增長4%。

課堂總結(jié)

Gotthilf從這段幫助Duolingo增長用戶的歷程中學(xué)到最重要的東西是:一個測試會引出更多測試,不要放棄它們,同時(shí)對比幾項(xiàng)測試,然后讓數(shù)據(jù)說話。有些測試可能只有6行代碼,有些則需要數(shù)周討論,有些人喜歡大的改變,但是沒有人最開始地會從“Hi,這是Duo”這條推送下手去提高日活;5%的提升是了不起的,尤其是當(dāng)平臺有上億用戶的時(shí)候。

本文轉(zhuǎn)自36氪,作者孟小白。

1、本文是 芥末堆網(wǎng)轉(zhuǎn)載文章,原文:36氪;
2、芥末堆不接受通過公關(guān)費(fèi)、車馬費(fèi)等任何形式發(fā)布失實(shí)文章,只呈現(xiàn)有價(jià)值的內(nèi)容給讀者;
3、如果你也從事教育,并希望被芥末堆報(bào)道,請您 填寫信息告訴我們。
來源:36氪
芥末堆商務(wù)合作:王老師 18710003484
  • 產(chǎn)品經(jīng)理小課堂:看灰度測試如何幫助Duolingo獲取2億用戶分享二維碼