引言：edwin是微信最初10員工之一，有豐富的后臺開發(fā)經(jīng)驗，加入團隊后承擔(dān)了微信用戶平臺實驗系統(tǒng)的研發(fā)工作。數(shù)據(jù)能力和實驗?zāi)芰κ沁\營的基礎(chǔ)，他帶領(lǐng)幾位從終端轉(zhuǎn)崗到后臺開發(fā)的同學(xué)，為用戶體驗運營奠定核心基礎(chǔ)能力。看看他是怎么思考用戶體驗運營這件事情的，分享給大家。
這是一個充滿想法的年代，這是一個互聯(lián)網(wǎng)+大數(shù)據(jù)的時代。要做好用戶體驗運營，任何猜想，任何策略，任何變更以及優(yōu)化，均需以數(shù)據(jù)說話。我們的宗旨就是應(yīng)用各種技術(shù)手段，配合大數(shù)據(jù)分析，以提高微信用戶的體驗。本文將簡要介紹實驗系統(tǒng)如何應(yīng)用于微信用戶體驗運營。
近期，電影《煎餅俠》那么賣座，有多少因素是因為屌絲男觀眾喜歡柳巖而去電影院觀看的呢？柳巖在電影中起的作用占比多少？如果換成志玲姐姐，票房又 會有多大變化？（允許我腦洞大開亂想一通）。現(xiàn)實生活中有很多類似的猜測（相同的場景不同的因素會導(dǎo)致出現(xiàn)不同的結(jié)果），但種種的猜想?yún)s因?qū)嶒灣杀咎叨?nbsp;導(dǎo)致無法實施。與此不同的是，現(xiàn)在我們的產(chǎn)品是處于互聯(lián)網(wǎng)環(huán)境下，很多想法是可以基于實驗系統(tǒng)進行大膽嘗試。
在互聯(lián)網(wǎng)環(huán)境下，一個產(chǎn)品的前期或許可以依靠頭腦風(fēng)暴最終拍定一個方案開始執(zhí)行。盡管如此，最終的方案也不一定就是最好的方案。更何況當(dāng)一個產(chǎn)品或 者團隊規(guī)模發(fā)展到成熟階段，想要在短時間內(nèi)讓大家拍出一致的“最優(yōu)”方案難度更大。微信內(nèi)部有才華的人很多，無論是產(chǎn)品還是開發(fā)，每個人都有自己的思想和 見解。所以，在微信內(nèi)部因為產(chǎn)品角度或者技術(shù)角度引起“爭吵”實屬常事。據(jù)聞在facebook內(nèi)部也是提倡這樣的文化“我可以很尊敬你，但是我不同意你 的想法”。facebook首位華人工程師趙海平在總結(jié)內(nèi)部軟件系統(tǒng)時，提到facebook功能性的代碼可能有20%、30%，但還有40%左右的代碼 是幫助這百分之二三十去分流實驗，搜集結(jié)果數(shù)據(jù)，去驗證它好還是不好，可見實驗系統(tǒng)在facebook內(nèi)部發(fā)揮著重要的作用。
任何的猜想，任何的策略均需以數(shù)據(jù)說話，微信實驗系統(tǒng)正是這么應(yīng)聲而出?；ヂ?lián)網(wǎng)遵循的一個思維就是小步快跑，快速迭代。而微信實驗系統(tǒng)可以為快速迭代提供分流試錯、靈活的灰度以及回退（產(chǎn)品策略或者技術(shù)方案）、結(jié)果對照分析等能力；
下面將以幾個角度分析下實驗系統(tǒng)在用戶體驗運營中的作用。
一、利用“后臺大數(shù)據(jù)+實驗系統(tǒng)”優(yōu)化產(chǎn)品策略：
我們可以利用后臺大數(shù)據(jù)，針對每個用戶使用習(xí)慣的不同，下發(fā)不一樣的產(chǎn)品策略到各個用戶。
譬如微信支付時，究竟需要彈出支付方式選擇框，還是直接讓用戶輸入密碼支付？兩種產(chǎn)品策略的優(yōu)劣是仁者見仁智者見智。此時我們可以利用實驗系統(tǒng)，對 不同人群進行不同的實驗分流。 利用最終的實驗數(shù)據(jù)，判斷哪種策略較佳。譬如經(jīng)常喜歡換卡來進行支付的用戶，我們可以在后臺對選卡的順序列表進行不一樣排序給到用戶選擇（依靠實驗分流不 同用戶選擇不同排序算法，可以是按使用頻率排序，也可以是按LRU算法排序）；而對于只有一張卡又或者基本只使用同一張卡支付的用戶可以讓其略過支付方式 選擇框的流程，直接密碼支付。通過實驗對比，選擇有效的方案，減少支付步驟降低用戶的支付耗時，從而提高用戶體驗。
二、應(yīng)用“在線模型+實驗系統(tǒng)”來提高用戶體驗：
我們一直鼓勵原創(chuàng)，但是殊不知很多原創(chuàng)性的東西依然還是有人反感，譬如心靈雞湯、自拍、曬娃、深夜發(fā)美食等等。盡管是原創(chuàng)性東西，也沒有絕對的好與壞之分。要做好用戶體驗運營，絕不能一刀切，要看具體的受眾對象個人口味。
其實，我們可以根據(jù)用戶平時的瀏覽閱讀習(xí)慣，控制不同類型的feed在他們朋友圈里展現(xiàn)形式， 譬如不喜歡心靈雞湯的可以嘗試把內(nèi)容折疊，不喜歡曬娃曬吃的，可以后臺提高縮略圖壓縮比（不喜歡意味著用戶點擊查閱大圖的概率較低）。這些種種的策略背后 都有各種模型&參數(shù)在控制引導(dǎo)，這里用戶+feed上下文（包括發(fā)表好友以及內(nèi)容）+模型+參數(shù)的四元匹配，可以有很多種解。我們可以利用實驗系 統(tǒng)進行分流比對，最終找出讓輸出最大化的解。
三、應(yīng)用“大膽猜想+實驗系統(tǒng)”來驗證猜想得出結(jié)論：
我們可以根據(jù)不同用戶群體，控制他們在朋友圈看到的好友評論與贊的情況，進而來研究經(jīng)典的social influence和homophily對朋友圈的影響情況。又或者，現(xiàn)在的朋友圈長文本會被自動折疊，或許我們可以嘗試將惡意刷屏的長評論也進行折疊 呢？效果如何，可以采用實驗的手段，分群體觀察。實際上我們已經(jīng)利用實驗系統(tǒng)，做過朋友圈微商實驗、廣告unlike在線實驗等，并得出一些初步的研究成 果。
微信實驗系統(tǒng)是一個載體，貫穿整個微信系統(tǒng)架構(gòu)。從客戶端、微信接入端、邏輯后臺、甚至第三方業(yè)務(wù)，都能見到實驗系統(tǒng)的身影。微信實驗系統(tǒng)目前還處 在融合階段，但已經(jīng)有各個業(yè)務(wù)團隊逐漸接入進來，這包括游戲中心、朋友圈廣告、朋友圈feed實驗條、微信表情、掃商品、卡包等等等等。
微信實驗系統(tǒng)支持前端實驗+后端實驗，樣本抽樣算法支持PV/UV模式，支持復(fù)合多層實驗（解決流量饑餓問題），支持流量自主回收等等特性，但篇幅原因均不再此一一展開，相關(guān)的技術(shù)細節(jié)，將會放在公司內(nèi)部的四點一課上和大家分享交流，屆時期待大家的參與。
開發(fā)實驗系統(tǒng)是一個從0到1的過程，結(jié)合微信內(nèi)部強大的業(yè)務(wù)開發(fā)團隊，這將實現(xiàn)從1到100，甚至上千上萬的偉大壯舉。所以，我們后面還有很長的路 要走。如果有專業(yè)團隊有任何有意思的想法，都請隨時聯(lián)系啃餅們，大家一起探討下未來的思路。當(dāng)然，如果你也想在用戶體驗運營上做些有意義的事，歡迎加入我 們一起挖掘。
