分享嘉賓：傅禮陽
介紹：吆喝科技客戶成功總監(jiān)
來源：愛盈利運營小咖秀干貨沙龍之奇虎360站
未經授權，嚴禁轉載，違者必究！
A/B測試是我們產品精細化運營和增長用戶經常要用到的。做產品和運營的目的就是要讓用戶在產品中找到自己的需求，從而留存用戶，最后轉化為盈利。在實現這個目的的過程中，我們會遇到各種各樣的問題，就比如一款產品做了半年，回顧產品的一次次版本更新，分析數據發(fā)現核心指標并沒有提高反而在下降。造成這一原因的關鍵因素就是我們沒有真正了解到用戶的價值需求在哪里。A/B測試的出現就是讓我們更科學、更系統的解決這一問題。
一、關于A/B測試的概念
A/B測試就是一款產品的兩個方案，A方案和B方案，原始方案和試驗方案。試驗方案也可以有多個方案。給一部分用戶用原始方案，另一部分用戶用試驗方案。在這些用戶使用一段時間之后，分別對比分析用戶的行為數據，看哪一個版本的用戶體驗最好，在此基礎上把更適合的版本切換到產品平臺就可以了，不需要重新的更換設計等。
在世界范圍內的互聯網公司，A/B測試已經成為產品更新迭代中不可或缺的一部分。對于運營來講，A/B測試也可以穩(wěn)固和提升我們的用戶拉新、促活、留存和營收。因為基于A/B測試的特性，它可以讓我們在不影響全局的用戶體驗的情況下，找到用戶的痛點和爽點，從而讓我們真正站在用戶的角度去迭代產品。
二、如何創(chuàng)建試驗？
主要考慮兩個因素：試驗目標和試驗場景
首先談談試驗目標，目標要先定一個簡單直接的優(yōu)化目標，可以是一個欄目的轉化率，也可以是一個頁面的點擊率。
其次是試驗場景。
那么如何構建這個試驗場景呢？
總得來說就是：從用戶行為以及數據分析中找到問題根源，從競品和行業(yè)實踐中找到參考依據。
拿電商來舉個栗子。我是電商的產品經理，我在做用戶數據分析的時候發(fā)現用戶把產品加入購物車的這一部分轉化率很低。那我就要以提高這一點的轉化率為目標，之后我就需要去分析用戶行為路徑，還要了解同行業(yè)競品比較好的產品在這一方面做了哪些優(yōu)化。從而作為我A/B測試的一些思路，然后去驗證它。
我非常不建議大家在做產品的時候去盲目抄襲同類比較好的產品，因為每一款產品的用戶受眾是不一樣的，盲目抄襲的話會令你的產品更加不穩(wěn)定。我們經過A/B測試過后的分析，再吸取競品中好的方面的一些因素，加之我們對于自身產品和用戶的理解來制定出一套適合我們的更優(yōu)質的執(zhí)行方案。
三、我們來一起分析以下幾個案例
1、墨跡天氣
這個案例的背景基于運營的同學在一次數據分析中發(fā)現的一個問題，就是安卓版本的用戶比IOS版本和其他同類產品的分享率都低一些，所以他們決定做一些優(yōu)化來提升安卓小伙伴分享的積極性。所以當時就做了4個版本。在這四個版本的測試對比中，發(fā)現第3個版本的使用率最高，所以就把第3個版本應用到產品中，也就是我們現在用的6.0的版本中。
2、滴滴打車
這是滴滴早期招募司機時候落地頁的一個測試，注冊了兩個版本，左邊的是原始版本，右邊的是兩個試驗版本。在測試了一段時間之后，發(fā)現右邊的測試版本比原始版本都有用戶提升，所以最終滴滴打車是把最右邊的版本推送給了所有的用戶。
我們對這兩個版本進行對比分析，發(fā)現了造成提升轉化率差異高的深層次原因。
原始版本給人一種家的感覺，比較溫馨。但是容易讓用戶誤解，是讓注冊滴滴打車還是滴滴司機，傳遞信息不是很清楚，這樣一個不確定性因素就會讓我們流失用戶。再看試驗版本的第一個版本，直接寫明“每天跑一單，油錢天天賺，首單額外獎勵30元”。這樣就會清晰的向用戶傳達“司機注冊、招募”的信息。但是這樣也有一個問題，那就是司機的好友或者家人看到這個頁面，點進去之后還得司機本人注冊，那么他們就會退出，這樣注冊轉化率又低了。試驗的第二個版本解決了前兩個版本的問題，明確點出了針對司機，注冊需要提供駕駛證和行駛證，這樣一來用戶就精準了，點擊的都是司機，用戶注冊轉化率就會提高。
3、小恩愛
這款產品是情侶在用的排名比較高的一款，這個案例也是針對用戶體驗做的一個測試。
之前小恩愛的運營同學會不定期的推送一些活動，這些活動都以H5的落地頁形式展現。在活動開展一段時間以后，有用戶反饋，會莫名其妙的在體驗中受到一些廣告干擾。他們分析是使用的版本是HTTP，這種形式的容易被第三方廣告所侵蝕利用。而HTTPS版本會減少這些隱患和影響，但是輕易地全部更換版本，網絡方面容易出問題，用戶體驗會因為網絡問題、后臺問題受阻。所以當時就做了一個A/B測試，一部分用戶用HTTP形式，另一部分用戶使用HTTPS模式，活動正常推送，通過測試發(fā)現HTTPS版本的用戶受廣告的影響小，用戶體驗更好，而且沒有網絡問題。所以最終面對所有用戶更新了HTTPS版本。
以上只是我從產品和用戶角度給大家簡單分析了A/B測試，讓大家有一定的了解，希望有一個引導的作用，具體怎么做還需要再詳細的去討論、去試驗、去做。謝謝大家！
