這篇文章，我們將討論如何應(yīng)用一個(gè)科學(xué)方法及其組成：產(chǎn)生假設(shè)-測(cè)試-評(píng)估-產(chǎn)品計(jì)劃。

一個(gè)讓人望而卻步的問(wèn)題：如何像Amazon和Facebook這樣成功的公司一樣，持續(xù)運(yùn)行用戶測(cè)試和收集大量數(shù)據(jù)？從何入手？可行嗎？

好消息是，如果你開(kāi)始行動(dòng)，甚至是在一個(gè)小問(wèn)題上，你可以基于公司文化建立這種快速的測(cè)試。下次在會(huì)議討論、辯論或者爭(zhēng)執(zhí)中，你可以這樣問(wèn)： “我們可以測(cè)試一下嗎？” 你可以把注意力從解決問(wèn)題轉(zhuǎn)變到理解問(wèn)題，然后轉(zhuǎn)移到測(cè)試中去尋找正確的解決方案。

這里，我們將討論如何應(yīng)用一個(gè)科學(xué)方法及其組成：產(chǎn)生假設(shè)-測(cè)試-評(píng)估-產(chǎn)品計(jì)劃。

假設(shè)

來(lái)自維基百科：假設(shè)是對(duì)現(xiàn)象的一種可能的解釋。

好，我們先在這里停一下。對(duì)產(chǎn)品來(lái)說(shuō)，我們從“現(xiàn)象”中尋找“問(wèn)題”。設(shè)定一個(gè)假設(shè)可以幫助我們清晰的理解我們所觀察的問(wèn)題，這樣我們就可以創(chuàng)建一系列的實(shí)驗(yàn)去測(cè)試潛在解決方案。我們的假設(shè)是用來(lái)回答“問(wèn)題是什么，發(fā)生的原因是什么？”

我來(lái)舉個(gè)來(lái)自我自己公司的例子，這里給產(chǎn)品經(jīng)理很多工具。我們發(fā)現(xiàn)產(chǎn)品經(jīng)理經(jīng)常糾結(jié)于定義產(chǎn)品路線圖。根據(jù)當(dāng)前的現(xiàn)狀去獲悉所謂“價(jià)值”是很難的。大多數(shù)優(yōu)先排序方案歸結(jié)為成本與回報(bào)分析。你尋找低成本的計(jì)劃，你期望產(chǎn)生高回報(bào)。但是，你如何對(duì)高回報(bào)（高價(jià)值）的做出明智的猜測(cè)呢？

我們的假設(shè)是，產(chǎn)品經(jīng)理很難清楚地確立和捍衛(wèi)其優(yōu)先事項(xiàng)，因?yàn)楹茈y對(duì)一項(xiàng)提議的價(jià)值綜合多個(gè)視角進(jìn)行總結(jié)和分析。收集和篩選來(lái)自銷售、市場(chǎng)和技術(shù)等不同群體的獨(dú)到見(jiàn)解是一個(gè)大難題。如果每個(gè)人都不理解事件優(yōu)先級(jí)背后的排序邏輯，那么這種不理解可能會(huì)導(dǎo)致整個(gè)組織對(duì)排序結(jié)果的不信任。

讓我們用定義假設(shè)將這個(gè)過(guò)程分解為兩個(gè)部分：

我們觀察到什么現(xiàn)象（問(wèn)題）？

• 產(chǎn)品經(jīng)理在初步評(píng)估價(jià)值的時(shí)候比較困難。
• 組織糾結(jié)于如何理解優(yōu)先級(jí)排序。

發(fā)生的原因是什么？

• 在評(píng)估的時(shí)候，組織內(nèi)部協(xié)作有限。（我們大都基于經(jīng)驗(yàn)，而非協(xié)作）
• 在評(píng)估的時(shí)候，與客戶的協(xié)作有限。
• 在評(píng)估的時(shí)候，對(duì)于決定價(jià)值的“為什么（要做）”溝通有限。

這讓我們可以深入研究假設(shè)

產(chǎn)品經(jīng)理之所以很難評(píng)估產(chǎn)生的價(jià)值，是因?yàn)閷?duì)內(nèi)部團(tuán)隊(duì)，比如銷售、市場(chǎng)、技術(shù)和客戶成功所知有限。

記住，這并不一定是問(wèn)題的唯一的原因。我們選擇一個(gè)我們認(rèn)為是最有可能的原因，然后去收集數(shù)據(jù)來(lái)幫助我們確定我們是否正確。未來(lái)，我們可能放棄這個(gè)假設(shè)，然后回去尋找可能的原因。

測(cè)試

既然我們已經(jīng)設(shè)定了假設(shè)，我們可以開(kāi)始尋找?guī)椭a(chǎn)品經(jīng)理在制定產(chǎn)品路線圖時(shí)評(píng)估優(yōu)先級(jí)的可能解決方案了。一種方案是把團(tuán)隊(duì)成員說(shuō)的每句以 “我認(rèn)為……”、“我們應(yīng)該……”、“如果我們……”的話轉(zhuǎn)變成“如果……會(huì)怎樣”語(yǔ)句。即便我們不知道嘗試的結(jié)果，但是會(huì)讓我們無(wú)法忽視假設(shè)的結(jié)果。

這讓我們的假設(shè)變得：

• 如果在每次為產(chǎn)品路線圖添加新特性的時(shí)候，發(fā)送谷歌調(diào)研問(wèn)卷，會(huì)怎樣？
• 如果我們建議產(chǎn)品經(jīng)理每隔一段時(shí)間就和某個(gè)團(tuán)隊(duì)會(huì)晤，會(huì)怎樣？
• 如果我們建立一個(gè)Slack機(jī)器人來(lái)收集團(tuán)隊(duì)評(píng)估，會(huì)怎樣？
• 如果我們?cè)跁?huì)議中建立一個(gè)AppleTV的應(yīng)用，將評(píng)估游戲化，會(huì)怎樣？

我們發(fā)現(xiàn)Slack機(jī)器人對(duì)我們來(lái)說(shuō)是最好的選擇——可以與組織中大量人員進(jìn)行互動(dòng)而不會(huì)產(chǎn)生摩擦。通過(guò)這條建議，我們?yōu)楫a(chǎn)品經(jīng)理在評(píng)估每個(gè)倡議的價(jià)值時(shí)將數(shù)據(jù)收集工作分解為兩點(diǎn)：

• 這一倡議對(duì)我們正在尋求解決的客戶問(wèn)題的預(yù)期影響是什么？

• 這一倡議對(duì)我們業(yè)務(wù)目標(biāo)的預(yù)期影響是什么？

我們的Slack機(jī)器人將會(huì)生成一個(gè)問(wèn)卷讓團(tuán)隊(duì)成員來(lái)打分，分值范圍是1~5。我們也支持對(duì)這些問(wèn)題進(jìn)行開(kāi)放式補(bǔ)充回答：“為什么你認(rèn)為預(yù)期影響是（3）？”

然后，我們將這些信息反饋給產(chǎn)品經(jīng)理。反饋的界面包括評(píng)估分?jǐn)?shù)的范圍以及每個(gè)參與者對(duì)開(kāi)放問(wèn)題的回答。我們的目的是讓產(chǎn)品經(jīng)理獲得考慮路線圖優(yōu)先級(jí)時(shí)的普遍觀點(diǎn)和見(jiàn)解。

我們的測(cè)試完成啦！填寫下面的模板，我們可以對(duì)測(cè)試做一個(gè)簡(jiǎn)潔明了的概述。

如果我們<嘗試一個(gè)解決方案>，我們可以<期望一個(gè)結(jié)果>。

如果我們利用Slack機(jī)器人收集團(tuán)隊(duì)成員價(jià)值評(píng)估反饋，我們可以提升產(chǎn)品經(jīng)理對(duì)優(yōu)先級(jí)評(píng)估的參考數(shù)據(jù)廣度。

評(píng)估結(jié)果

到此為止，我們還有一個(gè)步驟。我們?nèi)绾蔚弥Ч绾?？我們需要一種來(lái)評(píng)估預(yù)期結(jié)果的方法。

這常常是使用測(cè)試的最大障礙和困難。評(píng)估讓人望而卻步，熱別是組織習(xí)慣基于直覺(jué)和情感進(jìn)行決策。然并卵，衡量執(zhí)行評(píng)估團(tuán)隊(duì)的情緒不會(huì)讓我們的產(chǎn)品或者巨大的成功，或很微小的成功。

你的評(píng)估指標(biāo)應(yīng)該聚焦在用戶行為上。業(yè)務(wù)目標(biāo)很可能與收入、持有或收購(gòu)有關(guān)。這些指標(biāo)非常重要，但很難快速測(cè)量進(jìn)而做出決策。你需要找到能夠?qū)崿F(xiàn)這些業(yè)務(wù)目標(biāo)的關(guān)聯(lián)指標(biāo)。關(guān)鍵是找出你認(rèn)為的用戶正在朝著預(yù)期結(jié)果前進(jìn)的模式。

對(duì)我們來(lái)說(shuō)，假設(shè)產(chǎn)品經(jīng)理處理了更多的來(lái)自不同團(tuán)隊(duì)數(shù)據(jù)，他們將會(huì)更好的了解預(yù)期價(jià)值，并做出更好的決策。因此，需要向他們提供他們以前沒(méi)有的數(shù)據(jù)，并跟蹤這些數(shù)據(jù)是否影響他們的決定。我們希望能夠在這個(gè)過(guò)程中進(jìn)行測(cè)試和調(diào)整，并且知道是否有機(jī)會(huì)達(dá)成目標(biāo)。如果測(cè)試的成功與否是基于用戶行為的，那么我們可以稍后返回并評(píng)估業(yè)務(wù)指標(biāo)。

現(xiàn)在，我們只需要給這些指標(biāo)進(jìn)行打分。當(dāng)你第一次使用指標(biāo)分析時(shí)，會(huì)發(fā)現(xiàn)這更像是一門藝術(shù)。如果你有一個(gè)穩(wěn)定的基線，并且所在組織會(huì)進(jìn)行收集分析，你可以得到細(xì)顆粒度的結(jié)果。如果你剛剛開(kāi)始嘗試，我建議假設(shè)大概有1/4的人的回復(fù)是無(wú)效的或者不回復(fù)。如此一來(lái)，大致有75%的用戶從漏斗頂部進(jìn)入，有25%的用戶數(shù)據(jù)是有效的。我們使用這種方式以期可以獲得更有效的數(shù)據(jù)。

• 75%的評(píng)估會(huì)由Slack機(jī)器人成功發(fā)送
• 其中，60%的熱團(tuán)隊(duì)成員會(huì)響應(yīng)Slack機(jī)器人
• 在看過(guò)團(tuán)隊(duì)成員的評(píng)估后，產(chǎn)品經(jīng)理更新了30%的時(shí)間評(píng)估
• 其中，25%的更新來(lái)自團(tuán)隊(duì)成員低分評(píng)估，25%的更新來(lái)自團(tuán)隊(duì)成員高分評(píng)估

這項(xiàng)技術(shù)的關(guān)鍵在于在測(cè)試早期不要糾結(jié)于這些百分比，而專注于數(shù)據(jù)收集。75%是怎么來(lái)的？部署這個(gè)功能，用戶會(huì)減少50%嗎？我們能改進(jìn)這些數(shù)據(jù)嗎？還是說(shuō)這些數(shù)據(jù)只是現(xiàn)狀的描述？其實(shí)，你在查看數(shù)據(jù)并且與用戶溝通之前，你是不會(huì)知道這些問(wèn)題的答案的。檢查這些指標(biāo)的一個(gè)方法是，開(kāi)始與相關(guān)人員進(jìn)行對(duì)話、討論，這意義遠(yuǎn)比獲得答案更深遠(yuǎn)。

再完整的概括一下上述內(nèi)容。

假設(shè)：

“產(chǎn)品經(jīng)理之所以很難評(píng)估產(chǎn)生的價(jià)值，是因?yàn)閷?duì)內(nèi)部團(tuán)隊(duì)，比如銷售、市場(chǎng)、技術(shù)和客戶成功所知有限。”

測(cè)試：

“如果我們利用Slack機(jī)器人收集團(tuán)隊(duì)成員價(jià)值評(píng)估反饋，我們可以提升產(chǎn)品經(jīng)理對(duì)優(yōu)先級(jí)評(píng)估的參考數(shù)據(jù)廣度?！?/p>

期望結(jié)果：

• 75%的評(píng)估會(huì)由Slack機(jī)器人成功發(fā)送
• 其中，60%的熱團(tuán)隊(duì)成員會(huì)響應(yīng)Slack機(jī)器人
• 在看過(guò)團(tuán)隊(duì)成員的評(píng)估后，產(chǎn)品經(jīng)理更新了30%的時(shí)間評(píng)估
• 其中，25%的更新來(lái)自團(tuán)隊(duì)成員低分評(píng)估，25%的更新來(lái)自團(tuán)隊(duì)成員高分評(píng)估

在測(cè)試中，我們會(huì)檢查所有的信息：

• 對(duì)觀察到的假設(shè)以及可能的原因進(jìn)行清晰的陳述
• 測(cè)試用來(lái)檢驗(yàn)造成觀察到的結(jié)果的假設(shè)
• 在具體環(huán)境中通過(guò)一系列的產(chǎn)出校驗(yàn)我們的假設(shè)

這個(gè)測(cè)試會(huì)為我們提供數(shù)據(jù)告訴我們是否在解決客戶問(wèn)題和支持假設(shè)上方向正確。這種測(cè)試會(huì)成為我們項(xiàng)目初始化的主要推動(dòng)，或者他們會(huì)成為一個(gè)沒(méi)達(dá)成我們期望的好主意的垃圾堆。不論如何，這個(gè)過(guò)程讓我們對(duì)如何讓創(chuàng)意成功不那么重視，而將注意力轉(zhuǎn)移到觀察這些創(chuàng)意的效果，并反思這些數(shù)據(jù)對(duì)我們下一步行動(dòng)的啟發(fā)和建議。長(zhǎng)此以往，我們的協(xié)作會(huì)更順暢，我們的組織會(huì)更成功，我們將更加信任作為決策者的產(chǎn)品經(jīng)理。

你在自己的公司內(nèi)部如何進(jìn)行測(cè)試？耗費(fèi)多久？

設(shè)置期望成功的指標(biāo)的流程是什么？在收集數(shù)據(jù)時(shí)有足夠的靈活性嗎？

為測(cè)試收集數(shù)據(jù)是否對(duì)你們公司制定路線圖的決策有幫助？

作者：Danny Gold

譯者：小婧，一名行走在實(shí)踐路上的資深業(yè)務(wù)分析師（BA），個(gè)人公眾號(hào)：與小婧同行 （xiaojing-jessieyj）。

原文地址：https://medium.com/pathtoproduct/applying-the-scientific-method-to-product-management-953ca4a51758

本文系人人都是產(chǎn)品經(jīng)理翻譯團(tuán)隊(duì)@小婧 翻譯，未經(jīng)本站允許，禁止轉(zhuǎn)載。

題圖來(lái)自PEXELS，基于CC0協(xié)議

愛(ài)盈利-運(yùn)營(yíng)小咖秀(www.jza6.com) 始終堅(jiān)持研究分享移動(dòng)互聯(lián)網(wǎng)App運(yùn)營(yíng)推廣經(jīng)驗(yàn)、策略、全案、渠道等純干貨知識(shí)內(nèi)容；是廣大App運(yùn)營(yíng)從業(yè)者的知識(shí)啟蒙、成長(zhǎng)指導(dǎo)、進(jìn)階學(xué)習(xí)的集聚平臺(tái)；

想了解更多移動(dòng)互聯(lián)網(wǎng)干貨知識(shí)，請(qǐng)關(guān)注微信公眾號(hào)運(yùn)營(yíng)小咖秀（ID: yunyingshow）