朱江畢業(yè)于上海交大計(jì)算機(jī)系，2009年加入觸寶，經(jīng)歷了從技術(shù)到產(chǎn)品的轉(zhuǎn)變。先后負(fù)責(zé)觸寶云服務(wù)的研發(fā)，觸寶電話生活黃頁(yè)業(yè)務(wù)，現(xiàn)在負(fù)責(zé)觸寶電話的產(chǎn)品管理及商業(yè)化工作，是觸寶電話主要產(chǎn)品負(fù)責(zé)人。以下為演講實(shí)錄：

謝謝大家，我叫朱江，我今天給大家演講的題目是《觸寶的數(shù)據(jù)驅(qū)動(dòng)產(chǎn)品實(shí)踐》。非常抱歉，剛才主持人對(duì)我們的商業(yè)化轉(zhuǎn)型比較感興趣，但是我今天的轉(zhuǎn)型沒(méi)有涉及到。因?yàn)檫@次大會(huì)主題是數(shù)據(jù)驅(qū)動(dòng)，作為一個(gè)工具類的產(chǎn)品，也有大量的用戶，我們確實(shí)也在數(shù)據(jù)驅(qū)動(dòng)這方面有很多想要跟大家分享和探討的部分，這就是今天我的演講主要內(nèi)容。

我的演講分四部分，第一部分介紹一下我自己，第二部分講一下對(duì)于數(shù)據(jù)驅(qū)動(dòng)的理解。第三部分講一下實(shí)戰(zhàn)案例，最后是我們的總結(jié)和反思。

我是上海交通大學(xué)計(jì)算機(jī)碩士，2008年的時(shí)候我在谷歌實(shí)習(xí)，實(shí)習(xí)很興奮的時(shí)候就告訴我不招人了。然后工作就沒(méi)有著落了，那個(gè)時(shí)候我在交大的BBS上發(fā)現(xiàn)一個(gè)帖子，有一家公司拿了全球創(chuàng)新大獎(jiǎng)。我就抱著好奇的心理，投了一個(gè)簡(jiǎn)歷過(guò)去，我就加入了觸寶。那時(shí)只有一個(gè)創(chuàng)始人，沒(méi)有一個(gè)員工，現(xiàn)在觸寶已經(jīng)完成了D輪融資，投資我們的有紅山資本、IDG，觸寶今年到了用戶體量比較大的規(guī)模。我們的目標(biāo)是兩年左右的時(shí)間再上一個(gè)臺(tái)階。我有個(gè)外號(hào)叫觸寶教主，我聽到這個(gè)詞的時(shí)候總想到一個(gè)人，就是照片上的人，就是東方不敗，總感覺(jué)自己哪里少了點(diǎn)什么。

直到有一天我看了一篇文章，阿里的螞蟻金服的老大講，創(chuàng)業(yè)者一定要有一種特質(zhì)，就是雌雄同體，后來(lái)我知道了，我就是觸寶教主。接下來(lái)講講我對(duì)數(shù)據(jù)驅(qū)動(dòng)的理解，我認(rèn)為數(shù)據(jù)驅(qū)動(dòng)產(chǎn)品迭代的關(guān)鍵，是建立一套強(qiáng)調(diào)實(shí)驗(yàn)和追求結(jié)果的文化。并且利用數(shù)據(jù)分析，直接和間接的對(duì)產(chǎn)品的核心指標(biāo)去進(jìn)行增長(zhǎng)。核心指標(biāo)包括我們比較關(guān)注的用戶規(guī)模、留存，像觸寶的撥打電話的數(shù)量。旁邊這張圖是推特當(dāng)年引入了所謂的增長(zhǎng)團(tuán)隊(duì)之后，加大了迭代速度，它們的用戶增長(zhǎng)規(guī)模的斜率發(fā)生了明顯的增加。我認(rèn)為數(shù)據(jù)驅(qū)動(dòng)的關(guān)鍵因素是這么幾個(gè)，第一個(gè)是要有高效的工具。因?yàn)槲覀円瓿蓪?shí)驗(yàn)，要完成迭代，可能不能完全靠人力，需要有一套方法論，有一套成熟的工具支撐你。所以這套高效的工具是重要的因素之一。另外有高效的流程讓各個(gè)環(huán)節(jié)迭代起來(lái)，比如一到兩個(gè)周期，比如這個(gè)團(tuán)隊(duì)里面每個(gè)人都有明確的目標(biāo)，每個(gè)人都有自己可以去利用的資源。利用就是要能夠提出假設(shè)，去把它切割成一個(gè)相對(duì)比較可行，又比較小的集合去做試錯(cuò)。在試錯(cuò)之后，要能把方案進(jìn)行總結(jié)提煉。然后進(jìn)行發(fā)布，要減少對(duì)用戶的影響，最后形成一個(gè)循環(huán)。

我講講觸寶曾經(jīng)用過(guò)的數(shù)據(jù)分析工具，我相信很多人也都用過(guò)。首先傳統(tǒng)的方式是用數(shù)據(jù)庫(kù)和日志的方式來(lái)分析。數(shù)據(jù)庫(kù)的分析和日志的分析，很多人做過(guò)技術(shù)有一定的了解。這種分析方法在團(tuán)隊(duì)小的時(shí)候，或者用戶規(guī)模小的時(shí)候很實(shí)用，數(shù)據(jù)庫(kù)都在服務(wù)器上面，隨時(shí)可以拉數(shù)據(jù)。日志一般也是在服務(wù)器上本來(lái)就有的，就順帶利用它做分析。這種方法的問(wèn)題是效率很低，一旦有需求要跑到數(shù)據(jù)庫(kù)去查。因?yàn)閿?shù)據(jù)庫(kù)的設(shè)計(jì)是為用戶分析的，不是為分析服務(wù)的。另外數(shù)據(jù)隨時(shí)都有可能丟，比如宕機(jī)了，就查不了。我們用過(guò)SDK，它是一個(gè)完整的解決方案，可以提供從分析到報(bào)表，有一整套的分析。但是用戶體量比較大的時(shí)候，對(duì)隱私會(huì)非常關(guān)注。如果這個(gè)數(shù)據(jù)被泄露到第三方平臺(tái)上，對(duì)于企業(yè)或者用戶，都是有風(fēng)險(xiǎn)的。

另外就是這種數(shù)據(jù)分析平臺(tái)通常只能解決一部分的數(shù)據(jù)分析緯度，舉個(gè)例子百度的統(tǒng)計(jì)。我在網(wǎng)頁(yè)上可以拿到它的數(shù)據(jù)，但是服務(wù)器還有下單、訂單的數(shù)據(jù)，客戶端還有用戶行為的數(shù)據(jù)，這些東西沒(méi)有辦法打通。我用這個(gè)工具只有解決一部分問(wèn)題，當(dāng)我想連在一起看的時(shí)候就發(fā)現(xiàn)不行了。所以后來(lái)我們也開始搭建自己數(shù)據(jù)分析的體系，最早用的就是hadoop，這是一個(gè)山寨版的谷歌大數(shù)據(jù)處理平臺(tái)。那時(shí)候我們的數(shù)據(jù)就TB級(jí)別的數(shù)據(jù)，每次分析需要由開發(fā)來(lái)配合寫一個(gè)腳本，然后就上平臺(tái)跑這個(gè)腳本，大概一兩個(gè)小時(shí)可以出結(jié)果。因?yàn)楣居泻芏喈a(chǎn)品經(jīng)理有這個(gè)需求，所以大家需要排隊(duì)去跑。我們也有一個(gè)數(shù)據(jù)報(bào)表的體系，就是rainbow，就是把一些常態(tài)化的數(shù)據(jù)呈現(xiàn)為報(bào)表，把一些關(guān)鍵的數(shù)據(jù)點(diǎn)做監(jiān)控。這樣的方法持續(xù)了很長(zhǎng)時(shí)間，到了去年，我們對(duì)現(xiàn)在這套方案又做了升級(jí)。也是響應(yīng)之前的圖，如果我們想要把整個(gè)迭代的流程加快，數(shù)據(jù)驅(qū)動(dòng)速度加快，就要有更高效的工具。一個(gè)小時(shí)或者小時(shí)級(jí)別的分析，已經(jīng)不能滿足我們的需求了。

同時(shí)產(chǎn)品和開發(fā)配合的方式，也有這樣那樣的弊端。所以我們?cè)谠瓉?lái)的基礎(chǔ)上做了一次升級(jí)，引入了一套開源的方案，druid、dril、superset，這是一套在線的實(shí)時(shí)分析。drill搭建了類似于數(shù)據(jù)庫(kù)查詢的腳本。superset做可視化的展示，我們現(xiàn)在的數(shù)據(jù)規(guī)模是TB級(jí)別的。數(shù)據(jù)查詢效率非常高，基本是秒級(jí)別的。對(duì)于大部分產(chǎn)品的查詢，沒(méi)有那么復(fù)雜，哪怕數(shù)據(jù)量是千萬(wàn)級(jí)別或者億級(jí)別，要查很多用戶的數(shù)據(jù)，依然可以在秒或者十幾秒的時(shí)間里面，就把結(jié)果出來(lái)了。這樣有一個(gè)好處，一旦發(fā)現(xiàn)我原來(lái)假設(shè)的數(shù)據(jù)不對(duì)的時(shí)候，我不需要再用復(fù)雜的方法去提交需求，然后做分析。同時(shí)因?yàn)橐肓诉@套系統(tǒng)之后，它的查詢方式實(shí)際上可以變得比較輕量級(jí)。所以在整個(gè)公司普及，讓產(chǎn)品經(jīng)理自己學(xué)習(xí)語(yǔ)句，去查詢自己有權(quán)限的數(shù)據(jù)。用這樣的方式去做，每個(gè)產(chǎn)品經(jīng)理都可以找到每一個(gè)用戶在觸寶平臺(tái)的數(shù)據(jù)，而且他可以做非常多的分析。引入這套系統(tǒng)，我認(rèn)為我們數(shù)據(jù)驅(qū)動(dòng)的整套體系速度提升很多。

這是一個(gè)簡(jiǎn)單的截圖，上面就是舉個(gè)例子。上面是一個(gè)命令行，實(shí)際它有一個(gè)網(wǎng)頁(yè)，可以打一個(gè)語(yǔ)句。比如我要查昨天在上海激活的，并且還打過(guò)我們的免費(fèi)電話等等，就可以把這些通過(guò)一個(gè)語(yǔ)句查出來(lái)，下面可以出結(jié)果，可以是億級(jí)別的，它跑的很快。下面是一個(gè)rocord的數(shù)據(jù)，里面可以把報(bào)表接到數(shù)據(jù)倉(cāng)庫(kù)里面，用自定義的方式展現(xiàn)出來(lái)。這樣可以做出滿足自己產(chǎn)品需要的業(yè)務(wù)報(bào)表。

另外我們?cè)跀?shù)據(jù)分析這塊，引用了一些算法或者引用了一些方法。首先第一個(gè)比較常用的就是經(jīng)營(yíng)創(chuàng)業(yè)的概念就是同期群分析。就是我想找出兩類差不多一樣的人，但是讓他們?nèi)ンw驗(yàn)產(chǎn)品里面有一定差異的功能，這樣的情況就可可以知道到底是功能的問(wèn)題還是其他問(wèn)題。所以同期群是一個(gè)常用的方法，比如我一個(gè)功能升級(jí)的時(shí)候，我就用一個(gè)用戶畫像的方式把人抓出來(lái)，讓他們體驗(yàn)有一定差異的功能，我最后就能看到一個(gè)結(jié)果。另外我們也建立了流失模型，流失模型指的是我們把現(xiàn)在存量用戶行為數(shù)據(jù)和他的流失數(shù)據(jù)做了一個(gè)建模，也就是說(shuō)可能這個(gè)人他裝了觸寶電話，他沒(méi)有打交道。他可能搜了一個(gè)聯(lián)系人沒(méi)搜出來(lái)，他可能就流失掉了。我們可以通過(guò)海量的行為數(shù)據(jù)，用函數(shù)建模。可以理解成以后來(lái)一個(gè)用戶，我就知道他的流失概率有多大。當(dāng)我知道他的流失概率大的話，我就可以做一些有針對(duì)性的運(yùn)營(yíng)，比如贈(zèng)送一些觸寶分鐘數(shù)或者額外的一些激勵(lì)。

另外也會(huì)做相關(guān)性的分析，主要指的是想了解這個(gè)產(chǎn)品的功能和我們核心數(shù)據(jù)之間的關(guān)系，相關(guān)性有多大。舉個(gè)例子在觸寶電話里面換過(guò)皮膚的用戶他的留存率，他對(duì)留存的幫助到底是正相關(guān)還是負(fù)相關(guān)。是換過(guò)皮膚的人更愿意留下來(lái)，還是沒(méi)換過(guò)的更愿意留下來(lái)。我們通過(guò)這樣的行為，它對(duì)于核心指標(biāo)是有幫助還是有害的，有利于我們做產(chǎn)品的改進(jìn)。

接下來(lái)我講一個(gè)實(shí)戰(zhàn)案例，在觸寶里面真實(shí)發(fā)生的。去年8月份增長(zhǎng)團(tuán)隊(duì)做了一個(gè)小型的戰(zhàn)役叫做八月會(huì)戰(zhàn)。目標(biāo)就是大幅提升觸寶電話的留存率，那個(gè)階段觸寶電話出現(xiàn)了稍微下降，增長(zhǎng)團(tuán)隊(duì)當(dāng)時(shí)接到了任務(wù)，怎么能夠在一個(gè)月的時(shí)間把留存率提升，目前是把新用戶的七日留存率的絕對(duì)值提升8%。舉個(gè)例子七日留存率是50%，就要提升到58%。如果大家做過(guò)產(chǎn)品肯定是了解的，就是要把七日留存率在一個(gè)月的時(shí)間里面提升百分之8個(gè)點(diǎn)，幾乎是不可能的。這個(gè)戰(zhàn)役持續(xù)了四周，這次戰(zhàn)役一共發(fā)布了6個(gè)灰度版本，1個(gè)正式版本，直到找到產(chǎn)品穩(wěn)定了，這是概括的數(shù)據(jù)。那么我們做了什么呢？

第一周，我們是這么想的，我們要降低流失率，流失的人少了，留的人就多了。我先要分析流失的人的原因。下面是一個(gè)開啟電費(fèi)電話，下面需要填手機(jī)號(hào)、驗(yàn)證碼，再一點(diǎn)就進(jìn)入到主界面。注入了主界面，大部分用戶都會(huì)選擇打個(gè)免費(fèi)電話，就這么四步。第一步打開應(yīng)用，就是右邊的應(yīng)用，假設(shè)是百分之百。第二步開啟免費(fèi)電話，只有69%的人。第三步是填好嗎有55%，一直到最后。這就是數(shù)據(jù)，問(wèn)題最大的是第一步，只有69%的人點(diǎn)了開啟免費(fèi)電話，那31%的人走了，所以就要想辦法把這些人留下。產(chǎn)品的灰度方案是這樣的，我們做了四套方案。第一套方案做了基準(zhǔn)，就是右邊原來(lái)的界面。后面的三套方案是這樣的，大家看得不太清楚。

這三個(gè)共同特點(diǎn)就是換了一張圖，告訴你觸寶可以免費(fèi)打電話外，還可以免費(fèi)領(lǐng)流量，換了一個(gè)更強(qiáng)的刺激。這三個(gè)的區(qū)別在于說(shuō)，下面開啟免費(fèi)電話還有一個(gè)功能叫贊助開啟。不打免費(fèi)電話，你也可以進(jìn)來(lái)。第二個(gè)變化就是少了贊助開啟。第三個(gè)就是把按鈕調(diào)下來(lái)，你注冊(cè)就送你分鐘數(shù)，就是激勵(lì)。就是這三套方案，加上原來(lái)的方案，我們做了灰度對(duì)比。就是到底轉(zhuǎn)化率能不能提升，大家覺(jué)得哪個(gè)方案效果最好？結(jié)果是四個(gè)方案轉(zhuǎn)化率幾乎一樣，還是沒(méi)變化，然后就分析數(shù)據(jù)。有一部分人是換手機(jī)了，他注冊(cè)了以后，就變成了我們的老用戶了。因?yàn)閿?shù)據(jù)分析好多細(xì)節(jié)，就是一開始進(jìn)到第一個(gè)界面，大家都認(rèn)為是新用戶，而你登錄以后就變成了老用戶，所以人就變多了。所以發(fā)現(xiàn)第一步的轉(zhuǎn)化率是很高的，實(shí)際上100個(gè)人里面有90幾個(gè)人都點(diǎn)了。

接下來(lái)想改進(jìn)的方案是用一個(gè)強(qiáng)運(yùn)營(yíng)的方案，就是今天用觸寶打電話，你明天再用送你流量，后天再用還送你，你就別走了，就用了強(qiáng)運(yùn)營(yíng)的方式。就是用戶打開觸寶電話就給他一個(gè)大紅包，就是天天有紅包，這個(gè)紅包就放到界面的右下角，大家覺(jué)得這個(gè)方案怎么樣？結(jié)果是留存基本沒(méi)提升，非常出乎我們的意料。為什么給用戶好處，他沒(méi)有留下來(lái)的意思呢？后來(lái)事后經(jīng)過(guò)很長(zhǎng)時(shí)間去分析，我們發(fā)現(xiàn)用戶來(lái)到觸寶他最急切的事情是打免費(fèi)電話，因?yàn)檫@是我們的核心功能。你去引導(dǎo)做別的事情的話，不是一個(gè)合適的時(shí)機(jī)。也許他對(duì)其他事情有興趣，但是阻礙了他體驗(yàn)核心功能，這不是一個(gè)明智的選擇。

所以到了最后一周，必須要完成這個(gè)目標(biāo)，最后走投無(wú)路做了這么一個(gè)改版。就是登錄完了以后，第一步是設(shè)權(quán)限，允許讓我啟動(dòng)、允許讓我讀通話記錄、聯(lián)系人，設(shè)完之后給你一個(gè)新手指南，恭喜你注冊(cè)成功了，可以去打免費(fèi)電話。就做了這么一件事情，這件事情對(duì)比的方案是這樣的。原來(lái)也是注冊(cè)完，先彈一個(gè)紅包告訴你，你得了一個(gè)300分鐘的通話時(shí)長(zhǎng)，要來(lái)學(xué)一下怎么撥打免費(fèi)電話。你點(diǎn)一下，就告訴你撥打之前要設(shè)一下權(quán)限，設(shè)了權(quán)限之后進(jìn)入第三個(gè)界面。這個(gè)界面沒(méi)有通話記錄的，過(guò)一會(huì)兒可能會(huì)刷取。第四個(gè)界面就彈出一個(gè)小熊貓，你搶到一個(gè)小錢包，可以看看有什么東西。這是之前的方案，這個(gè)方案現(xiàn)在換成了這個(gè)。這件事情實(shí)際結(jié)果完成了8%的目標(biāo)，原因是非常曲折的，我給大家解釋一下。

我們做了留存率的分析，我把關(guān)鍵數(shù)據(jù)隱掉了。觸寶的留存率有一種階梯性的下降趨勢(shì)，它會(huì)下降一段時(shí)間再平緩，再下降再平緩，是這樣的趨勢(shì)。我們分析數(shù)據(jù)下降的原因是什么，因?yàn)樵蛴泻芏?，各種各樣的因素。用戶的因素、渠道推廣的因素、服務(wù)器的質(zhì)量因素，包括版本因素等等，都有關(guān)系。我們就分析下降的階梯性，他持續(xù)一段時(shí)間突然下降，覺(jué)得可能是跟發(fā)版有關(guān)系。但是發(fā)現(xiàn)每個(gè)版本的發(fā)布留存率變化不大。然后我們找到某個(gè)版本發(fā)布留存率突然就跳水，我們看這個(gè)版本跟之前的兩個(gè)版本有什么區(qū)別。區(qū)別在于原來(lái)那個(gè)版本，留存率高的版本就是圖的這個(gè)東西，低的版本就是這個(gè)東西。

原來(lái)的方案是好的，后來(lái)我們改的方案變壞了。當(dāng)時(shí)也是糾結(jié)了很久，我們后來(lái)發(fā)現(xiàn)原因可能很多，我們分析可能是因?yàn)檫@個(gè)流程里面，在第二步權(quán)限引導(dǎo)，把它拆開了。先引導(dǎo)一個(gè)最重要的權(quán)限是打電話的權(quán)限。打電話權(quán)限開啟的話，就直接進(jìn)入下一步。而原先的是三步，另外三個(gè)被后置，后置就導(dǎo)致用戶找不到了。而這兩個(gè)權(quán)限會(huì)影響到打電話的質(zhì)量，我們猜測(cè)是這個(gè)原因。然后就把曾經(jīng)的好的版本抓出來(lái)，投到市場(chǎng)上去看一下留存會(huì)不會(huì)再漲上來(lái)。發(fā)現(xiàn)投放了之后數(shù)據(jù)真的漲上來(lái)了，所以我們做的事情就是把曾經(jīng)改壞的東西改回去了，最后的結(jié)果就是留存率上升了7個(gè)百分點(diǎn)，這個(gè)案例還是挺耐人尋味的。

我們也做了事后的總結(jié)和反思，也跟大家分享一下。首先數(shù)據(jù)分析一把雙刃劍，一旦分析錯(cuò)了影響決策，這怎么破呢？我剛剛舉的例子，第一周分析錯(cuò)了，這一周就白干了，歸零了。那怎么辦呢？首先要從多個(gè)緯度去分析。實(shí)際上你的用戶量大了，一定會(huì)在這個(gè)領(lǐng)域里面會(huì)有各種各樣的問(wèn)題。哪怕你用槍去指著數(shù)據(jù)開發(fā)師說(shuō)這個(gè)點(diǎn)不能錯(cuò)，他依然會(huì)犯錯(cuò)誤，所以這要從多個(gè)角度去分析數(shù)據(jù)，要從多個(gè)角度去佐證。第二個(gè)你做數(shù)據(jù)分析通常有目的性的，我認(rèn)為一個(gè)好的產(chǎn)品經(jīng)理要多做有目的的觀察。就是你只看它的結(jié)果是什么，你不帶著任何目的，不帶著任何的假設(shè)，只是觀察它們兩個(gè)是關(guān)系是什么。當(dāng)你就這樣的觀察之后，可能就會(huì)有一種量化的概念。也就是新用戶點(diǎn)擊注冊(cè)，進(jìn)到填手機(jī)號(hào)里面，他是不是70%？這個(gè)事情對(duì)于有經(jīng)驗(yàn)、有過(guò)去數(shù)據(jù)觀察的人會(huì)直接告訴你，這個(gè)數(shù)據(jù)肯定是不對(duì)的。最后總結(jié)下來(lái)，是要多建立總結(jié)的關(guān)系。

上面一個(gè)人叫大衛(wèi)·休謨，他說(shuō)：“我們無(wú)從得知因果之間的關(guān)系，只能得到某些事物總是會(huì)聯(lián)結(jié)在一起，而這些事物在過(guò)去的經(jīng)驗(yàn)里又是從不曾分開過(guò)的?！本秃孟裉O果，蘋果從樹枝上斷開和它落到地上，在過(guò)去都是永遠(yuǎn)在一起發(fā)生的。換句話說(shuō)，明天你遇到一個(gè)蘋果從樹上掉下來(lái)，它不能被證明一定會(huì)落在地上，它有可能會(huì)飛到天上去。說(shuō)這個(gè)例子的意思，我們往往會(huì)從數(shù)據(jù)分析里面形成一些自己的假設(shè)，因?yàn)槭沁@個(gè)原因，所以是這個(gè)結(jié)果。其實(shí)你要知道每建立一個(gè)因果關(guān)系，就已經(jīng)走到了一條岔路了。當(dāng)你知道相關(guān)的關(guān)系越來(lái)越多的話，就會(huì)形成一種感覺(jué)，這種感覺(jué)會(huì)告訴你可能是存在的。

第二個(gè)是發(fā)現(xiàn)數(shù)據(jù)異常的時(shí)候，如何找到原因？你今天看到這個(gè)數(shù)據(jù)，要反問(wèn)這個(gè)問(wèn)題，通常是很難找到原因的。我們能找到這個(gè)原因，它是一個(gè)綜合性的結(jié)果。運(yùn)氣不好的話，通常是發(fā)現(xiàn)不了原因的。因?yàn)閿?shù)據(jù)的因素太多了，最后反過(guò)來(lái)推變量太大了，可能就是那天天氣不好。所以反推是很難的，但是怎么樣能盡量去發(fā)現(xiàn)原因呢？第一個(gè)就是多維度地去分析，第二個(gè)就是要形成直覺(jué)。直覺(jué)的形成就是多觀測(cè)去形成一種感覺(jué)，這種感覺(jué)聽起來(lái)很玄，但是其實(shí)是存在的。

第二個(gè)，是不是每個(gè)產(chǎn)品改動(dòng)都要做AB測(cè)試呢？我個(gè)人感覺(jué)AB測(cè)試一定要做，但是它的效率很低。為什么很低呢？因?yàn)槟銜?huì)冒出很多的假設(shè)，你會(huì)讓開發(fā)不停地做AB測(cè)試碼？開發(fā)可能會(huì)“殺”了你。所以不能每個(gè)都做，但是一定要堅(jiān)持做。就像你玩游戲屏幕是黑的，你突然把一個(gè)屏幕點(diǎn)亮了，你看到一個(gè)局部，你就知道了一點(diǎn)點(diǎn)信息。你再?gòu)膭e的局部再點(diǎn)亮一點(diǎn)點(diǎn)信息，你從局部知道多了以后，就會(huì)由點(diǎn)形成面，這就是AB測(cè)試的作用。所以我自己的總結(jié)就是做數(shù)據(jù)分析的目的是什么呢？它的質(zhì)量目的是從數(shù)據(jù)中直接發(fā)現(xiàn)問(wèn)題，指導(dǎo)產(chǎn)品的改進(jìn)。就像剛才說(shuō)的我發(fā)現(xiàn)留存下降，去分析數(shù)據(jù)，找到原因，問(wèn)題解決了。

它的主要目的還是從數(shù)據(jù)中培養(yǎng)直覺(jué)，培養(yǎng)叫接近產(chǎn)品上帝的直覺(jué)。產(chǎn)品上帝是什么呢？我自己認(rèn)為所有的產(chǎn)品假設(shè)，都有那么一個(gè)人，他可能不是一個(gè)人，他可能是個(gè)神。他知道這個(gè)假設(shè)的答案，他知道所有假設(shè)的答案，他不會(huì)出錯(cuò)，我就把他定義為產(chǎn)品的上帝。你就要盡量接近這個(gè)產(chǎn)品上帝，想的東西要盡量是一樣的。產(chǎn)品經(jīng)理經(jīng)常決策的困境是，首先大家知道假設(shè)有一種答案是最好的，我們知道有一個(gè)最好的答案。

因?yàn)榇蠹叶际侨?，人都是?huì)犯錯(cuò)的，那憑什么你說(shuō)的是對(duì)的，那說(shuō)的也有可能是對(duì)的，那大家就做測(cè)試，可能就陷入一個(gè)循環(huán)。那怎么辦呢？那就是聽老板的，還有的公司聽老板娘的，還有是聽自己的。我產(chǎn)品經(jīng)理比較牛，我就聽我的，不聽老板的。下一個(gè)就是AB測(cè)試，這個(gè)很常見，大家吵架沒(méi)結(jié)果去測(cè)試，你們兩個(gè)最初的方案，最后開發(fā)就倒霉了。所以一般來(lái)講這種情況下，我們認(rèn)為實(shí)際上可能最好的解法，還是想辦法去聽最接近上帝的人。但是這個(gè)人是誰(shuí)呢？誰(shuí)也不知道答案，所以你要把自己變成最接近產(chǎn)品上帝的人。那怎么形成接近產(chǎn)品上帝的人呢？第一個(gè)你自己要有天賦，我承認(rèn)這個(gè)行當(dāng)里面天賦是很重要的。也許有些人很努力，但是努力只能獲得有限的回報(bào)。產(chǎn)品經(jīng)理的天賦我個(gè)人認(rèn)為很重要。

第二個(gè)要有大量的產(chǎn)品實(shí)踐，大家看到張小龍講產(chǎn)品經(jīng)理他的理解，他講到五條，其中有一條也是大量的產(chǎn)品實(shí)踐。因?yàn)榫退闶且粋€(gè)再接近產(chǎn)品上帝的人，你依然不是上帝，要通過(guò)實(shí)驗(yàn)的方式去進(jìn)行修正。我相信做到這樣的結(jié)果之后，就會(huì)從一個(gè)開始有一定的天賦能夠定性分析的人，你知道它好還是不好，到最后你會(huì)定量去分析一個(gè)人，你知道他是好多少。希望大家都能夠成為接近產(chǎn)品上帝的人，謝謝。

最后給觸寶打個(gè)廣告，我們也在招產(chǎn)品運(yùn)營(yíng)，各位職位的同學(xué)們，歡迎大家聯(lián)系我，謝謝。兩位老總的演講非常精彩，因?yàn)槲乙恢币苍诟鷶?shù)據(jù)打交道，大家在下面聽的很認(rèn)真。因?yàn)槲覀儫o(wú)數(shù)次的產(chǎn)品迭代中遇到了無(wú)數(shù)次這樣的問(wèn)題，尤其是大版本發(fā)布遇到小版本的迭代，這樣的問(wèn)題是常常出現(xiàn)的。沒(méi)有人能夠說(shuō)誰(shuí)是對(duì)的，到底產(chǎn)品迭代的時(shí)候，這個(gè)功能設(shè)計(jì)聽誰(shuí)的？聽產(chǎn)品上帝的，還是聽老板、老板娘，還是自己的，還是AB測(cè)試的呢？我司其實(shí)用的方法也是產(chǎn)品測(cè)試，在產(chǎn)品與運(yùn)營(yíng)撕逼的過(guò)程中，大家有沒(méi)有發(fā)現(xiàn)？不管是聽產(chǎn)品上帝還是聽老板的，還是聽老板娘的，還是聽自己的，還是聽AB測(cè)試，所有人都會(huì)說(shuō)，這是用戶說(shuō)的，我們都在聽用戶的。沒(méi)有人說(shuō)會(huì)聽我的，每個(gè)人聽我的人，他說(shuō)我們的用戶他們想要這個(gè)。

所以這其實(shí)是產(chǎn)品，不管是玩產(chǎn)品還是玩運(yùn)營(yíng)，甚至是玩營(yíng)銷，這個(gè)里面都有一個(gè)萬(wàn)能的上帝叫——上帝。