神譯局是36氪旗下編譯團隊，關注科技、商業(yè)、職場、生活等領域，重點介紹國外的新技術、新觀點、新風向。

編者按：決策是行動的指南。不管是個人還是企業(yè)，每天都要面臨著無數(shù)的決策。決策的好壞會對結(jié)果產(chǎn)生巨大影響，如何做好決策是每個人都要上的一門必修課。在Netflix這里，他們采用了一種以實驗為導向的決策流程，先小范圍地對不同方案進行測試，根據(jù)對比效果調(diào)整，從而摸索出普遍適用的決策。他們?yōu)榇诉€在官方技術博客推出了關于Netflix如何用A/N測試做出決策的系列文章。本文來自編譯，是系列文章的第一篇。后續(xù)文章還將介紹支持 A/B 測試的基本統(tǒng)計概念、實驗在 Netflix 中的作用、Netflix對基礎設施的投資是如何為實驗提供支撐和擴展的，以及 Netflix內(nèi)部實驗文化的重要性。

劃重點：

做決定并不難——難的是做出正確的決定

Netflix有4種決策方式：領導決策、內(nèi)部專家、參考對手、小組辯論

A/B 測試以及準實驗等其他因果推理方法，是 Netflix 用科學方法為決策提供信息的手段

成立之初，Netflix就秉承以消費者的選擇和控制為娛樂體驗中心的理念。公司也在不斷改進我們的產(chǎn)品來改善這一價值主張。比方說，Netflix UI 在過去十年的時間里已經(jīng)發(fā)生了徹底的轉(zhuǎn)變。在2010 年的時候，我們的UI 是靜態(tài)的，只有有限的導航選項，展示也主要根據(jù)視頻租賃商店的陳列來設計。但現(xiàn)在，我們的用戶界面已經(jīng)是沉浸式的，視頻導向的，導航的選項更豐富了，但卻沒那么突兀了，而展示也充分利用了數(shù)字體驗。

圖 1：Netflix TVUI 的對比：2010 年（上）與 2020 年（下）。

從 2010 年的體驗過渡到我們今天所得到的體驗，需要 Netflix 做出無數(shù)個決定。給一部作品預留一大塊顯示區(qū)與為更多作品預留一大塊顯示區(qū)之間應該做出怎樣的權衡？視頻就比靜態(tài)圖像要好嗎？我們怎么才能在在受限網(wǎng)絡上提供無縫的視頻轉(zhuǎn)發(fā)體驗？怎么選擇要展示那些作品？導航菜單應該歸屬哪里，應該包含什么東西？這份清單還可以列得很長。

做決定并不難——難的是做出正確的決定。我們怎么才能確定自己的決定能為現(xiàn)有會員提供更好的產(chǎn)品體驗，同時還能吸引新會員從而發(fā)展業(yè)務？在改進產(chǎn)品，從而為會員帶來更多樂趣的事情上，Netflix 可以通過多種方式來做出決定：

讓領導做所有決定。

聘請設計、產(chǎn)品管理、用戶體驗、流媒體交付等學科方面的專家，吸收他們最好的想法。

進行內(nèi)部辯論，讓我們最有魅力的同事的觀點獲勝。

參考競爭對手的做法。

圖 2：不同的決策方式。左上角起順時針方向：領導決策、內(nèi)部專家、參考對手、小組辯論。

在所有這些范式里面，可供決策的觀點和看法的數(shù)量都是有限的。領導層規(guī)模很小，小組辯論只能這么大，而我們做出決策所需要的每個領域的領域?qū)＜揖椭挥羞@么多?？梢宰屛覀兗橙§`感的流媒體或相關服務提供商就幾十家。此外，這些范式當中沒有一個能提供一種系統(tǒng)化的決策方式，或在觀點相互沖突的時候提供解決機制。

在 Netflix這里，在決定如何改善我們向會員提供的體驗方面，我們相信還有更好的方式：我們采用 A/B 測試。實驗的規(guī)模擴大了。實驗不是由一小群高管或?qū)＜覅⑴c決策，而是讓我們所有的會員都有機會參與，通過自己的行動就如何改善 Netflix 帶給他們的體驗進行投票。

從更廣泛的角度而言，A/B 測試以及準實驗等其他因果推理方法，是 Netflix 用科學方法為決策提供信息的手段。我們先做出假設，收集經(jīng)驗數(shù)據(jù)（包括來自實驗的數(shù)據(jù)），為我們的假設提供支持或反對的證據(jù)，然后得出結(jié)論并產(chǎn)生新的假設。就像我們的同事 Nirmal Govind 所解釋的那樣，實驗在構(gòu)成科學方法基礎的推理（根據(jù)一般原則得出具體結(jié)論）和歸納（根據(jù)具體結(jié)果和觀察形成一般原則）的迭代循環(huán)當中起著關鍵作用。

譯者：boxi。