Netflix是如何做决策的?(一):介绍

神译局是36氪旗下编译团队,关注科技、商业、职场、生活等领域,重点介绍国外的新技术、新观点、新风向。

编者按:决策是行动的指南。不管是个人还是企业,每天都要面临着无数的决策。决策的好坏会对结果产生巨大影响,如何做好决策是每个人都要上的一门必修课。在Netflix这里,他们采用了一种以实验为导向的决策流程,先小范围地对不同方案进行测试,根据对比效果调整,从而摸索出普遍适用的决策。他们为此还在官方技术博客推出了关于Netflix如何用A/N测试做出决策的系列文章。本文来自编译,是系列文章的第一篇。后续文章还将介绍支持 A/B 测试的基本统计概念、实验在 Netflix 中的作用、Netflix对基础设施的投资是如何为实验提供支撑和扩展的,以及 Netflix内部实验文化的重要性。

划重点:

做决定并不难——难的是做出正确的决定

Netflix有4种决策方式:领导决策、内部专家、参考对手、小组辩论

A/B 测试以及准实验等其他因果推理方法,是 Netflix 用科学方法为决策提供信息的手段

成立之初,Netflix就秉承以消费者的选择和控制为娱乐体验中心的理念。公司也在不断改进我们的产品来改善这一价值主张。比方说,Netflix UI 在过去十年的时间里已经发生了彻底的转变。在2010 年的时候,我们的UI 是静态的,只有有限的导航选项,展示也主要根据视频租赁商店的陈列来设计。但现在,我们的用户界面已经是沉浸式的,视频导向的,导航的选项更丰富了,但却没那么突兀了,而展示也充分利用了数字体验。

图 1:Netflix TVUI 的对比:2010 年(上)与 2020 年(下)。

从 2010 年的体验过渡到我们今天所得到的体验,需要 Netflix 做出无数个决定。给一部作品预留一大块显示区与为更多作品预留一大块显示区之间应该做出怎样的权衡?视频就比静态图像要好吗?我们怎么才能在在受限网络上提供无缝的视频转发体验?怎么选择要展示那些作品?导航菜单应该归属哪里,应该包含什么东西?这份清单还可以列得很长。

做决定并不难——难的是做出正确的决定。我们怎么才能确定自己的决定能为现有会员提供更好的产品体验,同时还能吸引新会员从而发展业务?在改进产品,从而为会员带来更多乐趣的事情上,Netflix 可以通过多种方式来做出决定:

让领导做所有决定。

聘请设计、产品管理、用户体验、流媒体交付等学科方面的专家,吸收他们最好的想法。

进行内部辩论,让我们最有魅力的同事的观点获胜。

参考竞争对手的做法。

图 2:不同的决策方式。左上角起顺时针方向:领导决策、内部专家、参考对手、小组辩论。

在所有这些范式里面,可供决策的观点和看法的数量都是有限的。领导层规模很小,小组辩论只能这么大,而我们做出决策所需要的每个领域的领域专家就只有这么多。可以让我们汲取灵感的流媒体或相关服务提供商就几十家。此外,这些范式当中没有一个能提供一种系统化的决策方式,或在观点相互冲突的时候提供解决机制。

在 Netflix这里,在决定如何改善我们向会员提供的体验方面,我们相信还有更好的方式:我们采用 A/B 测试。实验的规模扩大了。实验不是由一小群高管或专家参与决策,而是让我们所有的会员都有机会参与,通过自己的行动就如何改善 Netflix 带给他们的体验进行投票。

从更广泛的角度而言,A/B 测试以及准实验等其他因果推理方法,是 Netflix 用科学方法为决策提供信息的手段。我们先做出假设,收集经验数据(包括来自实验的数据),为我们的假设提供支持或反对的证据,然后得出结论并产生新的假设。就像我们的同事 Nirmal Govind 所解释的那样,实验在构成科学方法基础的推理(根据一般原则得出具体结论)和归纳(根据具体结果和观察形成一般原则)的迭代循环当中起着关键作用。

译者:boxi。