大多数实验失败 - 这正是关键所在

背景:Kohavi在讨论科技公司进行A/B测试实验时,「失败」意味着实验并没有提升目标指标。

在微软公司,大约有三分之二的想法失败。在必应(Bing)这个已经进行了很长时间优化的领域,失败率大约是85%。然后在Airbnb,这个92%的数字是我观察到的最高失败率。

背景说明: Kohavi指的是科技公司进行A/B测试实验,其中

意味着实验没有提升目标指标。

如果你正在做成长,正在以正确的方式做产品驱动式成长,那你就在试图平衡科学和验证假设与假设的方法,同时也非常有野心和雄心,去推动那些最终会对客户产生巨大影响的事情。在这样做的过程中,你遇到的失败次数会比成功还要多。

我过往的增长实验通常成功率在30%左右。所以你尝试的绝大部分事情都不会奏效。所以你要营造一种文化,鼓励人们不害怕冒险,不害怕失败。对我来说,失败不是没有带来收入,失败是没有学到东西。

大约80%的时候,我们的假设和认知都是错误的。