腾讯AB测试为何不够好2026年10月10日提问

为什么觉得腾讯这类国内的互联网公司在AB test方面做的不够好?

立正的说法是:腾讯的实验产品看上去和 Facebook 一样,底层技术洞察不同,导致实验文化很难推行下来。

AI根据立正公开的文章和视频整理,不是他本人回复。重要的判断,请回到出处核对。

差距在底层工具,不在有没有实验平台

材料里的观点

立正讲过他在腾讯想推进实验非常难:腾讯是大公司,也有实验产品,但缺了当年 Facebook 那套关键的技术洞察,所以产品“看上去一样,底层很不一样”,实验文化就推不动⁠1。他在另一期里把 Facebook 实验容易做的原因拆成三块——工程、数据基础设施、商业模式——并说正是这种容易,才连带影响了扁平、透明、看结果说话的文化⁠2。所以“做得不够好”更可能指实验的默认程度和覆盖范围,而不是完全没有 A/B 测试。

默认都测,才拿得到意外带来的价值

按立正的说法,实验的价值来自意外:有信心的想法被验证,价值属于想法本身,只有反直觉的结果才是实验贡献的⁠3。业界经验是多数业务决策带不来正效果,不做实验的公司既不知道失败率这么高,也不知道哪些成了、哪些没成⁠4。因此只挑有把握的想法去测意义有限,应该让每个新功能都进实验,把功能开关和实验做成同一个对象,靠砍掉有负面影响的功能让指标复利增长⁠3。这套做法需要足够用户量和可靠埋点,用户太少时结论不稳。

关于腾讯的判断来自立正本人讲述,材料里没有腾讯内部实验覆盖率、指标设计等可核对的细节;那期会员视频的完整论证也需回原视频确认。

出处

  1. 1从技术到销售,转型带来的阵痛、挑战、思考

    会员视频2025-07-19

    立正直接讲腾讯实验产品与 Facebook 的底层差异,以及实验文化为何难推行。

  2. 2Facebook的AB Testing是什么样子的?为什么对公司文化有这么大影响?

    视频2021-01-28

    解释 Facebook 实验为何容易做,以及它如何影响公司文化,可用来对照差距在哪。

  3. 3AB实验,有哪些重要却不为人知的知识?|课代表数据大师课5

    视频2025-09-24

    说明实验价值来自意外、为何要默认都测,是判断“做得好不好”的标准来源。

  4. 4港中文深圳讲座:AB实验在互联网企业的应用

    会员视频2021-12-10

    给出多数决策无效、不做实验就不知道成败的经验数据,支撑覆盖率论点。

你也有想问的?

卡住的时候,问问立正:回答只从立正讲过、写过的东西里来,每一段都能点回原文。

问类似的问题

也可以接着问:

所有问题 →