最近，关于字节跳动上市的消息再次传出，也引起了大众根据其估值来讨论其优势资产。数据和流量已经成为字节跳动的核心资产，以数据驱动业务增长逐渐成为互联网圈的共识。虽然此前被字节跳动创始人张一鸣否认，但经过多年算法和A/B测试不断试错，逐步建立起来的字节跳动APP生态，曾被外界称为“AB Test Company”。
4月20日，字节跳动副总裁、算法与数据技术负责人杨振源首次透露了字节跳动如何使用A/B测试(AB)。
测试).火山发动机是字节跳动旗下服务企业的智能科技品牌，字节跳动的A/B测试工具也通过火山发动机向企业客户开放。数据驱动不是单纯的数据化，也不是数据优先，而是需要更好地驱动那些可以通过A/B测试进行量化评估的目标，这代表了科学决策的思想。
所谓A/B测试，就是比较不同的策略，根据结果选择最佳方案。A/B测试作为数据驱动的重要手段，广泛应用于互联网推荐系统、广告系统、增长黑客、用户增长、数据分析、数字化运营、智能营销等领域。比如脸书、谷歌等大型海外公司，除了在中国的字节外，他们也借鉴这种模式打造了完美的爆款日记。与到的未来。
随着C流量红利的下降，A/B测试工具将越来越受到重视。
据杨振源介绍，头条号成立之初，就启动了战略推荐的A/B测试。2016年，字节跳动建立了支持大规模产品实验的A/B测试平台，随后先后接入Tik Tok、西瓜视频，将A/B测试应用于产品命名、交互设计、推荐算法、用户增长、广告优化、营销活动。
最新数据显示，字节跳动每天有数万个A/B测试同时进行，单日新增1500多个实验，覆盖400多家商家。随着公司的发展，这些数字还在不断扩大。截至今年3月底，字节跳动已经进行了70多万次甲乙类测试。在A/B测试客户群中，以悟空租车为例。公司通过火山发动机进行了70多次A/B测试，约60%为阳性实验，产品转化率提升约40%。以前分析需求数据需要一周时间，现在只需要一天时间就能得出数据结论，提高了效率。
超越字节系统，网飞工程师戈普拉。
克里希南此前在个人博客中表示：如果一款产品的功能或内容在90秒内无法获得用户的关注，用户很可能会失去兴趣，转向其他行为。这背后的原因是平台没有足够的证据证明用户为什么喜欢某个内容，所以没有用正确的思路来呈现内容。因此，网飞在2013年进行了一次大规模的A/B测试，通过在电影海报上制作个性化的文章来提高转化率。
当然，A/B测试也不是万能的，也有很多局限性。杨振源表示，A/B测试会设定原则，比如提高商品推荐门槛，不推荐分数低的商品。如果进行A/B测试，短期内交易量肯定会减少，但长期来看结论可能会逐渐反转，这是一个长期影响和目标设定的问题。此外，A/B测试需要考虑独立实验条件、统计置信度等问题。
A/B测试不是万能的。杨振源以“Tik Tok”为例解释，短视频平台命名时，进行了内部A/B测试，选项“Tik Tok”实际排名第二。但当时的产品经理认为“Tik Tok”从长远来看更符合认知，更能体现这款产品的造型，所以最终选择了“Tik Tok”这个名字。
因此，杨振源认为，企业应该充分认识到A/B测试的优缺点，为目标选择合适的评估方法。比如战略决策需要专家长时间思考；如果细节可以用A/B来检验，就要先试着去做，注意定量分析的执行能力，才能真正用数据驱动科学决策。“A/B测试是一个可以补充信息，消除偏见，带来很多客观事实的过程。但它并不完美，它需要与其他方法一起完成，就像命名‘Tik Tok’一样。”杨振源说。
