写点什么

高效试错,敏捷迭代——火山引擎 AB 测试帮助这个企业掌握「关键能力」

  • 2023-08-21
    北京
  • 本文字数:1177 字

    阅读完需:约 4 分钟

高效试错,敏捷迭代——火山引擎AB测试帮助这个企业掌握「关键能力」

更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群

最近,乐刻的“百城万店”战略在行业激起了许多讨论。在传统健身馆经营承压、服务业难标准化的语境里,这家创业公司的实践值得被一再研究。乐刻创立至今已有 8 年,目前拥有乐刻健身、FEELINGME、YOGAPOD 小瑜荚、闪电熊猫多个品牌,还有热闹的线上社区和商城,以及居家健身品牌。乐刻已在 24 个城市开出超 1200 家门店,注册会员数突破 800 万人。

市面上已经有不少关于乐刻模式的分析,比如“产业互联网”、“数字化运营”,这些概念解释了乐刻的逻辑,但更令人关注的是,业务的发展是一连串正确的决策促成的,创业公司最大难题莫过于在一条没有人走过的路上持续“做对”,在这一点上乐刻是如何做到的?

实际上,对乐刻而言,所谓的正确决策,其实都是不断试错的结果,新业务如何命名更吸引人?内容关联商品占比为多少时,用户购买转化效率最高?大促到了,如何在多个营销方案中辨别效果最好的那个方案?一个个或大或小的决策影响着最终结局,却都有试错成本。此时,如果没有数据驱动下的敏捷试错的能力,公司会浪费资源,贻误战机,严重时可能还会被错误的决策拖垮。

乐刻对此的解决思路是,和火山引擎合作,引入其数智平台旗下的的 A/B 测试产品——DataTester,帮助业务敏捷试错。

A/B 测试在乐刻的发展中多次发挥关键作用。例如,乐刻想在 APP 里上线电商场景,但拿不准该把模块命名为“集市”还是“商城”。综合 A/B 测试结果,乐刻快速从实验中确定了“商城”的命名,将被解放的时间精力投入后续的运营中。

乐刻 APP 在从 4.0 版本到 5.0 版本迭代时,加入了一个全新模块——首页内容个性化推荐。这个模块涉及产品板块分布、内容展示形式、推荐算法设置等多个环节,每个环节都需要找到“最优解”。以内容展示为例,据记者了解,乐刻当时希望找到转化率最高的内容关联商品最佳占比,为此团队将原有策略作为对照组(占比 20%),设置了三个阶梯实验组(占比 30%、50%、80%)。基于 A/B 测试,乐刻方面发现,内容关联商品占比为 30%时用户转化率最高,因此最终采用了占比 30%的策略,转化率因此明显提升。

据了解,乐刻引入火山引擎 A/B 测试 DataTester 已有一年半时间,A/B 测试目前已经是公司的“数字基建”。成为“基建”意味着,乐刻不只是在某个重大业务升级时才会用到 A/B 测试。A/B 测试已经融入了乐刻的工作流,乐刻也因此摸索出了“快速灰度、快速拿结果,然后扩大人群”的高效决策路径。

火山引擎 DataTester 源自字节跳动长期沉淀,截至 2023 年 6 月,字节已通过 DataTester 累计做过 240 万余次 AB 实验,日新增实验 4000 余个,同时运行实验 5 万余个。DataTester 目前服务了包括美的、得到、凯叔讲故事等在内的上百家企业,为业务的用户增长、转化、产品迭代、运营活动等各个环节提供科学的决策依据,将成熟的“数据驱动增长”经验赋能给各行业。


点击跳转火山引擎DataTester了解更多

发布于: 刚刚阅读数: 3
用户头像

小助手微信号:Bytedance-data 2021-12-29 加入

字节跳动数据平台团队,赋能字节跳动各业务线,对内支持字节绝大多数业务线,对外发布了火山引擎品牌下的数据智能产品,服务行业企业客户。关注微信公众号:字节跳动数据平台(ID:byte-dataplatform)了解更多

评论

发布
暂无评论
高效试错,敏捷迭代——火山引擎AB测试帮助这个企业掌握「关键能力」_大数据_字节跳动数据平台_InfoQ写作社区