写点什么

AB testing实战

1 人感兴趣 · 52 次引用

  • 最新
  • 推荐
https://static001.geekbang.org/infoq/14/14e5ee415ce310dc9f9e1d860a0a4516.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester 上线全新 MAB 智能调优实验

在A/B实验平台的研发道路上,火山引擎DataTester走在业内前沿,在常规的A/B实验之外,一直在探索实践智能实验。此次新功能MAB智能调优实验(Multi-Armed Bandit), 是一种能根据当前实验数据表现,来智能调整实验内不同实验组的流量比例分配的实验类型。

https://static001.geekbang.org/infoq/81/812325c585f585782c3aeb3d14b031e5.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester 智能发布平台:智能化 A/B 实验,助力产品快速迭代

产品迭代过程中,如何保障高效的功能迭代安全上线,如何快速实现不同人群的精细化运营,成为了产研人员的新挑战,为了帮助企业解决如此种种的迭代痛点,火山引擎A/B测试——智能发布平台(Feature Flag)应运而生。

https://static001.geekbang.org/infoq/d6/d6111b88a546ded2a2b5055e4896835b.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

在毫秒量级上做到“更快”!DataTester 助力飞书提升页面秒开率

飞书为了提升用户体验,对其各项功能的秒开率指标的优化下了大功夫,在这个过程中,火山引擎DataTester通过严格的变量控制,落地更精准的实验结果,帮助研发团队直接佐证并明确了所选优化方案的收益。

https://static001.geekbang.org/infoq/a8/a896dd5f3c9d8f6d8247f84694938183.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

如何用 DataTester 设计并创建可视化实验

借助火山引擎DataTester的可视化编辑器,用户可以主要利用它来加快产品实验速度,并继续自由优化网站的转换,绕过开发团队的带宽限制。

https://static001.geekbang.org/infoq/bb/bb190550ef398bef02a5f4c7a6f37197.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester:让企业“无代码”也能用起来的 A/B 实验平台

在A/B实验领域,无代码的变革也正在进行。火山引擎DataTester的可视化编辑器已能提供“无代码”A/B实验的能力,企业可在开发团队零干预的前提下编辑网站元素并实施A/B实验。

https://static001.geekbang.org/infoq/4e/4edb011ec00d4738ad5ebefe9245846f.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

一文快速了解火山引擎 A/B 测试平台

火山引擎A/B测试(DataTester)是一站式大规模的在线 A/B Testing和智能调优平台,它基于稳定可靠的分流能力、科学完善的统计引擎、智能的调优算法,提供了贯穿整个产品迭代周期的一站式服务。

https://static001.geekbang.org/infoq/e8/e88d885726600c76c0fcff0e4f3c131f.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

如何打造企业专属 A/B 平台?火山引擎 DataTester 开放平台技术揭秘

开放平台对于企业与业务来说,做到的不仅是能力的开放、生态的开放,与此同时还要能提供完善的业务解决方案,帮助企业提升效率。

https://static001.geekbang.org/infoq/0f/0fc3f10c3930572d2fca7e1eadcfca99.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester:抖音的设计团队是如何用 A/B 测试实现高效优化的?

对C端产品而言,产品的每一个细节设置都或多或少影响着用户的产品体验,本文介绍字节跳动的A/B实验文化的同时,也将分享抖音设计团队通过火山引擎A/B测试 DataTester 实现产品优化的案例。

https://static001.geekbang.org/infoq/b0/b0db0b8756a0d0d82bb1b9c0cb2405fa.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

跟着字节 AB 工具 DataTester,5 步开启一个实验

不同于外界对于A、B实验操作复杂的认知,其实使用火山引擎DataTester开启A/B实验的操作十分简单:实验初始时,接入A/B测试,在接入完成之后,开启实验共有9个环节,其中最后 5 个环节,均可以交由DataTester一站式智能化处理完成。

https://static001.geekbang.org/infoq/c2/c22db0230777078e2ae4880e9b8cc02e.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

开启一个 A/B 实验到底有多简单?

火山引擎A/B测试平台DataTester孵化于字节跳动业务内部,在字节跳动,“万事皆A/B,一切可度量” 的实验理念广为流传,小到一条站外推送的消息,大到整个技术底层架构的优化修改,都会做A/B测试。

https://static001.geekbang.org/infoq/6c/6c5a03dbd6764da07b54be97c32ac8b0.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

1 个案例读懂——游戏产品如何用 A/B 测试做增长

本文讲述一个通过A/B测试获得“数据驱动增长”能力的游戏产品故事。并介绍在游戏的研发推广的全流程中,A/B测试都能应用于哪些场景。

https://static001.geekbang.org/infoq/58/58b40c586617a45f1a850dbd7d3e2dd6.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

带你全方面了解字节 A/B 实验的文化与工具

在字节,A/B测试被应用最广泛的是内容推荐、营销活动、运营策略、产品功能以及技术优化这几个方面。“万物皆可A/B”是字节的理念,甚至是抖音和西瓜视频这两个产品的取名,都和 A/B测试有关。

https://static001.geekbang.org/infoq/08/08de7f4654088b4c960f24946a8b9a22.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester:A/B 实验如何应用在抖音的产品优化流程中?

字节跳动内部有着非常浓厚的数据文化和实验文化。抖音、今日头条的名字都经由A/B测试确定,而A/B测试也被作为基础环节,嵌入在了字节内部产品研发的链路中。

https://static001.geekbang.org/infoq/16/169dc239f040a8b93663c84040681058.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester:一个 A/B 测试,将一款游戏的核心收益提升了 8%

一款游戏产品通过火山引擎A/B测试产品DataTester,优化了游戏内“积分玩法”,既提升了用户的产品体验,又增加了游戏的盈利,使得该游戏产品核心收益整体提升超过8%。

https://static001.geekbang.org/infoq/de/deddc9b5a7d02e9d6a11c1c0e29a9b0c.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

A/B 实验避坑指南:为什么不建议开 AABB 实验

本文将针对日常开设 A/B 实验过程中一个不太合理的使用方法——AABB 实验进行详细的解释,告诉大家为什么不建议开 AABB 实验。

https://static001.geekbang.org/infoq/b7/b70d6244c002b7f2fb0662bec8ee94e4.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester:A/B 实验如何实现人群智能化定向?

火山引擎 DataTester 智能发布功能,可以帮助业务人员实现包括产品落地页、活动策略 、产品功能及产品流程的智能定向,大幅提升精细化运营效率。

https://static001.geekbang.org/infoq/0b/0b1512829e44e74b780535da865d47ad.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

A/B 测试成为企业“新窗口”:增长盈利告别经验主义,数据科学才是未来

火山引擎推出DataTester工具,将A/B测试能力开放给更多行业。曾经仅存在于互联网公司内部的秘密武器,如今正在走进更多领域和企业。在实现增长的企业故事里,不乏A/B测试的身影。

https://static001.geekbang.org/infoq/09/09cba21f788819f922a10799dc50f0e9.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester:在广告投放场景下的 A/B 实验实践

科学的AB实验平台,能够确保广告在方案设计、人群选择、渠道定位等每个决策环节,都能获得正向的收益,从而在广告投放时,产生正向反馈越滚越大的复利效应。

https://static001.geekbang.org/infoq/d7/d7a2ecf1dd1e02be747e450ca8e02dd8.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester:A/B 测试,让企业摆脱广告投放“乱烧钱”

在互联网时代,企业该如何做好广告营销,让每1块钱都花在刀刃上,通过广告投放持续驱动盈利增长呢?火山引擎DataTester或许可以交出一份满意答卷。

https://static001.geekbang.org/infoq/7d/7dc3e2c46a0cd60fddbffbffc20a7070.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

剖析字节案例,火山引擎 A/B 测试 DataTester 如何“嵌入”技术研发流程

字节跳动内部有着非常浓厚的数据文化和实验文化,抖音、今日头条的名字都经由A/B测试确定,而A/B测试也是整个研发链路上的必经一环。本文将以字节研发流程中的两个个案例,介绍A/B测试在研发全流程中的角色。

https://static001.geekbang.org/infoq/62/62a770be17fc8449d8e454dc2dc4137c.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester“智能发布”:覆盖产品研发、测试、上线全流程,一站式智能管理 A/B 实验

针对上述痛点,火山引擎A/B测试(DataTester)推出“智能发布”功能,可以大幅降低企业在A/B实验时的人力成本,并且新功能发版时的自助式灰度扩量,可以显著缓解每一次上线发布的风险。

https://static001.geekbang.org/infoq/4c/4cdb166ab6a94e8d8908b1f22eab2589.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester:0 代码也能实施 A/B 测试的实验平台

近日,火山引擎DataTester 对A/B实验“可视化编辑器”进行了升级,可视化编辑器功能让用户无需编写任何代码,即可在网站或相关产品页面上进行基本的视觉更改,并发起A/B实验。

https://static001.geekbang.org/infoq/df/df63bf10007cec2e17d04c9ed421dfb5.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester:“在字节,A/B 实验是一种信仰”

目前,DataTester在字节内每日新增1500+实验,服务于公司400多项大大小小的业务,累计已有150万次的 A/B 实验进行过。

https://static001.geekbang.org/infoq/88/88883ca22753a0a3111453a76269f080.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester:一次 A/B 测试,帮助产品分享率提升超 20%

本文将分享字节跳动的短视频产品增长案例。该产品团队通过A/B测试,圆满地完成了用户互动环节的优化,将产品传播率提升了超20%。

https://static001.geekbang.org/infoq/fd/fd176591fbbc89641e0dc1e2c20f5aa2.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester 升级:降低产品上线风险,助力产品敏捷迭代

在企业竞争加剧的今天,精益开发和敏捷迭代已成为产品重要的竞争力。如何保障每一次Feature高效迭代与安全,如何快速实现面对不同用户的精细化运营,成为了产品团队的新挑战。为了帮助企业解决此类痛点,火山引擎DataTester「智能发布」功能应运而生。

https://static001.geekbang.org/infoq/b6/b6eb65d2d983ac8e2d7dbc522631f3e0.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

火山引擎 DataTester:5 个优化思路,构建高性能 A/B 实验平台

DataTester是由火山引擎推出的A/B测试平台,覆盖推荐、广告、搜索、UI、产品功能等业务应用场景,提供从A/B实验设计、实验创建、指标计算、统计分析到最终评估上线等贯穿整个A/B实验生命周期的服务。

https://static001.geekbang.org/infoq/e6/e618c32fa9054ca7ba8f2299f1a368b3.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

什么是 A/B 实验,为什么要开 A/B 实验?

在推崇“数据驱动增长”的字节,A/B实验是一种信仰。在经过多年的内部业务的打磨,目前已通过火山引擎正式把A/B实验平台对外服务,取名为DataTester。它基于先进的底层算法,提供科学分流能力,提供智能的统计引擎,实验结果可靠有效,助力业务决策。

AB testing实战_AB testing实战技术文章_InfoQ写作社区