火山引擎 DataTester 上线“流程画布”功能,支持组合型 A/B 实验分析

时间:2022-12-23 13:56:48

更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群

在精细化运营的时代,运营活动同样需要有精细化的策略,例如在年末大促活动中,设计 APP 弹窗提醒、满减、会员领券时,我们可以针对不同生命周期、不同的行为路径的用户设置智能的运营策略,并结合 A/B 实验验证出更加有效的策略。

在这个需求背景下,火山引擎 A/B 测试(DataTester)推出了「流程画布」功能,它作为智能运营的重要能力之一,能基于用户个性化旅程,自动化的筛选用户、编排营销策略、设置触达动作、设计分流实验、确定转化目标、查看数据统计,最终实现高效增长。

值得注意的是,DataTester 的「流程画布」设计将业务场景与 A/B 实验紧密结合,相比于以往实验只能进行单条件、单事件的 A/B 实验分析,「流程画布」实验可以将多个事件组合在一起,进行组合实验分析。

火山引擎 DataTester 上线“流程画布”功能,支持组合型 A/B 实验分析

以往的常规 A/B 实验只能基于推送时机、推送文案、推送渠道等单个事件分别进行实验;而「流程画布」实验却可以将多个事件组合起来,实验不同事件的组合及顺序的变化,综合评估策略的好坏。可组合的事件包括触达顺序、推送时机、推送次数、推送间隔、推送文案等。

下方以金融行业场景为例,介绍 DataTester 的「流程画布」应用。银行为了提高用户的 30 天入金率,即用户开卡后往银行卡内转钱的比例,运营团队会有一系列的动作进行用户触达,包括智能外呼、短信、push、企业微信等渠道。他们需要找到针对不同人群的最佳用户触达路径组合,此时可以应用 DataTester 的「流程画布」能力进行 A/B 实验。

方案组合 A:

  • 开卡当天,进行短信触达,短信触达文案有 3 种
  • 开卡次日,进行二次短信触达,短信触达文案有 3 种
  • 开卡 7 日后,进行智能外呼触达

方案组合 B:

  • 开卡当日,进行智能外呼触达,触达后立即发送一个短信,短信文案有 3 种
  • 开卡次日,进行短信触达,短信触达文案有 3 种
  • 从开卡次日至 7 日,期间每 3 天进行一次 app push 推送,推送内容根据用户不同画像标签有所区别

金融行业用户可以在 DataTester 中,开启对“方案组合 A”和“方案组合 B”的 A/B 测试效果监测,并能同时监测到两个方案组合中,不同的文案所带来的不同的转化效果。DataTester 的「流程画布」能力可以大幅扩展 A/B 测试在业务场景中的适用范围,提升了 A/B 测试的易用性和实用性。

DataTester 是火山引擎数智平台旗下产品,可支持多种复杂的 A/B 实验类型,经过抖音、今日头条等字节业务多年验证,截至 2022 年 8 月,DataTester 已在字节跳动内部累计完成 150 万次 A/B 实验。此外也已经服务了美的、得到、凯叔讲故事等在内多家标杆客户,将成熟的“数据驱动增长”经验赋能给各行业。


点击 ​​火山引擎DataTester官网​​ 了解更多