从子弹短信到聊天宝,老罗靠什么挑战微信?

在裂变式传播横行的现在,什么样的拉新方式才是最容易被用户接受的?

当你看到好友分享给你的物料时,是一段话+链接吸引你,还是一个简单的链接卡片更诱人?亦或是,一张带有二维码的海报,会让你有转发的欲望?

作为研发过现象级产品子弹短信的公司,快如科技始终在思考如何提高自传播,从而拉动活跃、拉动留存。在苦心研究了数年来大大小小许多裂变案例后,他们终于在网红产品聊天宝的分享方式上,利用Testin云测A/B测试,踏出了探索求知的第一步。

一个评判文案,链接和海报孰优孰劣的A/B测试,正在无数人面前徐徐展开。

什么是A/B测试?
A/B 测试是一种通过分组对照实验来优化产品的方法,为同一个优化目标制定两个方案(比如两个页面),让一部分用户使用 A 方案,同时另一部分用户使用 B 方案,统计并对比不同方案的转化率、点击量、留存率等指标,以判断不同方案的优劣并进行决策。

聊天宝:我们想跟这个世界聊聊

仅用12小时就正式登顶App Store社交榜的现象级产品:聊天宝,是一款可以赚钱的聊天软件。据了解,聊天宝相比于升级前的子弹短信,着重对社交关系作出了重大突破,诸多全新功能的加入,正在让这个社交App的可拓展性前所未有的丰富起来。

排名登顶的聊天宝

当然,我们也应当注意到,被微信、QQ熏陶了十几年的广大用户,可能不能立刻接受聊天宝的这些独特功能,因此,子弹短信谨慎的在大量功能上创建了A/B测试,依靠数据驱动来为迭代指引方向。

聊天宝&Testin云测的合作机缘

聊天宝,可能是国内,乃至全球第一个对QQ、短信、微信内的裂变分享方式,展开严谨A/B测试实验的产品。

提到裂变分享,互联网人想必都不会太陌生。作为AARRR模型里Refer(自传播)阶段的一种表现形式,它被广泛地运用在许多重要活动当中,使用者不乏如网易,新世相,三联生活周刊等耳熟能详的企业或自媒体团队。

网易18年开年大课所用的裂变海报,及其A/B测试版本

但看似光鲜亮丽的裂变背后,却也有着无数为拉新促活绞尽脑汁的运营人,为裂变分享的效果不佳而感到头疼。所以曾有很多团队,想针对裂变展开A/B测试。

在过去,人们只能使用粗浅的方法,通过分渠道、建群投票、问卷采集等不严谨的手法,来实现简单的分组对照实验,寻找合适的传播手段。例如,

  • 常常10w+的咪蒙,建群给备选文案投票
  • 网易开年大课,4海报对比测试
  • 刷屏刷到炸服的三联生活周刊,8海报方案择优

等等,都是通过这类方式实现。诚然,目的很好,但他们对于反馈数据、置信区间、假设检验等,均缺乏足够的样本、有效的采集和精准的分析

三联生活周刊的8版本A/B测试

事实上,一个严谨可靠的A/B测试,必定是随机、双盲、大样本的分组对照实验:

  • 随机:样本进入的实验版本是随机而非人为分配的
  • 双盲:实验发起人和样本都不知道样本进入了哪一个实验版本(系统作为第三方进行分配)
  • 大样本:样本量要足够大
  • 最终结果需要计算置信区间并进行假设检验

这些,都离不开专业的A/B测试工具。聊天宝选择了与Testin云测A/B测试合作,在聊天宝的产品端发起分流,实现了文字、链接卡片与海报图片的A/B测试实验。

聊天宝针对文案,链接和海报分享的 A / B测试

聊天宝针对文案,链接和海报分享的 A / B测试

聊天宝针对文案,链接和海报分享的 A / B测试

Testin云测A/B测试:让应用更有价值

事关千万样本的大实验,为什么聊天宝选择了Testin云测作为A/B测试的合作伙伴?

  1. 全平台支持。短短一天内,聊天宝的客户端就涌入了百万级别的用户。庞大的流量,同时也意味着团队可能需要在各个平台上都展开A/B测试实验,Testin 云测A/B测试完整支持iOS、安卓、Web/H5、微信小程序和后端全平台A/B测试,可以胜任。
  2. 定向分流,精准分割。Testin云测所提供的个性化功能,允许企业限定样本属性。这不但拓宽了聊天宝的功能,还保障了实验样本的精准分割,成功助力客户团队实现精细化运营。
  3. 支持灰度发布。新产品,往往也意味着迭代、更新会更加频繁。但每一次上线其实都是有风险的,很多没测出来的隐性问题,可能会影响用户体验、导致用户流失,造成极大损失。为了避免这种情况,可以通过灰度发布,逐步给新版本放量,就能在给与用户逐步适应新功能的时间同时,监测数据反馈,控制问题影响范围,妥善规避风险

“我们想跟这个世界聊聊”

对曾经孕育过现象级产品的快如科技来说,用A/B测试探索优化方向、用数据驱动产品迭代,是在原子弹短信上积累的宝贵经验。在这个过程中,一个高效全面又稳定的工具是至关重要的。因此,全新升级的聊天宝才选择了引入Testin云测的A/B测试系统,使得团队可以放开手,去追求更高效率的增长,让应用更有价值。

Testin云测A/B测试现已宣布永久免费,点击下方链接即可使用

快速开始您的第一个A/B测试实验吧