硬核干货——《中小企业 AI 实战指南》免费下载! 了解详情
写点什么

用 TestinData.AI 驱动产品增长

  • 2020-04-08
  • 本文字数:3329 字

    阅读完需:约 11 分钟

用TestinData.AI驱动产品增长

用户体验至上,精细化运营、数据驱动增长已经成为上海中原产品发展理念。在 6-7 月,上海中原针对多平台产品线的业主委托和购房体验进行了战略性优化,期间涌现出了许多优秀案例,本次优化实践更是大幅提高了 核心转化用户数。经与上海中原团队协商,我们将其中优秀案例分享给大家,供大家研究、借鉴。




上海中原:

上海中原是中原集团旗下的上海中原物业顾问代理有限公司。作为一家专业的房地产服务机构,上海中原和互联网行业相比,是一家非常传统的企业。数年前,上海中原的获客渠道主要依靠线下门店,或者是在安居客、房天下等线上媒体平台投放广告。近年来,上海中原和互联网的联系越来越紧密,其自主研发的 App 与小程序等产品逐渐在市场上站稳脚跟。

01 上海中原与 Testin 的机缘

身为老资历的房地产代理商,上海中原对于互联网+的建设早有预料,很早就开始在全平台为客户提供服务。到目前为止,上海中原团队不但在 iOS、安卓方面提供了 APP,而且在官网建设以及微信小程序的构建上也不遗余力。这也意味着,团队需要一个能兼容 全部平台的第三方 AB 测试合作伙伴,这正是上海中原与 TestinData.AI 合作的契机。


在深入沟通后,上海中原也对 TestinData.AI 秉承的“数据驱动产品增长,降低产品迭代风险”理念十分赞同。在 Testin 的协助下,上海中原团队使用 AB 测试,为自身的诸多业务找到了最佳的转化方案和营销战略,更是为官网、App、小程序的优化迭代提供了数据分析支持以及地产行业专属方案。


接下来,我们就以 H5、iOS+Android、小程序这三类平台为例,将上海中原的 AB 测试实验始末分享出来,供大家借鉴、参考。

02 Web/H5 优化:精准把控用户心理,转化率提升 178%

实验一:头部导航栏委托栏目测试


为了方便业主在上海中原的官网上登记房屋信息,Web 的导航栏中始终有个“业主委托”入口,提供房屋登记的相关表单。


不过,相对于导航栏上的其他入口所使用的文案而言,“业主委托”显得有些不够直白。


我们都知道,要提高转化率,一个很重要的概念是:不要让用户替你思考。也就是说,如果一个文案晦涩难懂、需要用户想个半天才能理解的话,那么这个文案就是失败的。毕竟,在这个资讯爆炸的时代,没有多少人会愿意停留在一个页面上仔细捉摸你的话。上海中原的团队深谙这个道理,经过探讨,团队决心对这个入口的文案做一次改变,尝试用更简单直白的阐述,来吸引业主。


“发布房源”,便是他们要更换的文案。


原始版本,文案为“业主委托”



版本一,文案为“发布房源”



由于上海中原的页面已经集成过 Testin 的 SDK,因此本次 AB 测试,完全可以实现****0 代码快速实验。上海中原的团队运用 TestinData.AI 的 可视化编辑功能,直接在页面上修改好了文案,甚至不用发版,就完成了实验的创建,从而以最快速度展开了测试。


实验上线了接近半个月,最终的结果着实令人惊叹:实验效果非常显著,用户们用实际行动作出了选择:实验期间,新版的转化率提升达到了 80%左右。并且根据可信度检测,我们有 97%的把握可以认为,该版本上线后将实现 24.25%~136.03%的提升,效果极佳。



实验二:主动式直聊引导访问者发起谈话


除了针对业主行动的优化,团队在本轮实验中还为购房者的使用体验进行了一次优化尝试。先看看原始页面的样子。


原始版本



如图,该页面的右下角有个引导模块,用来吸引用户点击展开并进行沟通。该引导模块被称为“直聊引导”。我们从上海中原团队得知:与一般商品不同,能否吸引用户发起谈话,是可否推动房屋销售的一个关键环节。团队想在这轮实验中,对直聊引导的位置进行变动,从而唤起用户的沟通欲望。


想要完成这一部分的优化,有三个要点必须考虑:


  1. 首先,来到页面上的购房者,可能已经在众多的房屋信息中挑花了眼,其注意力会尤其集中于页面的中心位置,也就是只关心核心区域,极容易忽视其他区域的信息。因此,直聊引导可以尝试放在中心位置。

  2. 其次,图片对于用户的吸引力,往往远胜于文字。因此,用户来到房屋详情页的行动路径,将会是先浏览图片,再浏览右侧文字信息。这样一来,直聊引导的顺序就有讲究了,展示的先后,将会影响其在用户短时记忆的深刻程度,直接关系到最终的点击欲望。所以,究竟放在图上,还是放在文字里?只有测试才知道答案。

  3. 最后,用户在看到“可向我咨询”这种引导性的话语后,最好是能立刻提供一个点击模块,减少他们的思考时间,直接将用户带入转化流程当中。之所以使用点击模块,是因为在日常生活中,点击时间是被接受程度最高的触发方式,符合大部分用户的思考逻辑。


根据三个要点,上海中原设计出了两个新的版本,并迅速投放到了线上,抓紧时间进行了实验。


版本一



版本二



严谨起见,这项实验也被投放了两周左右。最终,团队根据各个版本的数据表现,判断出了优秀版本:



版本一强势胜出,提升幅度高达 178%。这说明了在文字部分添加的引导语,确实更能激起对后续点击模块的点击欲望,实验圆满成功!

03 App 上的 A/B 测试:不同产品端的页面逻辑不可平移,针对性设计才能得到最优转化率

上海中原团队对 App 的优化同样重视。与预期不同的是,接下来的实验,在 Web 和 App 上,竟带来了截然不同的结果。其原因和意义,同样值得我们深思。


App 上的实验,着力点同 Web 上的第一个一样,也是针对委托入口进行的。原始版本中,入口文案使用的是“发现”,这对于挂牌用户而言,入口并不明显。为此,团队决定将文案换为“委托”,简单直接地将入口告诉用户,并对该按钮的点击情况做了统计。


这个改动,会像 H5 一样,收获成功吗?



结果比较遗憾,在 iOS 和 Android 两个平台上,新版本“委托”的点击率,均比原版“发现”要低 15%。


为什么同 Web 的第一个实验一样,是将入口文案更换为直白的阐述,其结果却有着天差地别?


在分析这次实验前,我们需要理解一件事:AB 测试的成功经验,并不都是可以被复制的。有些很好的测试结果,换个渠道、换个平台,甚至换个时段,其转化率效果就会截然相反。因为他们所处的环境、对比的版本、乃至选取的样本,都和其他案例存在差别。以这个实验为例,从表面上看,“发现”对于大部分用户是友好的,点击欲望很强;而委托对于普通用户而言,没有太大的意义,仅对挂牌用户产生吸引。这就是换成委托反而会导致点击率下降的原因。


然而,事实上,这次的实验并没有体现出其真实的目的:提高委托量。该实验仅对委托按钮的点击情况进行了统计,但我们应当意识到,一个成功的委托转化,实际上是包含了点开二级页面、发布房源、成功提交数个事件,是一整个完整的流程。也就是说,最终的委托量,可能会对这个按钮是否应该优化起到决定性作用。


例如,点开“委托”的人员中,有发布房源意愿的用户比例可能会非常高,那么这类用户进入后续页面的可能性,就比普通用户要来的高了,那么这个文案的修改,就会变得极有意义。


因此,我们建议上海中原的团队,在接下来的 App 端 AB 测试实验中,对委托流程的各个点击事件进行统计,甚至可以统计一下各个页面的漏斗转化情况,从而对该按钮的优化效果做出更加详细的判断。相信下一次的实验,会取得更好的结果。

04 小程序 A/B 测试:为方案择优提供数据支持,不再依赖“拍脑袋”做决策

为了方便业主随时随地进行房屋出售,上海中原给业主们提供了两款小程序,一款用来估价,一款用来进行房屋委托。其中,估价小程序的出售按钮,同时也是房屋委托小程序的一个流量入口。只不过,关于该入口的文案,团队迟迟还没有一个定论:他们曾提出了共计四个入口文案,但究竟该采用哪个,实在不好决策。为此,团队引入了 TestinData.AI 的 AB 测试系统,对四个文案进行择优实验



经过为期半个月的实验,结果显示,数据波动造成的偶然性结果较多,各个版本之间并无显著差异,并没有超过 90%的把握认为哪个版本会更加优秀。也就是说,使用哪个版本,效果都差不多。因此,团队最后的决策是,保持原文案即可,不必进行迭代。


虽然本次实验并无突出版本,但数据结果表明的结论让团队不再没有方向,成功告别了以往拍脑袋、赌运气来做决策的方法。他们积极开始了新一轮的文案头脑风暴,以期在接下来的迭代中,斩获更多优秀战果。



如图,几个版本的 p-value 计算结果显示,各个版本无明显差异


未来,我们相信上海中原将进一步将 A/B 实验应用到更多产品平台,以及运营、营销中去,成为中原地产的成功典范!


2020-04-08 19:37763

评论

发布
暂无评论
发现更多内容

面试官:面对千万级、亿级流量怎么处理?

艾小仙

Java 缓存 分布式 高并发 中间件

码农会锁,synchronized 对象头结构(mark-word、Klass Pointer)、指针压缩、锁竞争,源码解毒、深度分析!

小傅哥

小傅哥 虚拟机 synchronized mark-word Klass Pointer

狼人杀背后的秘密,实时语音你不知道的那些事

anyRTC开发者

音视频 WebRTC 语音 RTC 安卓

第6周作业

饭桶

频繁操作本地缓存导致YGC耗时过长

AI乔治

Java 架构 JVM GC

ConcurrentHashMap核心原理,彻底给整明白了

AI乔治

Java 架构 分布式 线程

极客大学 - 架构师训练营 第六周

9527

天呐!价值2980元Java成神面试题竟在Github开源了

996小迁

Java 学习 架构 面试

零基础IM开发入门(三):什么是IM系统的可靠性?

JackJiang

网络编程 即时通讯 IM

真香!天天996进不去阿里?看5年苦逼程序猿怎么逆袭阿里P7

小Q

Java 学习 架构 面试 程序猿

Vidyo独特的互联网适应性

dwqcmo

音视频 集成架构 解决方案 智能硬件

《Maven实战》.pdf

田维常

程序员

极客大学 - 架构师训练营 第六周作业

9527

直播带货大战在即:账号交易灰产猖獗

石头IT视角

架构师训练营第二周课后作业

天涯若海

极客大学架构师训练营

当 TiDB 与 Flink 相结合:高效、易用的实时数仓

Apache Flink

flink #TiDB

企业级RPC框架zRPC

万俊峰Kevin

RPC microser Go 语言

Netty源码解析 -- 零拷贝机制与ByteBuf

binecy

Netty 源码剖析

DeFi流动性挖矿系统开发技术方案

薇電13242772558

区块链 defi

通过GUI界面更改 Ubuntu 20 LTS apt 源为阿里云

jiangling500

ubuntu 阿里云 apt

web worker的介绍和使用

程序那些事

多线程 Web Worker 异步模型 异步编程 web技术

gRPC服务注册发现及负载均衡的实现方案与源码解析

网管

负载均衡 gRPC etcd 服务注册与发现 Go 语言

在阿里内部,做Java到金字塔顶端的人平时都如何学习源码?

小Q

Java 学习 架构 面试 程序猿

甲方日常 40

句子

工作 随笔杂谈 日常

第6周学习总结

饭桶

阿里内部首发1000页涨薪面试宝典:Spring+SpringMVC+MyBatis框架整合开发实战

Java架构追梦

Java 源码 架构 面试 SSM框架

数字“异化”生存

脑极体

Flink在窗口上应用函数-6-9

小知识点

scala 大数据 flink

分析和解决JAVA 内存泄露的实战例子

AI乔治

Java 架构 JVM 内存泄露

小白学算法:买卖股票的最佳时机!

王磊

Java 算法

为产业AI去障:联想的边缘突破

脑极体

用TestinData.AI驱动产品增长_文化 & 方法_云测数据_InfoQ精选文章