最新发布《数智时代的AI人才粮仓模型解读白皮书(2024版)》,立即领取! 了解详情
写点什么

增长 VP 必看 5 条建议:资源有限如何做好 A/B 测试

  • 2020-04-05
  • 本文字数:2632 字

    阅读完需:约 9 分钟

增长VP必看5条建议:资源有限如何做好A/B测试

A/B 测试是个喜欢吃预算的家伙。你当然知道 A/B 测试对你很有帮助,并且是你不可缺少的工具。然而,麻烦的地方是它会耗费时间与你的预算。在实验开始之前,你早已预料到同设计、开发同事进行谈判是一个耗时的过程,这还不包括告诉你的领导,现在就是开始 A/B 测试的最佳时刻。


不用怕,只要一点准备工作,你将会轻松的开始实行 A/B 测试。



最近我们对 WordStream.com 首页做的 A/B 试验


最近,我以高级优化专家的角色加入 WordStream。为了提高用户使用路径关键节点的转化率,我从 Web 首页到移动端产品做了许多 A/B 测试。我们的网站虽然有巨大的流量,但我们仍然采用了创业公司的极简模式,务必做到尽可能节省实验流量。


如果您也恰好是在一家小型公司工作,或者在 A/B 测试时预算有一定限制,在这里,为您提供 5 个个人建议,可以帮助您顺利进行 A/B 测试:

建议 1 找到最大痛点 &获得真实反馈

关于优化网站,你已经有一些主意。比如先看一下是否哪个页面跳出率过高?某一环节的转化率是否开始下降?当你决定对此开始一个 A/B 实验时,确保这一页面有足够的流量让你得到真实、可操作的结果。当然,改变“联系我们”页面的图像会提高一点转化率,但这要花费你数月时间才能看到真实结果(因为流量太小)。所以,请务必将你的实验在高流量页面进行,同时,这个页面是转化路径中必不可少的一页。



如果你的产品页面有很多流量,并且是转化漏斗的核心环节,它将成为 A/B 实验的完美选择。


一旦你确定了做 A/B 测试的页面,就要开始寻求真实、诚恳的用户反馈。对许多市场运营人员来说,客观的看待自己的网站是困难的——这就像是让你承认你的孩子长得太丑一样!你可以对一些用户提供奖励,让他们帮忙完成你的用户体验调查。并且,让他们告诉你在使用产品的过程中,哪些地方会感到困惑,或者无法找到他们需要的信息。在 Rockefeller Corporation 的一项调查中显示,68%的用户会因“网站并不在意他们”而离开。更糟的是,你能听到的声音仅仅是剩下的“4%不满意用户”的反馈——另外 96%的用户已经离开,并且不会给你任何信息。如果你没有足够的资源进行用户体验测试,你可以找你的同事帮忙,并让他们给予客观、公正的评价。

建议 2 要做大事!

重要问题需要大的解决方案。改变某个按钮的尺寸和颜色是一个简单方案,但这并不能解决你的长期增长目标。作为替代方案,想一下按钮中的 CTA(Call to Action:用户行为召唤,通过刺激用户、吸引用户点击,完成用户的转化)模式,或者价格本身是否有调整的必要。如果你的 CTA 方式是否让人困惑,或者它没有表现出足够的价值,那么用清晰的、行动驱使的文字修订文案。如果你的页面因为价格表现不清晰而没有带来转化,那么想想用图片或者视频来证明这一出价是有竞争力的。如果你此刻的价格对访问者没有吸引力,你可以试着提供一次免费试用,或者提供服务时限长短不同的多种购买方式。



CTA (行为召唤)按钮

建议 3 给出务实、可操作的假设与 KPI

一旦你设计好一个实验,并确定了运行页面,还要再腾出一些时间建立你的前提假设。通常,这个假设要遵循一种简单的“如果/那么”逻辑:如果我修改了主页上面的 CTA 文案,那么我的点击率将得到显著提高。当你分析实验结果的时候,记得回到这一前提中来。



我们进行的一次关于博客边栏的实验,这里的前提是:“如果我们加入 Adwords 评级报告的图片,那么用户会更有可能点击。


前提假设确认之后,你要选择一些 KPI(关键指标)来监测实验。在上述例子中,主要的 KPI 指标是点击率。你可能还很关注转化率。保持每天、或者每周的频度监控这些数据指标。很多 A/B 测试产品会帮助你进行监控,如果你使用两个独立 URL 进行 A/B 测试,你可以将这两个页面的数据分别进行监测。同样,如果你在同一个页面提供了多个报价,确保要对所有数据进行追踪,这样你才可以对实验结果进行控制。



转化率的数据图通过虚拟数字演示的追踪系统样例

建议 4 耐心!

在 A/B 测试进行时,什么也不做也许是最困难的!确保你的实验至少要进行 7 天,并且你的实验结果达标统计显著,我们建议是按照 95%的标准。大部分 A/B 测试工具会提供给你相关统计结果,当然你也可以通过其他在线计算器获得。如果你的测试页面流量不高,或者你的网站没有达到较高的转化率,这时你需要延长实验时间到一周以上。



Optimizely 的免费在线计算器

建议 5 选择正确的 A/B 测试产品并熟练使用

如今,市面上有很多好的 A/B 测试产品!你能看到几乎所有的平台都会提供相同的 A/B 测试功能,包括可视化编辑功能让你无须调用开发资源就能对页面元素进行移动、编辑,改变大小等操作(节省很多时间)。它们也会提供基本的报表功能,对用户进行定向分流功能(比如,你想要仅仅针对新用户进行 A/B 测试),自定义测试目标的功能,以及对多页面进行 A/B 测试的能力。



Optimizely 的可视化编辑样例


Optimizely 成立有段时间了,并且确立了 A/B 测试工具的标准。他们也为专业用户提供一系列培训课程。无论如何,他们的价格对于许多小企业来说仍显昂贵。当然,您还有一些其他选择,比如 Covert,Marketizator,以及 Visual Website Optimizer。



热力图追踪功能可以为 A/B 测试提供附加价值


Convert 的价格最为具有竞争力,并有用户细分与目标整合功能,您还可以方便的结合 Google Analystics、Crazy Egg 以及其他 CRO 产品进行数据追踪。Marketizator 的价格也不错,尤其是当你签订长期合同的时候。当你的用户加载、滑动,或者退出页面时,他们可以提供额外的调查问卷,以及个性化展示 Banner 广告的功能。Visual Website Optimizer 致力于成为一个全能的转化率优化平台,提供 A/B 测试最高标准的热力图功能,高级目标定制,个性化功能。


译按:

以上工具均为国外厂商提供,对于中国用户来说,除了无中文版本外,在沟通、速度,客户服务等一系列问题上,会带来诸多不便以及高昂的成本,您甚至无法获得有效培训。所以,对于中国用户。我们推荐自家产品,Testin A/B 测试。我们在功能上除了具备上文所述的可视化编辑、用户定向分流等 A/B 测试产品必备功能外,还有自行研发的小程序 A/B 测试等创新服务。

Testin A/B 测试支持可视化和编程等多种编辑


Testin A/B 测试的全平台支持能力,其中就有微信小程序的创新服务


最终,在你选择了 A/B 测试合作伙伴之后,花些时间掌握这个工具,并且保证你接受了完整的培训,了解如何创建实验、运行实验。任何一个好的产品合作伙伴都会花费时间为你提供培训资源,帮助你建立你的第一个实验。


现在你已经准备好开始你的第一个 A/B 测试了!


2020-04-05 16:54488

评论

发布
暂无评论
发现更多内容

数据结构与算法系列之栈&队列(GO)

书旅

数据结构与算法 Go 语言

分库分表的 9种分布式主键ID 生成方案,挺全乎的

程序员小富

分库分表 Java 分布式

嗯,查询滑动窗口最大值的这4种方法不错...

王磊

Java 数据结构和算法

医疗界“最强大脑”落户杭州!阿里巴巴联合浙大一院共同打造

互联网

重磅解读:K8s Cluster Autoscaler模块及对应华为云插件Deep Dive

华为云开发者联盟

容器 k8s 服务

架构师训练营第 1 期第 7 周作业

owl

极客大学架构师训练营

架构师训练营第八周作业

邓昀垚

极客大学架构师训练营

架构师训练营第八周总结

邓昀垚

【云小课】版本管理发展史之Git+——代码托管

华为云开发者联盟

git 代码管理 托管

tomcat打包成rpm包

lee

tomcat rpm

“开源软件供应链点亮计划-暑期2020”公布结果 基于ChubaoFS开发的项目获得最佳质量奖

京东科技开发者

大数据 开源 云原生

天啦撸!打印日志竟然只晓得 Log4j?

沉默王二

Java 日志 log4j

阿里云官方推出操作系统“等保合规”镜像 -- Alibaba Cloud Linux 等保2.0三级版

阿里云基础软件团队

内核

技术分享:WebAssembly能否重新定义前端开发模式?

葡萄城技术团队

webassembly

DB-Engines 11月数据库排名:PostgreSQL坐稳同期涨幅榜冠军宝座

华章IT

数据库 postgresql

《迅雷链精品课》第一课:认识区块链

迅雷链

区块链

2020LF AI&DATA DAY(AI开源日):中国开源社区迈入全球化新征程

接口测试如何在post请求中传递文件

测试人生路

接口测试

mongodb 源码实现系列 - 网络传输层模块实现三

杨亚洲(专注MongoDB及高性能中间件)

MySQL mongodb 分布式 高性能 分布式数据库mongodb

移动安全加固助力 App 实现全面、有效的安全防护

蚂蚁集团移动开发平台 mPaaS

安全攻防 App风险 mPaaS

第 7 周 性能优化(一)总结

蓝黑

极客大学架构师训练营

简析低代码开发与传统开发的区别与优势

Marilyn

敏捷开发 低代码

会展云技术解读 | 面对突发事故,APP如何做好崩溃分析与性能监控?

京东科技开发者

云计算 云服务

解决大中型浏览器(Chrome)插件开发痛点:自定义热更新方案——2.基于双缓存更新功能模块

梁龙先森

Java chrome 大前端 浏览器 技术方案

全面解析ArrayList,超详细!

程序员的时光

面试 ArrayList JAVA集合

go-zero如何追踪你的请求链路

万俊峰Kevin

Trace microservice Go 语言

每周一看:16份文档资料,程序员软硬实力全概览,总有一个适合你

小Q

Java 学习 程序员 架构 面试

架构师训练营第 1 期第 8 周作业

业哥

数据结构与算法系列之链表操作全集(三)(GO)

书旅

数据结构 Go 语言

【涂鸦物联网足迹】API及SDK介绍

IoT云工坊

软件开发 物联网 API sdk 云平台

终于啃完了这份Java核心原理+框架“面试圣经”,成功五面上岸美团

Java架构追梦

Java 架构 面试 微服务 框架开发

增长VP必看5条建议:资源有限如何做好A/B测试_文化 & 方法_云测数据_InfoQ精选文章