限时领|《AI 百问百答》专栏课+实体书(包邮)! 了解详情
写点什么

如何快速上手 AB Testing ?淘系技术专家秘方公开

  • 2020-01-13
  • 本文字数:656 字

    阅读完需:约 2 分钟

如何快速上手 AB Testing ?淘系技术专家秘方公开


本文内容大纲:

1、什么是 A/B Testing?

2、A/B 仅仅是分流吗?

3、怎么样才是科学的 A/B 实验。

什么是 A/B Testing?

关于 A/B 有很多层的定义,通俗来说,A/B 是一种工具,通过分隔 A 和 B 两个版本,统计数据,进而看哪个版本的数据效果更好,对产品目标更有帮助。


在这里我更多想从 A/B 本身的意义来说一下它的定义。


以我们的业务迭代为例,我们会定义产品的业务数据指标(这些指标通常是可以直接和间接反映我们的业务目标的),然后我们在业务迭代中不断提出假设,期望通过做这些假设的改变来提升相对应的业务指标。而在这里 A/B 就是用来衡量我们提出的业务改进假设是否有效的一种方法,从统计学意义上说是一类假设验证的方法。


我觉得这样定义的好处是,A/B 不仅仅是一个工具,更多是一种与业务发展融合在一起的迭代思路,并且在 A/B 背后实际有着科学的统计学的依据支撑着,你也会更加关注每一个业务假设是否真的是有效的。


用户增长中最忌讳的是盲目套用其他业务线的增长手段,而忽视了自己业务的分析和推导的过程,凡事是否正确,需要我们测一测才知道。

产品在什么阶段适合 A/B Testing?

  • 对于一个初创项目,产品刚刚孵化,这种时候不太适合做 A/B 测试,因为这个时候我们的目标相对是比较明确的,就是快速形成“原型”产品和大框架,把“产品生下来”,因此也基本上不会有太多抠细节的部分。

  • 而当产品到了一定的阶段,模式已经成型比较稳定,相对处于快速迭代的阶段,就比较适合利用 A/B Testing 来助力业务发展了。


本文转载自淘系技术公众号。


原文链接:https://mp.weixin.qq.com/s/3T7BJBNtqzJxgir8MDCimA


2020-01-13 17:47890

评论

发布
暂无评论
发现更多内容

阿里P8工作10年,离职时发现只剩这份《Java架构速成》笔记了

Java架构师迁哥

基于WebRTC的1对1通话实战(一)环境搭建

IT酷盖

音视频 WebRTC

百度的云图丹青

脑极体

尽情阅读,技术进阶,详解mmap的原理

奔着腾讯去

c++ 内存管理 Mmap 虚拟内存 共享内存

从金融街往事到全场景智慧金融未来

白洞计划

数字经济下的数据库发展以及应用

容光

别闹,那个在加密世界拿着长枪的库币

猫Buboo

区块链 区块链+ 加密资产

Python分类预测模型

Qien Z.

Python 预测模型 6月日更

谁是项目的负责人?

escray

学习 极客时间 朱赟的技术管理课 6月日更

小伙伴们在催更Spring系列,于是我写下了这篇注解汇总!!

冰河

spring 程序员 架构师 aop ioc

Flask-Limiter详细使用说明

行者AI

flask

负载均衡算法之一 - 以 Golang 方式

hedzr

load-balancing weighted round-robin consistent-hashing

5分钟速读之Rust权威指南(二十二)迭代器

wzx

rust

从货币流动性角度看区块链流动性发展

CECBC

云上 ARM 实例应用优化?现在带你读懂它!

亚马逊云科技 (Amazon Web Services)

如何针对美工与设计师的Maya工具进行版本控制

龙智—DevSecOps解决方案

详解 SQL 的集合运算

悟空聊架构

数据库 sql 6月日更 集合运算

前端 JS 之 AJAX 简介及使用

编程三昧

JavaScript ajax 大前端 异步请求

话题讨论|从2021苹果全球开发者大会中,你得到了什么启发?

石云升

wwdc 话题讨论 6月日更

发布60分钟!霸榜Github的阿里面试指导小册,啃透涨薪10k

Java架构师迁哥

基于开源引擎打造自主可控服务体系

张亮

大数据 开源 To B业务

网易云信大规模聊天室系统架构解析

网易云信

聊天室 IM

👑【Hystrix技术专题】原理和特性介绍

码界西柚

Hystrix spring-cloud 熔断器 6月日更

夯实区块链产业发展根基是当务之急 标准体系、知识产权是国际竞争角力之焦点

CECBC

现代分布式架构设计原则-可观测性

余先生

微服务 监控 日志 可观测性 链路追踪

建信金科大咖访谈:人脸识别技术的发展与应用

金科优源汇

智慧新发展:打造更富动感的智慧园区3D可视化决方案!

一只数据鲸鱼

数据可视化 智慧城市 智慧园区 三维可视化

CSS技巧 | 优雅的处理文本溢出截断

devpoint

CSS 6月日更

Kubernetes手记(12)- StatefulSet 控制器

雪雷

k8s 6月日更

区块链技术让传统旅游业焕发新机

CECBC

企业如何成功应用机器学习?看这四点就够了!

亚马逊云科技 (Amazon Web Services)

如何快速上手 AB Testing ?淘系技术专家秘方公开_语言 & 开发_淘系技术_InfoQ精选文章