【AICon】探索RAG 技术在实际应用中遇到的挑战及应对策略!AICon精华内容已上线73%>>> 了解详情
写点什么

如何快速上手 AB Testing ?淘系技术专家秘方公开

  • 2020-01-13
  • 本文字数:656 字

    阅读完需:约 2 分钟

如何快速上手 AB Testing ?淘系技术专家秘方公开


本文内容大纲:

1、什么是 A/B Testing?

2、A/B 仅仅是分流吗?

3、怎么样才是科学的 A/B 实验。

什么是 A/B Testing?

关于 A/B 有很多层的定义,通俗来说,A/B 是一种工具,通过分隔 A 和 B 两个版本,统计数据,进而看哪个版本的数据效果更好,对产品目标更有帮助。


在这里我更多想从 A/B 本身的意义来说一下它的定义。


以我们的业务迭代为例,我们会定义产品的业务数据指标(这些指标通常是可以直接和间接反映我们的业务目标的),然后我们在业务迭代中不断提出假设,期望通过做这些假设的改变来提升相对应的业务指标。而在这里 A/B 就是用来衡量我们提出的业务改进假设是否有效的一种方法,从统计学意义上说是一类假设验证的方法。


我觉得这样定义的好处是,A/B 不仅仅是一个工具,更多是一种与业务发展融合在一起的迭代思路,并且在 A/B 背后实际有着科学的统计学的依据支撑着,你也会更加关注每一个业务假设是否真的是有效的。


用户增长中最忌讳的是盲目套用其他业务线的增长手段,而忽视了自己业务的分析和推导的过程,凡事是否正确,需要我们测一测才知道。

产品在什么阶段适合 A/B Testing?

  • 对于一个初创项目,产品刚刚孵化,这种时候不太适合做 A/B 测试,因为这个时候我们的目标相对是比较明确的,就是快速形成“原型”产品和大框架,把“产品生下来”,因此也基本上不会有太多抠细节的部分。

  • 而当产品到了一定的阶段,模式已经成型比较稳定,相对处于快速迭代的阶段,就比较适合利用 A/B Testing 来助力业务发展了。


本文转载自淘系技术公众号。


原文链接:https://mp.weixin.qq.com/s/3T7BJBNtqzJxgir8MDCimA


2020-01-13 17:47610

评论

发布
暂无评论
发现更多内容

一文读懂Partisia区块链的MOCCA 方案:让资产管理可信且可编程

股市老人

Redis.conf详解

百度搜索:蓝易云

redis 云计算 Linux 运维 云服务器

Unclutter for mac(下拉菜单隐藏工具)v2.2.8中文激活版

影影绰绰一往直前

MWeb Pro for mac(好用的博客生成编辑器)v4.5.8中文激活版

影影绰绰一往直前

概念回顾:物联网 (IoT)

NGINX开源社区

nginx 物联网 IoT API mqtt

ProtoBuf-gRPC实践

杨充

Easy New File for Mac(右键增强工具)v5.8中文激活版

影影绰绰一往直前

Cardhop for Mac(通讯录管理工具)v2.2.17汉化版

影影绰绰一往直前

TunesKit Audio Capture for Mac(音频录制和音乐嗅探软件)v3.1.0激活版

影影绰绰一往直前

PullTube for Mac(在线视频下载器)v1.8.5.29中文激活版

影影绰绰一往直前

Programming Abstractions in C阅读笔记:p327-p330

codists

c 数据结构与算法

深入探究Dubbo SPI的原理与强大

小白牙

Java dubbo 后端 spi

em5 SPECPU2006测试说明

源芯

开源 芯片 模拟器

python后端开发学到什么程度就可以找工作了?

算法的秘密

Infuse Pro for Mac(多媒体播放器)v7.7.2免激活版

影影绰绰一往直前

Github每日热榜2024.03.19(Github Trending Daily)

天马行空的大杂烩

GitHub 程序员 开源软件

平凯星辰入选 2023 北京市数字经济标杆企业

编程猫

Hype 4 Pro for Mac(HTML5动画制作软件)v4.1.15中文激活版

影影绰绰一往直前

抖音直播间新热点:假人/数字人直播的真相揭秘!

青否数字人

数字人

一文读懂Partisia区块链的MOCCA 方案:让资产管理可信且可编程

股市老人

Bun v1.0.30 正式发布,即将提供 Windows 稳定版本!

一纸忘忧

JavaScript node.js 前端

Finder Windows for mac(Finder浮动窗口查找器)v1.5.16激活版

影影绰绰一往直前

美国站群多IP服务器的优势与特点,助你在搜索引擎中领先

一只扑棱蛾子

站群服务器 美国站群多IP服务器 站群多IP服务器

Linux中的chsh命令及示例

百度搜索:蓝易云

Linux 运维 Shell 云服务器 chsh

redis报错WRONGTYPE Operation against a key holding the wrong kind of value

百度搜索:蓝易云

redis 云计算 Linux 运维 云服务器

解决git clone时出现Failed to connect to 127.0.0.1 port 1573问题

百度搜索:蓝易云

云计算 Linux 运维 IP 云服务器

华为云GeminiDB新版本发布:全面支持Redis 6.2

华为云开发者联盟

数据库 后端 华为云 华为云开发者联盟 华为云GeminiDB

经典控制算法——PID算法原理分析及优化

攻城狮Wayne

算法 控制 PID 鲁棒性

Java HashSet 深入解析

小白牙

数据结构 后端 java‘

Java深入理解LinkedList

小白牙

Java List 链表

Dropshare 5 for mac(专业的网络文件共享工具)v5.49激活版

影影绰绰一往直前

如何快速上手 AB Testing ?淘系技术专家秘方公开_语言 & 开发_淘系技术_InfoQ精选文章