写点什么

增长 VP 必看 5 条建议:资源有限如何做好 A/B 测试

  • 2020-04-05
  • 本文字数:2632 字

    阅读完需:约 9 分钟

增长VP必看5条建议:资源有限如何做好A/B测试

A/B 测试是个喜欢吃预算的家伙。你当然知道 A/B 测试对你很有帮助,并且是你不可缺少的工具。然而,麻烦的地方是它会耗费时间与你的预算。在实验开始之前,你早已预料到同设计、开发同事进行谈判是一个耗时的过程,这还不包括告诉你的领导,现在就是开始 A/B 测试的最佳时刻。


不用怕,只要一点准备工作,你将会轻松的开始实行 A/B 测试。



最近我们对 WordStream.com 首页做的 A/B 试验


最近,我以高级优化专家的角色加入 WordStream。为了提高用户使用路径关键节点的转化率,我从 Web 首页到移动端产品做了许多 A/B 测试。我们的网站虽然有巨大的流量,但我们仍然采用了创业公司的极简模式,务必做到尽可能节省实验流量。


如果您也恰好是在一家小型公司工作,或者在 A/B 测试时预算有一定限制,在这里,为您提供 5 个个人建议,可以帮助您顺利进行 A/B 测试:

建议 1 找到最大痛点 &获得真实反馈

关于优化网站,你已经有一些主意。比如先看一下是否哪个页面跳出率过高?某一环节的转化率是否开始下降?当你决定对此开始一个 A/B 实验时,确保这一页面有足够的流量让你得到真实、可操作的结果。当然,改变“联系我们”页面的图像会提高一点转化率,但这要花费你数月时间才能看到真实结果(因为流量太小)。所以,请务必将你的实验在高流量页面进行,同时,这个页面是转化路径中必不可少的一页。



如果你的产品页面有很多流量,并且是转化漏斗的核心环节,它将成为 A/B 实验的完美选择。


一旦你确定了做 A/B 测试的页面,就要开始寻求真实、诚恳的用户反馈。对许多市场运营人员来说,客观的看待自己的网站是困难的——这就像是让你承认你的孩子长得太丑一样!你可以对一些用户提供奖励,让他们帮忙完成你的用户体验调查。并且,让他们告诉你在使用产品的过程中,哪些地方会感到困惑,或者无法找到他们需要的信息。在 Rockefeller Corporation 的一项调查中显示,68%的用户会因“网站并不在意他们”而离开。更糟的是,你能听到的声音仅仅是剩下的“4%不满意用户”的反馈——另外 96%的用户已经离开,并且不会给你任何信息。如果你没有足够的资源进行用户体验测试,你可以找你的同事帮忙,并让他们给予客观、公正的评价。

建议 2 要做大事!

重要问题需要大的解决方案。改变某个按钮的尺寸和颜色是一个简单方案,但这并不能解决你的长期增长目标。作为替代方案,想一下按钮中的 CTA(Call to Action:用户行为召唤,通过刺激用户、吸引用户点击,完成用户的转化)模式,或者价格本身是否有调整的必要。如果你的 CTA 方式是否让人困惑,或者它没有表现出足够的价值,那么用清晰的、行动驱使的文字修订文案。如果你的页面因为价格表现不清晰而没有带来转化,那么想想用图片或者视频来证明这一出价是有竞争力的。如果你此刻的价格对访问者没有吸引力,你可以试着提供一次免费试用,或者提供服务时限长短不同的多种购买方式。



CTA (行为召唤)按钮

建议 3 给出务实、可操作的假设与 KPI

一旦你设计好一个实验,并确定了运行页面,还要再腾出一些时间建立你的前提假设。通常,这个假设要遵循一种简单的“如果/那么”逻辑:如果我修改了主页上面的 CTA 文案,那么我的点击率将得到显著提高。当你分析实验结果的时候,记得回到这一前提中来。



我们进行的一次关于博客边栏的实验,这里的前提是:“如果我们加入 Adwords 评级报告的图片,那么用户会更有可能点击。


前提假设确认之后,你要选择一些 KPI(关键指标)来监测实验。在上述例子中,主要的 KPI 指标是点击率。你可能还很关注转化率。保持每天、或者每周的频度监控这些数据指标。很多 A/B 测试产品会帮助你进行监控,如果你使用两个独立 URL 进行 A/B 测试,你可以将这两个页面的数据分别进行监测。同样,如果你在同一个页面提供了多个报价,确保要对所有数据进行追踪,这样你才可以对实验结果进行控制。



转化率的数据图通过虚拟数字演示的追踪系统样例

建议 4 耐心!

在 A/B 测试进行时,什么也不做也许是最困难的!确保你的实验至少要进行 7 天,并且你的实验结果达标统计显著,我们建议是按照 95%的标准。大部分 A/B 测试工具会提供给你相关统计结果,当然你也可以通过其他在线计算器获得。如果你的测试页面流量不高,或者你的网站没有达到较高的转化率,这时你需要延长实验时间到一周以上。



Optimizely 的免费在线计算器

建议 5 选择正确的 A/B 测试产品并熟练使用

如今,市面上有很多好的 A/B 测试产品!你能看到几乎所有的平台都会提供相同的 A/B 测试功能,包括可视化编辑功能让你无须调用开发资源就能对页面元素进行移动、编辑,改变大小等操作(节省很多时间)。它们也会提供基本的报表功能,对用户进行定向分流功能(比如,你想要仅仅针对新用户进行 A/B 测试),自定义测试目标的功能,以及对多页面进行 A/B 测试的能力。



Optimizely 的可视化编辑样例


Optimizely 成立有段时间了,并且确立了 A/B 测试工具的标准。他们也为专业用户提供一系列培训课程。无论如何,他们的价格对于许多小企业来说仍显昂贵。当然,您还有一些其他选择,比如 Covert,Marketizator,以及 Visual Website Optimizer。



热力图追踪功能可以为 A/B 测试提供附加价值


Convert 的价格最为具有竞争力,并有用户细分与目标整合功能,您还可以方便的结合 Google Analystics、Crazy Egg 以及其他 CRO 产品进行数据追踪。Marketizator 的价格也不错,尤其是当你签订长期合同的时候。当你的用户加载、滑动,或者退出页面时,他们可以提供额外的调查问卷,以及个性化展示 Banner 广告的功能。Visual Website Optimizer 致力于成为一个全能的转化率优化平台,提供 A/B 测试最高标准的热力图功能,高级目标定制,个性化功能。


译按:

以上工具均为国外厂商提供,对于中国用户来说,除了无中文版本外,在沟通、速度,客户服务等一系列问题上,会带来诸多不便以及高昂的成本,您甚至无法获得有效培训。所以,对于中国用户。我们推荐自家产品,Testin A/B 测试。我们在功能上除了具备上文所述的可视化编辑、用户定向分流等 A/B 测试产品必备功能外,还有自行研发的小程序 A/B 测试等创新服务。

Testin A/B 测试支持可视化和编程等多种编辑


Testin A/B 测试的全平台支持能力,其中就有微信小程序的创新服务


最终,在你选择了 A/B 测试合作伙伴之后,花些时间掌握这个工具,并且保证你接受了完整的培训,了解如何创建实验、运行实验。任何一个好的产品合作伙伴都会花费时间为你提供培训资源,帮助你建立你的第一个实验。


现在你已经准备好开始你的第一个 A/B 测试了!


2020-04-05 16:54579

评论

发布
暂无评论
发现更多内容

啪啪,打脸了!领导说:try-catch必须放在循环体外!

王磊

Java 性能优化 性能 java编程

关于区块链的“去中心化”,90% 的人都搞错了

CECBC

CECBC 区块链技术 去中心化 专制

游戏夜读 | 2020周记(5.24-5.31)

game1night

iOS 动画 - 窗景篇(一)

柯烂

ios objective-c swift 移动应用 动画

万字长文,助你吃透Eureka服务发现机制!

攀岩飞鱼

分布式 微服务 Eureka

这些Java8官方挖的坑,你踩过几个?

牧码哥

Java 踩坑 加密 「Java 25周年」

从技术到管理,我在极客时间的成长历程

邓建春

[Redis] 你了解 Redis 的三种集群模式吗?

猴哥一一 cium

redis redis高可用 redis哨兵模式 群集安装

深入理解JVM类加载机制

Skye

类加载 深入理解JVM

MySQL实战笔记-事务隔离和MVCC

shiziwen

MySQL 学习 事务隔离级别

赢的境界 - 双赢思维

石云升

创业 创业心态 双赢思维

除了直接看余额,谁更有钱还能怎么比(三)

石君

零知识证明 多方计算 同态加密

深度解读 Flink 1.11:流批一体 Hive 数仓

Apache Flink

大数据 flink 流计算 实时计算

深入理解ContextClassLoader

Skye

深入理解JVM ContextClassLoader

坏的开始是成功的一半

escray

是公司养活了你,还是你养活了公司?

四猿外

生涯规划 程序员 个人成长

架构学习历程

Linux 自动化运维工具 ansible

杨仪军

Linux 运维自动化

产品经理的商业能力

punkboy

程序人生 产品经理 商业 商业模式 商业价值

搞定 HTTP 协议(一):HTTP 与网络基础

零和幺

技术 大前端 HTTP

匆忙的一周 ARTS第二周

困到清醒

ARTS打卡 第2周

引花眠

ARTS 打卡计划

java的时间利器:joda

毛佳伟🐳

Java

机器学习算法评估指标——2D目标检测

做技术BP的文案Gou

信息的表示与存储-整数的表示

引花眠

CPU的性能,编译器是这样压榨的!

GPU

算法 cpu 编译器 程序语言

【大厂面试01期】高并发场景下,如何保证缓存与数据库一致性?

NotFound9

Java MySQL 数据库 redis 后端

深入理解ClassLoader

Skye

类加载 深入理解JVM ClassLoader

我的 Windows 利器

玄兴梦影

工具 Win

【求锤得锤的故事】Redis锁从面试连环炮聊到神仙打架。

why技术

redis 分布式锁 分布式系统

不想被下载限速,教你自建属于自己的云盘!

小傅哥

小傅哥 云服务 云盘 在线网盘

增长VP必看5条建议:资源有限如何做好A/B测试_文化 & 方法_云测数据_InfoQ精选文章