写点什么

用 TestinData.AI 驱动产品增长

  • 2020-04-08
  • 本文字数:3329 字

    阅读完需:约 11 分钟

用TestinData.AI驱动产品增长

用户体验至上,精细化运营、数据驱动增长已经成为上海中原产品发展理念。在 6-7 月,上海中原针对多平台产品线的业主委托和购房体验进行了战略性优化,期间涌现出了许多优秀案例,本次优化实践更是大幅提高了 核心转化用户数。经与上海中原团队协商,我们将其中优秀案例分享给大家,供大家研究、借鉴。




上海中原:

上海中原是中原集团旗下的上海中原物业顾问代理有限公司。作为一家专业的房地产服务机构,上海中原和互联网行业相比,是一家非常传统的企业。数年前,上海中原的获客渠道主要依靠线下门店,或者是在安居客、房天下等线上媒体平台投放广告。近年来,上海中原和互联网的联系越来越紧密,其自主研发的 App 与小程序等产品逐渐在市场上站稳脚跟。

01 上海中原与 Testin 的机缘

身为老资历的房地产代理商,上海中原对于互联网+的建设早有预料,很早就开始在全平台为客户提供服务。到目前为止,上海中原团队不但在 iOS、安卓方面提供了 APP,而且在官网建设以及微信小程序的构建上也不遗余力。这也意味着,团队需要一个能兼容 全部平台的第三方 AB 测试合作伙伴,这正是上海中原与 TestinData.AI 合作的契机。


在深入沟通后,上海中原也对 TestinData.AI 秉承的“数据驱动产品增长,降低产品迭代风险”理念十分赞同。在 Testin 的协助下,上海中原团队使用 AB 测试,为自身的诸多业务找到了最佳的转化方案和营销战略,更是为官网、App、小程序的优化迭代提供了数据分析支持以及地产行业专属方案。


接下来,我们就以 H5、iOS+Android、小程序这三类平台为例,将上海中原的 AB 测试实验始末分享出来,供大家借鉴、参考。

02 Web/H5 优化:精准把控用户心理,转化率提升 178%

实验一:头部导航栏委托栏目测试


为了方便业主在上海中原的官网上登记房屋信息,Web 的导航栏中始终有个“业主委托”入口,提供房屋登记的相关表单。


不过,相对于导航栏上的其他入口所使用的文案而言,“业主委托”显得有些不够直白。


我们都知道,要提高转化率,一个很重要的概念是:不要让用户替你思考。也就是说,如果一个文案晦涩难懂、需要用户想个半天才能理解的话,那么这个文案就是失败的。毕竟,在这个资讯爆炸的时代,没有多少人会愿意停留在一个页面上仔细捉摸你的话。上海中原的团队深谙这个道理,经过探讨,团队决心对这个入口的文案做一次改变,尝试用更简单直白的阐述,来吸引业主。


“发布房源”,便是他们要更换的文案。


原始版本,文案为“业主委托”



版本一,文案为“发布房源”



由于上海中原的页面已经集成过 Testin 的 SDK,因此本次 AB 测试,完全可以实现****0 代码快速实验。上海中原的团队运用 TestinData.AI 的 可视化编辑功能,直接在页面上修改好了文案,甚至不用发版,就完成了实验的创建,从而以最快速度展开了测试。


实验上线了接近半个月,最终的结果着实令人惊叹:实验效果非常显著,用户们用实际行动作出了选择:实验期间,新版的转化率提升达到了 80%左右。并且根据可信度检测,我们有 97%的把握可以认为,该版本上线后将实现 24.25%~136.03%的提升,效果极佳。



实验二:主动式直聊引导访问者发起谈话


除了针对业主行动的优化,团队在本轮实验中还为购房者的使用体验进行了一次优化尝试。先看看原始页面的样子。


原始版本



如图,该页面的右下角有个引导模块,用来吸引用户点击展开并进行沟通。该引导模块被称为“直聊引导”。我们从上海中原团队得知:与一般商品不同,能否吸引用户发起谈话,是可否推动房屋销售的一个关键环节。团队想在这轮实验中,对直聊引导的位置进行变动,从而唤起用户的沟通欲望。


想要完成这一部分的优化,有三个要点必须考虑:


  1. 首先,来到页面上的购房者,可能已经在众多的房屋信息中挑花了眼,其注意力会尤其集中于页面的中心位置,也就是只关心核心区域,极容易忽视其他区域的信息。因此,直聊引导可以尝试放在中心位置。

  2. 其次,图片对于用户的吸引力,往往远胜于文字。因此,用户来到房屋详情页的行动路径,将会是先浏览图片,再浏览右侧文字信息。这样一来,直聊引导的顺序就有讲究了,展示的先后,将会影响其在用户短时记忆的深刻程度,直接关系到最终的点击欲望。所以,究竟放在图上,还是放在文字里?只有测试才知道答案。

  3. 最后,用户在看到“可向我咨询”这种引导性的话语后,最好是能立刻提供一个点击模块,减少他们的思考时间,直接将用户带入转化流程当中。之所以使用点击模块,是因为在日常生活中,点击时间是被接受程度最高的触发方式,符合大部分用户的思考逻辑。


根据三个要点,上海中原设计出了两个新的版本,并迅速投放到了线上,抓紧时间进行了实验。


版本一



版本二



严谨起见,这项实验也被投放了两周左右。最终,团队根据各个版本的数据表现,判断出了优秀版本:



版本一强势胜出,提升幅度高达 178%。这说明了在文字部分添加的引导语,确实更能激起对后续点击模块的点击欲望,实验圆满成功!

03 App 上的 A/B 测试:不同产品端的页面逻辑不可平移,针对性设计才能得到最优转化率

上海中原团队对 App 的优化同样重视。与预期不同的是,接下来的实验,在 Web 和 App 上,竟带来了截然不同的结果。其原因和意义,同样值得我们深思。


App 上的实验,着力点同 Web 上的第一个一样,也是针对委托入口进行的。原始版本中,入口文案使用的是“发现”,这对于挂牌用户而言,入口并不明显。为此,团队决定将文案换为“委托”,简单直接地将入口告诉用户,并对该按钮的点击情况做了统计。


这个改动,会像 H5 一样,收获成功吗?



结果比较遗憾,在 iOS 和 Android 两个平台上,新版本“委托”的点击率,均比原版“发现”要低 15%。


为什么同 Web 的第一个实验一样,是将入口文案更换为直白的阐述,其结果却有着天差地别?


在分析这次实验前,我们需要理解一件事:AB 测试的成功经验,并不都是可以被复制的。有些很好的测试结果,换个渠道、换个平台,甚至换个时段,其转化率效果就会截然相反。因为他们所处的环境、对比的版本、乃至选取的样本,都和其他案例存在差别。以这个实验为例,从表面上看,“发现”对于大部分用户是友好的,点击欲望很强;而委托对于普通用户而言,没有太大的意义,仅对挂牌用户产生吸引。这就是换成委托反而会导致点击率下降的原因。


然而,事实上,这次的实验并没有体现出其真实的目的:提高委托量。该实验仅对委托按钮的点击情况进行了统计,但我们应当意识到,一个成功的委托转化,实际上是包含了点开二级页面、发布房源、成功提交数个事件,是一整个完整的流程。也就是说,最终的委托量,可能会对这个按钮是否应该优化起到决定性作用。


例如,点开“委托”的人员中,有发布房源意愿的用户比例可能会非常高,那么这类用户进入后续页面的可能性,就比普通用户要来的高了,那么这个文案的修改,就会变得极有意义。


因此,我们建议上海中原的团队,在接下来的 App 端 AB 测试实验中,对委托流程的各个点击事件进行统计,甚至可以统计一下各个页面的漏斗转化情况,从而对该按钮的优化效果做出更加详细的判断。相信下一次的实验,会取得更好的结果。

04 小程序 A/B 测试:为方案择优提供数据支持,不再依赖“拍脑袋”做决策

为了方便业主随时随地进行房屋出售,上海中原给业主们提供了两款小程序,一款用来估价,一款用来进行房屋委托。其中,估价小程序的出售按钮,同时也是房屋委托小程序的一个流量入口。只不过,关于该入口的文案,团队迟迟还没有一个定论:他们曾提出了共计四个入口文案,但究竟该采用哪个,实在不好决策。为此,团队引入了 TestinData.AI 的 AB 测试系统,对四个文案进行择优实验



经过为期半个月的实验,结果显示,数据波动造成的偶然性结果较多,各个版本之间并无显著差异,并没有超过 90%的把握认为哪个版本会更加优秀。也就是说,使用哪个版本,效果都差不多。因此,团队最后的决策是,保持原文案即可,不必进行迭代。


虽然本次实验并无突出版本,但数据结果表明的结论让团队不再没有方向,成功告别了以往拍脑袋、赌运气来做决策的方法。他们积极开始了新一轮的文案头脑风暴,以期在接下来的迭代中,斩获更多优秀战果。



如图,几个版本的 p-value 计算结果显示,各个版本无明显差异


未来,我们相信上海中原将进一步将 A/B 实验应用到更多产品平台,以及运营、营销中去,成为中原地产的成功典范!


2020-04-08 19:37590

评论

发布
暂无评论
发现更多内容

Java15都快出来了,你还不会Java8中的Lambda?

Java全栈封神

Java Lambda java8

小师妹学JavaIO之:MappedByteBuffer多大的文件我都装得下

程序那些事

Java io nio 小师妹 buffer

终于有一个 Java 可以用的微信机器人了

犀利豆

Java

浅谈互联网思维和区块链思维

CECBC

区块链思维

Solidity的Bytecode和Opcode简介

程序那些事

区块链 智能合约 以太坊 Ethereum eth

架构师训练营第二周

Melo

ARTS打卡第二周6.1-6.7

我笔盒呢

IP 基础知识全家桶,45 张图一套带走

小林coding

计算机网络 计算机基础 IP

面向对象五大基本原则

彭阿三

面向对象设计 面向对象五个基本原则 基本原则

回忆杀:我的编程能力是如何突飞猛进起来的

程序员小跃

Java android 编程 面向对象思想

Assignment 01

高冰洁

ERC20 Short Address Attack

程序那些事

区块链 以太坊 Token ERC20 代币

读懂才会用:Redis ZSet 的几种使用场景

小眼睛聊技术

Java redis 学习 架构 后端

【总结】优秀架构师的职责及综合能力

第一周作业一:食堂就餐卡系统设计

DZ

iPad配置OpenVPN客户端

wong

ipad OpenVPN

徒手撸框架--实现IoC

犀利豆

Java spring

「编程模型」C++封装资源

顿晓

c++ 封装 资源封装 自动化管理 简化代码

大家都知道递归,尾递归呢?什么又是尾递归优化?

程序猿石头

徒手撸框架--实现Aop

犀利豆

Java spring

架构师训练营第一周学习总结

全力以赴@

平常心平常心

zhoo299

随笔杂谈

五分钟学会Elasticsearch查询代理设计

奈学教育

elasticsearch ES

Apache Spark有哪些局限性

古月木易

spark

架构师训练营第一次课程感想小记1

tuuezzy

软件工程 求职 架构师 UML

【JS】给console来的样式

德育处主任

Java html5 大前端 Web console

五分钟学会Elasticsearch查询代理设计

古月木易

Apache Spark有哪些局限性

奈学教育

Apache Spark

食堂就餐卡系统设计

SignalR Core之Hubs基本概念

猫定谔的靴

.net core SignalR realtime Hubs

编程的未来 Java, C, Go, Swift, Dart? Uncle Bob Martin - The Future of Programming

John(易筋)

Java 敏捷开发 编程的未来 编程简史 Bob大叔

用TestinData.AI驱动产品增长_文化 & 方法_云测数据_InfoQ精选文章