写点什么

用 TestinData.AI 驱动产品增长

  • 2020-04-08
  • 本文字数:3329 字

    阅读完需:约 11 分钟

用TestinData.AI驱动产品增长

用户体验至上,精细化运营、数据驱动增长已经成为上海中原产品发展理念。在 6-7 月,上海中原针对多平台产品线的业主委托和购房体验进行了战略性优化,期间涌现出了许多优秀案例,本次优化实践更是大幅提高了 核心转化用户数。经与上海中原团队协商,我们将其中优秀案例分享给大家,供大家研究、借鉴。




上海中原:

上海中原是中原集团旗下的上海中原物业顾问代理有限公司。作为一家专业的房地产服务机构,上海中原和互联网行业相比,是一家非常传统的企业。数年前,上海中原的获客渠道主要依靠线下门店,或者是在安居客、房天下等线上媒体平台投放广告。近年来,上海中原和互联网的联系越来越紧密,其自主研发的 App 与小程序等产品逐渐在市场上站稳脚跟。

01 上海中原与 Testin 的机缘

身为老资历的房地产代理商,上海中原对于互联网+的建设早有预料,很早就开始在全平台为客户提供服务。到目前为止,上海中原团队不但在 iOS、安卓方面提供了 APP,而且在官网建设以及微信小程序的构建上也不遗余力。这也意味着,团队需要一个能兼容 全部平台的第三方 AB 测试合作伙伴,这正是上海中原与 TestinData.AI 合作的契机。


在深入沟通后,上海中原也对 TestinData.AI 秉承的“数据驱动产品增长,降低产品迭代风险”理念十分赞同。在 Testin 的协助下,上海中原团队使用 AB 测试,为自身的诸多业务找到了最佳的转化方案和营销战略,更是为官网、App、小程序的优化迭代提供了数据分析支持以及地产行业专属方案。


接下来,我们就以 H5、iOS+Android、小程序这三类平台为例,将上海中原的 AB 测试实验始末分享出来,供大家借鉴、参考。

02 Web/H5 优化:精准把控用户心理,转化率提升 178%

实验一:头部导航栏委托栏目测试


为了方便业主在上海中原的官网上登记房屋信息,Web 的导航栏中始终有个“业主委托”入口,提供房屋登记的相关表单。


不过,相对于导航栏上的其他入口所使用的文案而言,“业主委托”显得有些不够直白。


我们都知道,要提高转化率,一个很重要的概念是:不要让用户替你思考。也就是说,如果一个文案晦涩难懂、需要用户想个半天才能理解的话,那么这个文案就是失败的。毕竟,在这个资讯爆炸的时代,没有多少人会愿意停留在一个页面上仔细捉摸你的话。上海中原的团队深谙这个道理,经过探讨,团队决心对这个入口的文案做一次改变,尝试用更简单直白的阐述,来吸引业主。


“发布房源”,便是他们要更换的文案。


原始版本,文案为“业主委托”



版本一,文案为“发布房源”



由于上海中原的页面已经集成过 Testin 的 SDK,因此本次 AB 测试,完全可以实现****0 代码快速实验。上海中原的团队运用 TestinData.AI 的 可视化编辑功能,直接在页面上修改好了文案,甚至不用发版,就完成了实验的创建,从而以最快速度展开了测试。


实验上线了接近半个月,最终的结果着实令人惊叹:实验效果非常显著,用户们用实际行动作出了选择:实验期间,新版的转化率提升达到了 80%左右。并且根据可信度检测,我们有 97%的把握可以认为,该版本上线后将实现 24.25%~136.03%的提升,效果极佳。



实验二:主动式直聊引导访问者发起谈话


除了针对业主行动的优化,团队在本轮实验中还为购房者的使用体验进行了一次优化尝试。先看看原始页面的样子。


原始版本



如图,该页面的右下角有个引导模块,用来吸引用户点击展开并进行沟通。该引导模块被称为“直聊引导”。我们从上海中原团队得知:与一般商品不同,能否吸引用户发起谈话,是可否推动房屋销售的一个关键环节。团队想在这轮实验中,对直聊引导的位置进行变动,从而唤起用户的沟通欲望。


想要完成这一部分的优化,有三个要点必须考虑:


  1. 首先,来到页面上的购房者,可能已经在众多的房屋信息中挑花了眼,其注意力会尤其集中于页面的中心位置,也就是只关心核心区域,极容易忽视其他区域的信息。因此,直聊引导可以尝试放在中心位置。

  2. 其次,图片对于用户的吸引力,往往远胜于文字。因此,用户来到房屋详情页的行动路径,将会是先浏览图片,再浏览右侧文字信息。这样一来,直聊引导的顺序就有讲究了,展示的先后,将会影响其在用户短时记忆的深刻程度,直接关系到最终的点击欲望。所以,究竟放在图上,还是放在文字里?只有测试才知道答案。

  3. 最后,用户在看到“可向我咨询”这种引导性的话语后,最好是能立刻提供一个点击模块,减少他们的思考时间,直接将用户带入转化流程当中。之所以使用点击模块,是因为在日常生活中,点击时间是被接受程度最高的触发方式,符合大部分用户的思考逻辑。


根据三个要点,上海中原设计出了两个新的版本,并迅速投放到了线上,抓紧时间进行了实验。


版本一



版本二



严谨起见,这项实验也被投放了两周左右。最终,团队根据各个版本的数据表现,判断出了优秀版本:



版本一强势胜出,提升幅度高达 178%。这说明了在文字部分添加的引导语,确实更能激起对后续点击模块的点击欲望,实验圆满成功!

03 App 上的 A/B 测试:不同产品端的页面逻辑不可平移,针对性设计才能得到最优转化率

上海中原团队对 App 的优化同样重视。与预期不同的是,接下来的实验,在 Web 和 App 上,竟带来了截然不同的结果。其原因和意义,同样值得我们深思。


App 上的实验,着力点同 Web 上的第一个一样,也是针对委托入口进行的。原始版本中,入口文案使用的是“发现”,这对于挂牌用户而言,入口并不明显。为此,团队决定将文案换为“委托”,简单直接地将入口告诉用户,并对该按钮的点击情况做了统计。


这个改动,会像 H5 一样,收获成功吗?



结果比较遗憾,在 iOS 和 Android 两个平台上,新版本“委托”的点击率,均比原版“发现”要低 15%。


为什么同 Web 的第一个实验一样,是将入口文案更换为直白的阐述,其结果却有着天差地别?


在分析这次实验前,我们需要理解一件事:AB 测试的成功经验,并不都是可以被复制的。有些很好的测试结果,换个渠道、换个平台,甚至换个时段,其转化率效果就会截然相反。因为他们所处的环境、对比的版本、乃至选取的样本,都和其他案例存在差别。以这个实验为例,从表面上看,“发现”对于大部分用户是友好的,点击欲望很强;而委托对于普通用户而言,没有太大的意义,仅对挂牌用户产生吸引。这就是换成委托反而会导致点击率下降的原因。


然而,事实上,这次的实验并没有体现出其真实的目的:提高委托量。该实验仅对委托按钮的点击情况进行了统计,但我们应当意识到,一个成功的委托转化,实际上是包含了点开二级页面、发布房源、成功提交数个事件,是一整个完整的流程。也就是说,最终的委托量,可能会对这个按钮是否应该优化起到决定性作用。


例如,点开“委托”的人员中,有发布房源意愿的用户比例可能会非常高,那么这类用户进入后续页面的可能性,就比普通用户要来的高了,那么这个文案的修改,就会变得极有意义。


因此,我们建议上海中原的团队,在接下来的 App 端 AB 测试实验中,对委托流程的各个点击事件进行统计,甚至可以统计一下各个页面的漏斗转化情况,从而对该按钮的优化效果做出更加详细的判断。相信下一次的实验,会取得更好的结果。

04 小程序 A/B 测试:为方案择优提供数据支持,不再依赖“拍脑袋”做决策

为了方便业主随时随地进行房屋出售,上海中原给业主们提供了两款小程序,一款用来估价,一款用来进行房屋委托。其中,估价小程序的出售按钮,同时也是房屋委托小程序的一个流量入口。只不过,关于该入口的文案,团队迟迟还没有一个定论:他们曾提出了共计四个入口文案,但究竟该采用哪个,实在不好决策。为此,团队引入了 TestinData.AI 的 AB 测试系统,对四个文案进行择优实验



经过为期半个月的实验,结果显示,数据波动造成的偶然性结果较多,各个版本之间并无显著差异,并没有超过 90%的把握认为哪个版本会更加优秀。也就是说,使用哪个版本,效果都差不多。因此,团队最后的决策是,保持原文案即可,不必进行迭代。


虽然本次实验并无突出版本,但数据结果表明的结论让团队不再没有方向,成功告别了以往拍脑袋、赌运气来做决策的方法。他们积极开始了新一轮的文案头脑风暴,以期在接下来的迭代中,斩获更多优秀战果。



如图,几个版本的 p-value 计算结果显示,各个版本无明显差异


未来,我们相信上海中原将进一步将 A/B 实验应用到更多产品平台,以及运营、营销中去,成为中原地产的成功典范!


2020-04-08 19:37580

评论

发布
暂无评论
发现更多内容

JVM 垃圾回收原理简述

Mars

架构师训练营第四周课后作业

万有引力

封装 axios 取消重复请求

360技术

Web 开发

架构师训练营 第九周课程

文江

百分点助力常州科教城上线两大平台 打造国际智慧创新城

百分点认知智能实验室

AI 智慧城市

极客大学 - 架构师训练营 第十三周作业

9527

极客时间架构师训练营 1 期 - 第 13 周总结

Kaven

架构师训练营 1 期第 13 周:数据应用(二)- 总结

piercebn

极客大学架构师训练营

第十三周 数据应用 (二)

9527

从“断臂求生”到一骑绝尘,航运巨头马士基如何利用区块链技术力挽狂澜?

CECBC

航运

架构师训练营 1 期第 13 周:数据应用(二)- 作业

piercebn

极客大学架构师训练营

NO.001-简说Java并发编程史

葛一凡

架构师第十三周作业

_

极客大学架构师训练营 第十三周

架构师训练营第四周”系统架构“总结

随秋

极客大学架构师训练营

性能优化总结(三)

Mars

万字庖解区块链跨链技术

CECBC

区块链

联邦学习与安全多方计算

DataFunTalk

学习 AI

Week9作业

lggl

第十三周作业 (作业一)

Geek_83908e

架构师一期

架构师第十三周总结

_

总结 架构师第十三周

架构师训练营第 1 期 - 第 13 周课后练习

Anyou Liu

极客大学架构师训练营

系统性能优化案例(秒杀系统)

积极&丧

天下武功,唯”拆“不破之架构篇一 | 技术人应知的创新思维模型 (7)

Alan

架构 个人成长 思维 技术人应知的创新思维模型 28天写作

世界之书:《大国政治的悲剧》与美国独行

lidaobing

大国政治的悲剧 28天写作

Java架构速成笔记:五大专题,1345页考点 看完直接收获腾讯、京东、滴滴offer

比伯

Java 编程 架构 面试 计算机

AWS 发布 180 项新服务与功能

亚马逊云科技 (Amazon Web Services)

云计算 AWS

《Python中的竞争性编程:128种提高编码技能的算法》PDF

计算机与AI

Python 算法

第十三周作业 (作业二)

Geek_83908e

架构师一期

架构师训练营第四周”系统架构“作业

随秋

极客大学架构师训练营

Week9总结

lggl

作业

生产环境全链路压测建设历程14:核心链路的改造

数列科技杨德华

全链路压测 七日更

用TestinData.AI驱动产品增长_文化 & 方法_云测数据_InfoQ精选文章