如果企业通过 A/B 测试发现可以实现 10% 以上的提升,但是在实施后并没达到获得 10% 提升的效果。这就是一个令人愤怒的体验,但是,你做了一个可以实现 10% 提升的实验,并根据实验调整了渠道,那么你的收入、下载量、注册量等指标中的任何一个真的能如预期提升 10% 吗?

事实上,不可否认会有这种情况的发生,但往往产生的效果是会上升一点,甚至有的根本不上升。

这是为什么呢?这种现象我们称之为“ 意向的保护 ”(受动量守恒定律的启发  )。

高意向用户和低意向用户之间的区别

对于企业的所有用户来说,其中只有一些用户是高意向的。所以仅仅通过简化一些步骤来增加这种高意向是很困难的,这样大多只会增加你的低意向目标用户,如做一些战术性的事情,像减少按钮、优化标题、删除表单字段等方式,尽管这些手段都很棒,但增幅很难超出你的预期。

换句话说,系统中的意向总量是固定的。这就是“保护意向”的法则!

 A / B 测试结果的正确评估

如果你的企业喜欢通过 A / B 测试来测验公司的各个模块并总是有很好的反馈确实非常赞,但如果企业只是将所有 A / B 测试结果汇总在一起,并查看整体的最大化理想结果,这样往往与现实很难匹配。

最明显的验证方法是通过漏斗测试转化,例如观察新用户点击的目标网页或者为召回用户发送电子邮件相关的漏斗,你可以看到用户会从漏斗顶部不均匀地流下来,每一个节点的摩擦都会消耗掉一些意向没有那么强烈的用户 。

解锁高意向用户的增加方式

首先,要了解什么是真正阻止了你的高意向用户按照你期望的“路线”走下去,不管出于什么原因,也不能让那些想要从漏斗离开的人轻易流失。对于 Uber 来说,这些流失点可能是支付方式、App 反应速度、密码的忘记与找回方式等因素。举个例子,如果你无法付款或无法重新进入你的帐户,那么即使你每天都使用这个 App,你也可能会丢弃该 App,切换到另一个不那么痛苦的 App。

因此,你可以通过漏斗进一步使高意向用户增加。如你可以查看交易流程周围的步骤,比如通过参考购物车和添加地址信息的电子商务网站或 SaaS 产品的请求发票流程等信息。考虑这些高意向情景,例如当你点击付费按钮或进行付款后的场景等,所有这些都可以进行优化,并迅速达到用户流失率和转化率的优化。

你的规划图反映现实了吗?

当涉及到产品规划时,很多企业都可以策划一场头脑风暴后设立一些增长 10% 的目标,但需要注意的是企业要在规划图中添加各种影响因素来反映现实因素的不可控影响,不能只是依据所有理想结果进行规划。

最后我想强调一点,“意向的保护”实际上反映了企业产品增长的实际状况受到心理学和数据驱动有机组合共同影响,因此,你不能只在某一块单一地查看这些内容,并假设每一步的理想结果都会如期而至,而要更有“弹性”地综合应用。

来源:https://andrewchen.co/conservation-of-intent/

原作者:Andrew Chen

编译:策小编

编译过程中有所删减,本文仅代表作者观点。

更多互联网干货和案例,可关注【神策数据】公众号了解~

你的 A/B 测试数据期骗你了吗?相关推荐

  1. 意向保护:你的 A/B 测试数据期骗你了吗?

    如果企业通过 A/B 测试发现可以实现 10% 以上的提升,但是在实施后并没达到获得 10% 提升的效果.这就是一个令人愤怒的体验,但是,你做了一个可以实现 10% 提升的实验,并根据实验调整了渠道, ...

  2. 股票新手入门-股票基本名词概念

    开盘价: 是指当日开盘后该股票的第一笔交易成交的价格.如果开市后30分钟内无成交价,则以前日的收盘价作为开盘价. 收盘价: 指每天成交中最后一笔股票的价格,也就是收盘价格. 最高价: 是指当日所成交的 ...

  3. 生活中有哪些实用的心理学知识?

    1.巴纳姆效应 认清这个效应,可以避开很多很多套路,它指的是,当你面临一个非常模糊的人格描述时,你会不由自主地把自己代入进去. 比如这句话:你看似一直在追求世间繁华,实际上你更喜欢的是旋转木马. 是不 ...

  4. linux 模拟开放网络,搭建虚假portal网页认证wifi

    效果 用户打开WiFi,会扫描到和一个与目标网络同样的网络xx.portal,同为开放型可以直接连接到该WiFi ,然后设备会提示该网络需要登录,并自动跳转到登录页面 如果用户忽略或退出自动跳转,当其 ...

  5. 【工程师笔记】第六期:一项Xeon E5-2600 v4测试数据的背后

    做技术的朋友可能有过类似这样的感觉--每天都会遇到新的问题,或者学到新的知识.然而一个人的时间和精力毕竟有限,不是所有的岗位都能做到总是亲力亲为,每人最擅长的领域也各不相同.为了使工程师自己踩过的坑. ...

  6. 第十期|惊!游戏广告主投放十万被骗,推广作弊竟全是虚拟用户

    顶象防御云业务情报中心发现,在互联网生态中存在很多灰色的渠道刷量工作室,渠道方通常以低廉的价格通过这些工作室提高广告URL点击量.应用下载激活量.注册量和真实的推广数据提起反馈给广告主结算,但其提供的 ...

  7. haxe 第一期 入门骗 (谷歌翻译+转载)

    /*     欢迎在15分钟内学习Haxe 3.http://www.haxe.org     这是一个可执行的教程.    您可以使用haxe编译器编译并运行它,    而在与LearnHaxe.h ...

  8. sql优化+索引优化+详解(存储过程+函数 创建千万的测试数据)

    存储过程+函数 创建千万的测试数据 用MYSQL的存储过程创建千万级测试数据表 1创建表 CREATE TABLE `think_user` (`uid` int(11) NOT NULL AUTO_ ...

  9. CSDN 编程竞赛五十五期题解

    竞赛总览 CSDN 编程竞赛五十五期:比赛详情 (csdn.net) 吐槽:填空题参考答案错误,赛后竟然没有修正-- 竞赛题解 题目1.取石子 将n堆石子摆成一排.游戏规则:两人轮流从最左或最右的一堆 ...

最新文章

  1. Java 日志框架适配/冲突解决方案(值得收藏)
  2. ModelBasedCompressiveSensing
  3. 注释工具_干货:PS工具介绍“计算工具+注释工具”
  4. C# int与string转化
  5. js验证开始日期不能大于结束日期_Excel之日期与时间函数YEAR/MONTH/DAY/DATE/DATEFIF...
  6. 为对象分配内存TLAB
  7. java开源服务框架_Java框架服务
  8. Kaggle 数据挖掘比赛经验分享(转)
  9. 锋利的js前端分页之jQuery
  10. 国家图书馆关于php的书,国家图书馆啊,能借的书太少
  11. 红黑树(Red-Black Tree)
  12. 吃鸡 反作弊服务器未运行,绝地求生反作弊服务(BE)修复工具
  13. Linux小游戏——单机掷骰子
  14. solidworks2021安装教程,solidworks2021安装步骤
  15. 英语语法-----一般现在时
  16. 1.U3D和U3D安装介绍
  17. 嵌入式Linux驱动笔记(四)------USB键盘驱动程序
  18. Linux中的UID与GID
  19. windows系统运维基础
  20. word计算机二级视频教程,计算机二级Office入门及上机实践视频教程之Word篇

热门文章

  1. 苹果的组件保护机制 AuthCP
  2. python快速加引号_在python中如何快速地将一串字符串首尾加上双引号?
  3. python 地理信息_GitHub - sujeek/geospatial-data-analysis-cn: Python地理信息数据教程中文版(GeoPandas、GIS)...
  4. tensorflow.GraphDef was modified concurrently during serialization
  5. os.path.join的妙用
  6. coding怎么上传项目 mac_临近毕业,做过的项目怎么处理?
  7. 2019年下信息系统项目管理师真题讲解【视频+PDF下载】
  8. 第14章:信息文档与配置管理和知识与流程管理
  9. 信息系统项目管理师-信息系统成本管理核心知识点思维脑图
  10. SpringBoot连接MQTT进行发布消息时取消保留消息