产品优化成果过关?监控数据说了算
本文基于神策数据推出的《数据驱动下的产品决策》在线课程数据分析师演讲进行整理。
张小龙曾经说:“产品是研究人性,不是研究逻辑。”
那么产品是否没有权责边界?改进是否没有对错优劣?并非如此,需求决定了产品优化的方向,而量化需求的指标同样可以用来量化产品改进。
驱动利器:数据驱动下的产品决策(上)表明,数据驱动产品改进主要贯穿于三个阶段:探寻、测试和验证。数据驱动下的产品决策(中)通过一个现象级案例的故事,举例介绍了如何探寻到产品改进切入点,并进行改进。本篇作为收尾之作,延续中篇案例,介绍测试和验证的数据分析方法。
数据驱动产品的第二阶段是测试环节,由于逻辑与第三阶段相同,本文不再赘述。第三阶段是验证环节,主要作用是对改版后的新功能是否有效进行评估。
验证落地页改版效果
图1 落地页改进验证策略
产品改进需要依照改进目的和新功能的具体内容,找到合理的验证指标,如下:
落地页结构是否发生变化,如果结构发生变化,可能会直接影响数据,验证失去意义;
跳出率有没有降低;
用户结构有没有变化。
首先通过检测得知,落地页结构没有发生变化,仍然是答主页和问题页占了绝大多数,随后发现七日内跳出率相差了 35%,一次性用户也有了 25% 的减少,数据表明落地页改版效果非常明显。
验证首页改版效果
图2 首页改进策略
首页改进有两个目的:
提升问题的消费量,尤其是主推的免费内容消费量;
改变用户的消费习惯,分流用户从首页入口消费,让首页起到作用。
首页改进有三个验证指标:
免费/付费问题的日均消费量和消费占比;
问题消费主要页面的分布变化;
首页到消费问题的转化率变化,浏览首页的人有多少消费了问题。
根据日均消费量的统计图,改版后日均消费量 3800 相比改版前的 1000,有了非常大幅度的提升,当然付费问题也不可避免受到了约五分之一的冲击。这里需要产品经理根据当前业务需求进行评估,如果这样的结果是可以接受的,那么改版就是成功的。
图3 首页 7 日问题消费主要来源页面评估
根据上图对 7 日问题消费的主要来源页面的分析,发现改版前消费主要来源于直接点击,占比 45%,而改版后个性化推荐用户占比提升至 33%,这意味着从落地页进入产品的用户有很多都愿意点击个性化推荐模块,对免费内容进行消费;首页提升占比至 27%,说明首页消费也得到了提升;从绝对数据来看,所有数据都有所提升。
图4 改版前后用户在首页点进问题卡片并消费的转化率
首页点进问题卡片并消费的转化率相对改版前有明显的上升,这是由于首页承载了更多的免费内容,且大部分都分布在第一屏或第二屏,因此用户的转化意愿大大增强。
如果追求更细致的验证,可以通过数据对比免费功能的体验是否对付费形成大幅度冲击,这才是最根本的目标,因为免费内容的提供也是为了更高的留存,最终将他们转化为付费用户。
答主答题量是否提升
图5 答主答题量验证策略
对答主答题量的改进主要有三个目的:
提升答题人数;
减少答主被提问的马太效应;
减小答主问题被消费的马太效应;
简单介绍前两个验证指标:
答主日均答题人数;
被提问答主的分布。
图6 答题人数与用户分布对比
根据上图,7 日日均答主答题人数从 200 增加到了 400,提高了 100%,被提问的答主的分布也有所改变,改版前大 V 与普通用户被提问的比例达到了 9:1,改版后相对更加合理,变成了 7:3,马太效应有了显著的减弱。
对新功能的评估
图7 新功能评估策略
本文中篇共改版了四个新功能:
关注引导;
重新规划推荐位;
增加 UGC 的讨论功能;
增加 UGC 的新手提问功能。
对新功能评估,需要关注四个评估指标:
功能的使用率和使用深度;
功能相关的转化率;
使用功能的人群分布,分别是答主、提问者、新用户还是老用户,分别对产品有不同的意义;
新功能对用户粘性和付费转化有什么作用。
如果新功能比较多,需要对新功能建立一个评估的指标体系,将新功能的效果分为使用得分和功能价值得分。
使用得分与使用频率和使用深度两个方面直接相关,通过两个方面的评估得出总使用得分。
价值得分有粘性价值、交易价值、内容价值三个方面,粘性价值与用户留存相关,交易价值与用户付费转化有关,内容价值与促进用户生产内容有关。通过对三个方面的分别评估得出功能价值得分。示例图如下,我们可以看到功能价值总分最高的是关注引导功能,每一个新功能对优化产品的贡献方向不同,而推荐功能在三个方面均不突出。
图8 新功能价值得分示意图
将使用得分和价值得分结合,可以制成更直观的象限图:
图9 新功能使用得分和价值得分象限图
纵轴是价值得分,横轴是使用得分,推荐和首页新手提问功能使用得分高,但是价值得分低,通过象限图,业务人员可以确定以后的优化目标是增加这两项功能的价值表现。对于关注功能来说,价值得分很高,使用得分偏低,所以今后优化方向可以定为扩大使用面;讨论功能在两方面都差强人意,所以可能需要考虑这个功能的必要性。
从中篇和下篇的大型现象级产品示例 WEB 版的数据分析过程中,相信你也可以将对数据驱动产品决策的方法认知转化为更加具象的思维。APP 版产品的数据分析指标可能相对有所差异,如用户结构不同,行为方式不同,用户主要触达首页,这些会导致完全不一样的评估方案。但是拥有数据驱动的思维,就可以找到自己真正的评估方式。
如果您想下载本期驱动利器干货PPT,请点击下方“阅读原文”,填写申请表单。
产品优化成果过关?监控数据说了算相关推荐
- 在线学习如何更系统地做好Lazada店铺产品优化!
在线学习如何更系统地做好Lazada店铺产品优化! 对于Lazada新手卖家来说,做店铺时总是会遇到很多棘手的问题,问题出现不知从何处寻求解决办法,说到要优化店铺产品时更是毫无头绪.为此知识局做了一下 ...
- 包图网签约神策数据,助力产品优化
随着互联网科技的发展与创新,数据驱动理念渗透到各行各业,驱动企业实现业务增长.2017 年 9 月,国内知名设计素材网站包图网正式签约神策数据.包图网在运营的过程中,坚持以用户为中心,为设计师及用户打 ...
- 没有思路?一个数据案例,拯救你的产品优化切入点
本文基于神策数据推出的<数据驱动下的产品决策>在线课程数据分析师演讲进行整理. 产品为了满足当前阶段的需求,需要具备不同的表现形态.现象级产品往往伴随用户短期内的大爆发,初期上线版本必然有 ...
- Day65:Python获取阿里云产品云监控数据指标
1.阿里云服务器 先创建阿里云账号: 购买一台低配置的阿里云ECS服务器: 还可以查看ECS云监控的监控指标数据: 2.通过阿里云官方的Python SDK API获取阿里云监控数据指标 阿里云为了保 ...
- Python获取阿里云产品云监控数据指标
1.阿里云服务器 先创建阿里云账号: 购买一台低配置的阿里云ECS服务器: 还可以查看ECS云监控的监控指标数据: 2.通过阿里云官方的Python SDK API获取阿里云监控数据指标 阿里云为了保 ...
- 数据分析36计(13):中介模型利用问卷数据探究用户心理过程,产品优化思路来源...
往期系列原创文章集锦: 数据分析36计(12):做不了AB测试,如何量化评估营销.产品改版等对业务的效果 数据分析36计(11):如何用贝叶斯概率准确提供业务方营销转化率 数据分析36计(十):Fac ...
- 如何一步步从数据产品菜鸟走到骨干数据产品
现在有一些公众号开始转这篇文章,转载时麻烦写上"首发PMCAFF",以及我的个人微信号:276982689. 我自己是酒仙网高级数据经理杨楠楠. 网上关于数据分析师的文章很多,但是 ...
- 数据驱动车主 App 产品优化,轻松搞定用户体验与转化
随着互联网的不断发展,传统车企在产品技术.市场营销及商业模式上也在寻找新的契机,企图在数字化转型方面深入探索:汽车市场的目标群体在不断扩大,消费习惯也变得更加多元,消费模式的转变带动汽车品牌商业模式的 ...
- 第十六篇 项目整体管理__指导与管理项目执行的依据、工具与技术、成果和监控项目工作的依据、工具与技术、成果
指导与管理项目执行的依据, 有以下4项 项目管理计划. 执行项目计划的主要依据就是项目管理计划. 批准的变更请求 事业环境因素 组织过程资产 指导与管理项目执行的工具与技术,有以下3项 专家判断. 专 ...
最新文章
- MySQL 5.7 并行复制实现原理与调优
- 关于c++类中的指针成员问题
- mysql mof_关于mysql mof提权研究
- python简单代码演示效果-用python画爱心及代码演示
- django初探-创建简单的博客系统(一)
- Hadoop高速入门
- 它是光荣的象征, 得到它一定没有Bug!
- 获取中位数java_java 计算中位数方法
- 数据库BCP命令导入导出数据
- 团队阅读——怎样学习软件工程
- poj 2398 Toy Storage (计算几何,判断点和线段关系)
- (八)python3 只需3小时带你轻松入门——List 与 dict 的常用操作
- 学会了!如果认错人了,就像这样亲一口!
- [剑指offer]面试题第[54]题[JAVA][二叉搜索树的第k大节点][递归][迭代]
- 除了下拉框/下拉联想词优化推广,还可以做那些网络推广?
- centos 安装qrcode 二维码
- 数学建模常用算法案例k—means聚类分析
- 如何设计一个电商平台积分兑换系统?
- 【中土世界】萨鲁曼小传
- iOS开发 - 中文 iOS/Mac 开发博客列表
热门文章
- ajax 实时进度_如何做好项目进度管理?
- oom 如何避免 高并发_糖尿病并发症真的会致死?又该如何避免它发生?
- python简单算法题_python几道简单的算法题
- 使用xslt将.xml,转换成一个html网页时中文显示乱码怎么办,用dom将数据写到xml中 设置xml文件gbk编码时中文会出现乱码...
- Lex-BERT:超越FLAT的中文NER模型?
- 判断python模型是否安装的办法
- 岭回归不仅仅是正则化作用
- mysql rrd_关于cactiEZ数据迁移操作思路
- 焊接件技术要求怎么写_专硕论文写作要求有高么?具体怎么写?
- 苹果自带的清理软件_清理苹果Mac系统垃圾用什么软件?