原标题:数据产品经理的入门手册:如何评估数据产品的上线效果?
一个好的产品通过产品评估才能衡量其产品效果及业务价值,那么对于数据产品来说,我们怎么对齐评估呢?本文作者同大家分享一套适用于数据产品的评估体系,解答如何评估数据餐品的产品效果。
对于数据产品经理来说,最头疼的问题就是:当我的产品上线之后,我该如何评估我的产品效果?
对于策略产品来说,我可以很轻松的基于实验组或者对照组,来获取策略的上线效果。
对于C端&B端产品来说,我可以通过用户(或商户)的规模、增长、活跃、留存等方面来衡量产品对业务的价值。
BUT,如果你做的是数据产品,或者从更大的范围来看,从事面向内部用户的后台产品,你该怎么来衡量产品的价值呢?
这个问题曾经困惑了我很久,在这些年的过程中,逐步摸索出一套适用于数据产品的评估体系,欢迎大家一起来讨论。
一、评估上线效果的重要性
上线效果重不重要?这是一个毋庸置疑的问题。
对于一个团队来说,上线效果评估是检验产品价值的重要方法。而这个问题,却是数据产品们经常逃避,或者说不愿意面对的问题。
我分析主要的原因是:评估不清楚。
我上线了一款实时监控产品,不是我不想评估,而是我评估不清楚,这里的“清楚”,一方面是指我无法用合理的量化的指标来衡量产品的效果,另一方面是指即使我评估了,我也找不到我这款产品与业务价值的关联。
在评估不清楚的大背景下,我们可以看到一个有趣的现象:
一般数据产品的产品文档或者上线效果评估中,经常会用如下句式来评估产品:
你看,是不是非常熟悉类似这样的句式?
如果我用上面类似的句式,这种宏观的车轱辘话来评估数据产品的上线效果,会有什么样的影响呢?
经过这些年的风吹雨打,我理解会有如下两个影响:
1.上线即结束
你的产品上线即为结束,你会立刻投入下个产品的进程之中,产品很难有一个系统化的迭代节奏,因为你没有清楚的可评估的迭代价值。
2.答辩很吃亏
是的,产品经理,无论公司大小,都会面临成长晋升的问题。
而对于一个数据产品,如果你在产品线晋升,面对策略产品各种亮眼的数据效果,面对C&B端产品各种的业务价值贡献,你会举步维艰;
如果你在BI线晋升,面对一个个帮助业务决策的分析实例,你毫无胜算。
所以说,数据产品的上线效果评估是一件非常重要的事情,不夸张的说,事关产品生死,个人前途。
二、一般的效果评估方法
既然数据产品的效果评估这么重要,那作为一名数据PM,我该怎么来评估我的产品呢?一般通用的思路会有如下的两种方式:
1. 从访问量的角度
看数据产品上线后的PV&UV等,和使用行为相关的数据。
乍一看,这毫无问题;但是我们可以仔细想一想如下两个问题:
1)我上线两款数据产品,一款是给10w运营看每天可以产生10w的UV,另一款只给老板看每天仅产生5个UV,请问这两款产品谁的上线效果好?谁的价值大?
2)实时监控产品的要求是每小时看一次,天级监控产品的要求是每天看一次,谁的价值更大?
你看,数据产品,由于目标用户的局限性与产品本身的定位差异,会导致访问量存在天然差异,这个差异会让数据产品没有一个通用的访问参考系来衡量。
2. 从提效的角度
假设数据产品上线后,产品分析数据的效率是excel分析效率的2倍,但是内部用户不用这个数据产品,这个时候上线效果是好还是差?
数据产品及其依赖于用户的使用,提效是建立在用户使用的基础上,很难从提效这一个单一维度来衡量数据产品的效果。
那么,我该如何评估数据产品的上线效果呢?
三、一套数据产品的效果评估体系
首先,我理解数据产品的上线效果,不是对上线结果的静态评估,而是对上线后整个产品运营过程的动态评估。
什么叫上线结果的静态评估?
类似访问量等,即为上线后的一个自然结果。
什么叫上线后整个产品运营过程的动态评估?
是指上线后,产品经理围绕产品上线进行一系列运营过程,并对其过程进行评估。
我们可以把数据产品的上线运营过程拆解成如下模式:
1. 知不知道?
知不知道本质是解决产品的触达问题。
一个完整的产品触达流程分为如下节点:目标用户规模->触达用户规模->真实的打开产品的用户规模。
这三个节点可以构成两个核心衡量指标:
产品触达率=触达用户数/目标用户数
产品打开率=打开用户数/触达用户数
基于如上,你就可以在“知不知道”这个层面衡量出产品的上线效果,具体如下:
2. 会不会用?
会不会用本质是解决产品的培训问题。
培训不是单纯的指召开一场培训会议,而是一系列的运营方法,大致会有如下几种方法:
1.案例营销(极其推荐)
经过验证,这是最有效的一种运营方法,你可以多了解业务方或者分析师们正在解决的问题,然后尝试用你的产品形成一个case,用分享的方式告诉他,这是最有效的一种培训方式
2.线上使用手册(推荐)
可以是文字形式,有条件也可以是视频形式,注意要进行数据产品的埋点,来统计用户查看使用手册的频次
3.培训会议(不推荐,因人而异)
召开一场培训会议,进行产品宣讲,一般情况下,这种方式的培训效果并不理想。当然,这里的效果取决于你培训时个人的演讲能力。
有了运营方法还不够,我们要在使用后及时监测这些方法的使用效果,一般可以通过主观评价和客观数据来衡量。
可以参考如下方式来评估“会不会用”:
3. 好不好用?
好不好用是指用户是否有持续使用的动力?我们可以拆解为如下三个部分来看:
1.动机层面
指用户使用这个产品的动机是什么?这是好不好用的本质原因。如果数据产品没有解决用户使用的动机,大概率用户是不会长期来使用的,动机可以分为如下两点:
1)用户诉求的解决程度
也就是你的产品是否达成预期产品的目标,以下为举例:
2)分析效率
你的产品是否提升了用户的分析效率,以下为举例:
2.使用行为层面
观测用户使用产品的活跃度和使用频次,注意,这里更关注的是产品本身的趋势变化,而不是和其他产品的横向对比,以下为举例:
3.主观评价层面
可以通过截图,收集一些用户反馈,来证实产品的价值。
有条件,可以做一些线上的调查问卷,在产品上线两周后发至用户;然后基于问卷反馈来简单的计算产品的NPS。
综上,我们通过【知不知道-会不会用-好不好用】这个完整的产品上线过程,就可以衡量出一个数据产品的上线效果,总结如下:
最后,想提很重要的一点:数据产品的效果评估在当下行业内没有一个共识的基准,比上线效果评估本身更重要的是纵向和leader、横向和技术团队共识上线效果的评估方法。
只有各方在一个共识语言内,你的上线效果评估才有机会得到认可并广泛使用。
作者:罗大大,大数据产品专家
本文由 @罗大大 原创发布于人人都是产品经理,未经许可,禁止转载。
题图来自 Unsplash,基于CC0协议游戏网
相关下载 |
原标题:[路演]中新赛克:未来两年公司仍专注于数据提取、数据融合计算等领域的应用 全景网5月11日讯 中新赛克(002912)2019年度网上业绩说明会日前在详情>>
原标题:从经验依赖到数据驱动 数据如何成为粤企生产新要素? 在华星光电深圳工厂,每天一两百万张图片传输到后台,每个员工要盯上万张照片查找细微瑕疵,详情>>
原标题:上海数据交易中心宣布新融资,商业数据交易已占全国一半以上 今年国内第一笔数据交易领域的融资落地上海。 上海数据交易中心融资暨产品发详情>>
原标题:数据产品系列:解读数据指标 数据产品实战知识系列,由浅入深,会包括主要的数据产品知识体系和市面上主流的数据产品介绍。 我们所有的数据详情>>
超级舰队手游航母数据流精准分析,玩家诚意作品来袭!第一期的攻略征集活动我们已经完满结束,本期将带来航母打野实测结论,是不是迫不及待了?赶详情>>
1、前言 作为一个独立游戏开发者,在这里提出的一些观点可能早已听过无数遍。对一款游戏来说,分析是至关重要的!我们几乎要衡量每个指标!分析的关键在于详情>>
原标题:成人视频网站也遭数据泄露!姓名、性取向等108亿条数据曝光,含53万中国用户 大数据文摘出品 银行流水数据不能随便泄漏,成人网站的浏览信息那详情>>
为了更好的提升战力,我们的三级宝石是必须使用的,前面哪些一级二级宝石都是过度用的!而我们的三级宝石才是重点!如果没有一身三级宝石,小编觉详情>>
c是9k9k小编夏夏为大家带来的,莽荒纪珍宝阁4级升级数据是小编夏夏主要分享给大家的内容,同时珍宝阁4级升级数据介绍小编也为玩家朋友们带来了,一起来了解详情>>
莽荒纪灵兽真仙升祖仙数据是9k9k小编夏夏为大家带来的,莽荒纪灵兽真仙升祖仙是小编夏夏主要分享给大家的内容,同时灵兽真仙升祖仙数据小编也为玩家朋友们详情>>
原标题:数据治理鉴证机制:大数据时代建立企业间数据互信 背景 全球协作日益紧密,经济全球化与数字化使得数据分享传输成为一种必然趋势。然而,在数字详情>>
《炉石传说》1月17日维护到现在已经近30小时,官方似乎没有开服的迹象,对于经常维护的《炉石传说》服务器,大家有什么想说的呢?小编也在等着上线抽卡包呢。 前天战网表示详情>>
《侠隐阁》中玩家可以进行多周目的游戏来获得更多的点数道具等,二周目四项数据加点怎么选择,一些Boss怎么打,玩家“战争之荣誉sos”带来详情>>
伊芙琳是2009年5月1号在召唤师峡谷登场,到如今已有11年。作为峡谷中最隐秘的打野之一,她给玩家们留下了许多深刻的印象。在职业赛场上,我们尤其还详情>>
原标题:个推大数据:专业游戏手机黑鲨市占率排名第一 2020 一季度,伴随着电竞春季赛事火热开展,黑鲨、努比亚红魔等专业游戏手机的新品发布与预定也一详情>>
命运2在刚刚搬家的时候是可以转移数据的,如果大家现在还没转移自己的数据那还是要赶紧去官网看一下目前通道有没有被关闭。因为数据转移是有期限的。而命运2要怎么数据转移?详情>>
在进行软件编写时,我们经常会用到数据库,visio中怎么制作数据库呢?下面我们就来看看详细的教程。visio怎么绘制数据库?visio中想要绘制数据库,vi详情>>
健身笔记app是一款帮助用户健身数据管理的手机软件,不管是在是健身房,还是在家,健身笔记app都可以帮助您很好的管理健身计划。记录训练心得、照片,更加直观的感受训练效果。详情>>
原标题:鹏博士拟23亿转售数据中心资产 大数据运营成业务重心 4月27日晚间,鹏博士发布公告称转让旗下数据中心相关资产引发业内关注。特别是在大数详情>>
原标题:Hitachi Vantara推全新虚拟存储平台VSP E990,大幅降低企业数据存储成本 业界领先的4:1数据缩减能力,保障75%的存储容量释放 全新Hitachi Ops 详情>>
数据恢复大师是一个使用非常方便的数据恢复软件,我们可以使用数据恢复大师来恢复我们丢失的数据,软件主要用于数据丢失、意外删除和格式化操作。数据恢复大师软件适用详情>>
当所有经济新闻都指向负面的时候,Synergy Research 今日发布的报告却指出 —— 本季度的数据中心并购活动表现强劲,甚至已经超过了 2019 年的水平。 这一增长主要详情>>
外网ESC统计了三月欧洲疫情爆发期间Twitch平台意大利语、德语、法语和西班语法频道的数据变化情况。图表中数据为三月各周与第一周相较得出的详情>>
原标题:《2020中国首席数据官报告》发布:从数据资产管理者到数据价值创造者 【环球网智能综合报道】互联网和新兴技术的高速发展驱动数据的深入利用详情>>
原标题:华大基因澄清:网络传闻是基于产能数据而非实际销售数据进行的业绩预测 证券时报e公司讯,华大基因(300676)发布澄清公告称,经核实,网络传闻是基详情>>
PS4 Pro已经正式发售,对于已经拥有PS4的玩家而言,拿到Pro的第一件事当然是把老机器的数据和资料全都导过来。那传输数据的正确姿势是什么呢?Playstation的官方博客为我们详情>>
《天谕》手游捏脸数据如何导入 捏脸数据导入攻略 作者:互联网来源:九游发表时间:2020-04-15 11:30:0详情>>
天谕手游中的捏脸系统非常完善,那么游戏中好看女性的捏脸数据有哪些呢?下面小编就给大家带来了天谕手游捏脸数据大全,一起来看看吧。好看女性捏脸数据游戏简介这个世界是有想象详情>>
天谕手游中可以导入别人好看的捏脸数据,那么游戏中捏脸数据怎么导入呢?下面小编就给大家带来了天谕捏脸数据导入方法,一起来看看吧。 捏脸数据怎么导入 1.首先保存其它的玩家详情>>
天谕手游中的捏脸系统非常完善,那么游戏中好看女性的捏脸数据有哪些呢?下面小编就给大家带来了天谕手游捏脸数据大全,一起来看看吧。 好看女性捏脸数据 游戏简介 这个世详情>>
原标题:用3万5千个直播间数据,给虎牙直播做运营数据分析 为了对直播平台有更深的了解,本文结合3万5千个虎牙直播间数据,准备从数据的角度来分析一下详情>>
根据新一轮的数据挖掘,任天堂在上世纪末似乎腰斩了《宝可梦:黄》的同期发行版《宝可梦:粉(Pink)》。 从这张数据挖掘大佬张贴出来的源码中我们能够看到和黄版同级的《详情>>
原标题:中金公司:大数据立法加速 助力数据要素市场发展 证券时报e公司讯,中金公司:国家标准化管理委员会3月6日正式发布《信息安全技术个人信息安全规详情>>
原标题:数据报告 | 用数据告诉你是谁在看罗永浩“处女直播秀” 老罗的直播首秀定格在观众 4800万 销售额超 1.7亿元 带货超 90万件 开播后半小时直详情>>
《天谕》手游怎么导入捏脸数据 导入捏脸数据方法分享 作者:互联网来源:九游发表时间:2020-04-11 09:详情>>
原标题:数据库的国际竞赛,为什么不能输? “第一次因为自己绿了而这么开心”,最近有网友这样调侃。所谓“绿了”,是指用户的健康码显示为绿色,可以在规详情>>
原标题:AppAnnie就拼多多数据撤回事件声明:数据仍需校验 此前信息已撤回 PingWest品玩4月10日讯,北京时间4月10日傍晚,数据分析机构App Annie 对昨日详情>>