V2EX = way to explore

V2EX 是一个关于分享和探索的地方

For Existing Member Sign In

爱意满满的作品展示区。

This topic created in 3155 days ago, the information mentioned may be changed or developed.

不知道这边做 product analytics 的同学多不多，最近总结了之前数据分析的经验，但感觉写得很水。。。。希望这里的朋友可以指点一下。。。。

目标读者：涉及产品数据的新人（ PM、数据分析师、产品运营）

对于涉及产品数据的新人（ PM、数据分析师、产品运营），常有这样的问题

怎么使用 Mixpanel/神策 /GrowingIO 等数据分析工具？
怎么定义产品的指标 (metrics)，并进一步进行分析？

所以，我们以自己的产品文图 ( http://wentu.io/) 为例，分享一下相关的经验、思考，希望能对大家有所帮助。

1. 产品与 Metrics 定义

(1) 文图是什么？

文图是一款用来做数据报告的产品

比如，你写了一篇数据分析报告，然后希望看起来比较专业（排版、颜色），那么可以用文图，因为有设计好的样式。另一方面，也有富交互的数据体验，图表、表格中的数据都是可交互的。

(2) 怎么定义产品指标(metrics)？

最常用的是 AARRR 模型 [1]

其核心是留存 /活跃用户，也就是希望用户能再次访问（ e.g. 微信, 微博）

然而，AARRR 并不适合所有产品

一个简单的例子是，Airbnb 的留存肯定也很低，因为没有人会每天去订房间。文图也是类似，没有人会每天去写报告，可能一个月一篇就不错了。因此，短期留存的意义不大, 留存 /活跃用户更大程度上是产品好坏的最终反应，而非直接需要提升的指标。

所以，我们用 HEART 模型来定义 metrics [2]

具体而言，是从产品本身的目的入手，更为本质。

文图的核心功能是文档制作，因此核心指标定义成制作文档的数量。同样的, airbnb 的核心指标之一是订床的数量, 而不是每天的活跃用户有多少。

不过，这只是从 “制作者” 的角度出发。对于运营人员、analyst 等制作者来说来说, 他们最终的目的是希望 “读者” 能方便的阅读文档，了解数据和分析结果，因而文图才会有移动端阅读、多文档合并等功能。而且制作者和读者本身的审美也不一致，只有保证读者满意，制作者才会长期的使用下去。不过遗憾的是，这方面的很难有较好的指标进行衡量。

总的 metrics 包括

(1) 基本状况

注册用户数
活跃用户数

(2) 业务指标

文档制作者: 创建文档 -> 编辑文档 -> 发布、下载
文档读者: 暂缺.

(2) 增长指标

aquisition 转化率: 访问 -> 注册按钮-> 注册成功
activiation 转化率: 注册成功 -> 创建文档 -> 编辑文档

2. 实现

设计好了 metrics，怎么具体得到这些数据呢？

我们用神策（类似 Mixpanel, 高级版的 Google Analytics ），包括基本的 dashboard 和更复杂的事件分析

上图是我们的 dashboard, 包括注册用户、文档创建等指标，每天用来了解产品的基本使用情况。

在代码实现上，用户做了相应的操作，就用 js 把相应的数据传输到后台进行记录（埋点），之后就可以用神策进行分析了。

可以用神策来做一些基本的分析，比如

文档完成漏斗

可以用漏斗模型看文档制作中各个步骤的转化率（创建 -> 编辑 -> 下载 /发布）

而完成文档的用户数，就是我们产品的核心用户群

这个也放在了 dashboard 中，可以看到，每周都会有 100-200 名用户在文图上完成了文档制作

注册成功 /失败比例

对用户注册的行为做了记录（分成成功和失败），就能看到产品注册成功 /失败的曲线

文档类型比例

文图的文档有多种类型，包括单页-PPT-打印文档 3 种，这 3 种各占比例多少呢？就我们内部使用而言，其实大部分都是使用单页文档。但从实际用户的使用数据中，发现创建 PPT 比我们预想的多多了

3. 案例：怎么衡量模板的好坏？

文图的核心功能之一，是用户可以使用模板（下图）创建文档。这些模板都是经过设计的，比单纯的 Excel + Word 来的要更好看。但是，我们自己对模板的设计并不满意，觉得一些模板并不好看，而且，也常有用户说某个模板颜色对比不够等等

怎么分析这个问题？

可以从文档完成率考虑用户创建文档后，经过一系列的操作，最终完成文档（发布、下载）。期间，有没有可能因为模板的不足（ e.g. 颜色对比不够），而放弃呢？

各模板的创建量、完成量和完成率（完成率=完成量 /创建量）如下

可以看到

默认模板(blue)创建量明显高于其他模板，说明数据基本准确
完成率和创建量相当不同，创建最多的并不是完成率最高的，而一些小众模板（ pure ）的完成率不错，说明计算基本上有效。而且这个顺序和我们主观的感知也大致相符。

仔细观察完成率最后几位 (my_red, my_blue, my_green)，可以发现一个共同点，都带有 header. 这和部分用户的反馈相同，“自己写了个文档，结果头上顶个别人家的 header, 心里不是滋味 ”

而很有意思的是，blue 和 my_blue 的关系，

这两个模板大体相同，只是后者带了 header，而完成率就有了一定的区别。考虑到 blue 作为默认的模板本身会有大量的试用，其实际完成率要更高，因此可以说，单单加上这个 header，文档的完成率就会往下掉 15% (17% -> 14%) 。而移除掉这些 header, 文档完成的数量就能有提升。

排在前面的模板，也是实际反馈中比较受欢迎的模板

总之，通过完成率，可以发现模板设计的好坏对文档完成有较大影响。假如把所有模板的设计水平都提升到第一的水准（ 17% -> 25%），是接近 50%的提升。于是，把这些分析结果告诉设计师，他们也就更有动力做之后的改进了，而不是简简单单的说“把模板设计更好看一点”。