项目绩效考核为什么要定指标

上个月，我们讨论了为社区指标计划设置目标 。 这些目标不断提醒您要在程序中实现的目标，在准确确定要测量的目标时应将它们用作指标。

本月，我们将记录用于确定要测量的内容的基本策略，并举例说明我们在实践中使用的特定社区指标。 利用我们对社区的了解以及我们先前提出的目标，我们将确保选择的指标具有相关性。

指标类型

用于报告社区的度量有两种主要类型：定性和定量。 定性指标是使用口头或书面文字来传达反馈的指标，例如在线调查，正式的可用性测试或现场讨论。 这些可以捕获结构化和非结构化数据，并且如果随时间推移进行跟踪，可以为实现目标的进度提供有价值的度量。 定性指标对于衡量“ API文档是否对您的项目足够有效？”之类的东西最有用。 或“您认为社区在未来6到12个月内应该关注什么？” 答案可以帮助您了解社区的脉动以及需要进行哪些更改（如果有）。 选择好的问题可能很困难，因为很容易意外地引入偏见 ，提出您没有计划采取行动的问题或答案与目标无关的问题。 每次进行调查时，调查也会花费很多精力，因此我们很少使用调查（大约每年一次），主要是询问“我们应该关注什么”这类问题。

定性与定量指标

调查和研究固然出色，但仍会做出持续的承诺，而定量指标的收集和处理通常可以实现自动化，并且可以在建立前期成本后提供长期而持续的收益。 最大限度地减少（如果不能消除）度量程序中的人为情感和错误，对于我们行业中面向技术的人们非常有吸引力。 精益分析（Lean Analytics）的合著者本·约斯科维茨（Ben Yoskovitz）这样说：“定量数据令人厌恶；定性数据会渗透其中。”

大多数现代开放源代码社区都可以使用基本的量化指标-我们使用的日常操作在线工具提供了简便的方法来获取有关所发生活动的历史指标，有时甚至是实时指标。 我们将对此进行更详细的探讨，并向您展示与我们社区目标相关的几个特定指标。

一阶指标

查看社区成员的典型工作流程。 它们使用哪些工具，如何使用它们，以及您可以从中提取哪些统计信息？ 通常，您可以使用基础知识，即所谓的一阶指标。 这些指标很容易获得，但是很少单独讲述完整的故事。 典型的例子是正文数（又名注册用户数）。 如果这个数字在增加，那是一件好事吗？ 也许吧，也许不是。 这可能意味着您最近实施的吸引社区成员的想法正在发挥作用。 但这也可能意味着您的注册表单已被自动垃圾邮件发送者入侵。 对于我们之前讨论过的其他几个一阶指标，可以说出同样的含糊之处。 Dave Neary（Red Hatter的资深研究员，也是社区建设者）对度量标准出错的说法甚至更多。

在Liferay，我们的目标之一是增加社区参与的价值，而这些指标并未表明社区成员的任何真正价值。 因此，我们不得不更深入地研究。

二阶指标

社区参与有价值意味着什么？ 这是社区成员从参与中获得有价值的东西的时候。 每个社区都是不同的，但是Liferay调查的结果表明，我们的社区成员重视共享，学习和回馈。 因此，我们提出了一组二阶指标，我们认为它们具有指示的价值（或帮助我们实现了其他目标）。 这些度量标准是从后处理和转换我们的一阶度量标准中得出的，因此，从易于获取，难以解释的一阶数据转变为我们所需的度量标准并不是一项巨大的技术壮举。 以下是我们使用的指标的精选样本，以及它们与目标的相关性：

• 公司成员与非公司成员的数量 ：在邪恶的公司和草率的独立开发人员之间保持健康的多样性会带来更多的实际经验（从而带来价值）
• 从代码贡献到代码库提交的时间
• 从错误报告到在代码库中修复错误的时间
• 从最初的论坛帖子到第一次回复/答案的时间
  • 最重要的是，这三个相关的指标会跟踪价值的各个方面：如果您做出了贡献而被忽略了 ，那么您发现的价值就会减少，甚至可能流向其他地方。 我们在这里拥有的越多，我们对结果的信心就越大。
• 社区成员的位置 ：能够查看区域业务决策的结果
• 贡献者年龄随时间的变化 ：使得知识和经验从老兵到后起之秀不断地流动，意味着社区中始终存在着最新的知识库（价值）。
• 忽略/未答复的消息数 ：对于新来的人来说，即使不是他们要找的答案，也能使其获得第一响应，这非常重要。
• 跨代码功能区的提交分布和演变 ：这使我们能够根据Liferay哪些领域发展最快来做出未来的业务决策。

在提出了这些指标和其他指标之后，大约需要4-6个月的时间来实施提取，合并和使用数据的机制（来自我们自己的论坛，博客和特殊项目，以及JIRA，GitHub，IRC，堆栈溢出等）。 这些指标使我们能够更准确地评估社区价值以及与之相关的业务绩效。 您可以想象，使用这种分散的数据源收集会遇到很多挑战，例如身份和公司的规范化，删除重复项，过滤垃圾邮件等等。

在本系列的下一篇文章中，我将介绍将其组合在一起的工具和技术细节，以及在实践中使用它们所获得的结果。 稍后，我们将介绍使某些指标比其他指标更好的特定特征，例如它们的准确性，与他人的关系以及领先/跟踪指标，以及如何使用这些指标随着时间的推移来微调指标。

我希望这能使您了解我们如何选择指标，以及如何选择更好的指标以更准确地跟踪社区健康。 下个月见！

翻译自: https://opensource.com/business/16/9/choosing-right-metrics

项目绩效考核为什么要定指标