指标。衡量标准。多高?多低?多快?多慢?自从人类文明的曙光出现以来,我们就有一种与生俱来的、永不满足的衡量和比较的渴望。我们从公元前 3 千年的埃及肘尺和地中海商人的谷物开始。今天,我们有了每秒点击次数、点赞数、应用程序下载量、星级以及无数其他方法来衡量我们所做的事情。公司花费巨额资金开发精美的 KPI 仪表板,并每天(有时甚至每小时)追逐其指标,以寻求对其健康状况的最终、持续衡量。这值得吗?这个问题的答案既简单又令人恼火,而且没有特别的帮助:这取决于情况。
在本专栏中,我将带您踏上社区指标这个充满风险但回报丰厚的世界之旅。我将探讨现有的研究、可用的工具、案例研究(好的和坏的),并最终利用我所学到的知识,为您制定一个在创建(或改进)您自己的社区指标时可以参考的行动手册。然后,您可以使用这些指标来了解——或至少估算——您社区的现状、未来的发展方向,以及(剧透警告!),当方向不太符合您实现社区目标的需求时,该怎么做。
虚荣指标
作为大型开源社区的前社区经理,我非常清楚那些听起来令人印象深刻但最终意义甚微的指标的成瘾性和危险性。大约每年一次,当分析公司向商业开源供应商发送问卷时,我都会收到这封电子邮件
收件人:James Falkner awesome_community_manager@project
发件人:CxO 超级忙碌且没有时间处理此事
主题:更新的指标?嘿 James,我们社区的最新统计数据是什么?我正在填写这份分析师请求,需要
- 下载量
- 注册量
- 开发者数量
- 提交次数
- 论坛帖子数量
在压抑我的愤怒和想要的回应的同时,我会尽职尽责地生成大致与上述数字相对应的数字。例如,这是我生成的注册量图表
在 2011 年 2 月,我们因注册量明显放缓而“受到批评”。他们说,情况显然非常糟糕。他们说,这艘船显然着火了,而社区经理正在掌舵。毫不奇怪,我当月在 LinkedIn 上的活动增加了很多。那么发生了什么?有趣的故事——事实证明,在 2 月份,我们在注册表单上启用了 CAPTCHA,并开始有效地阻止垃圾邮件发送者,从而大幅降低了新的注册量。几个月后,在分析师报告发布后,垃圾邮件发送者找到了绕过 CAPTCHA 的方法,一切恢复了“正常”。
照片由 MikeGogulski 拍摄,来自维基百科,CC BY 2.5
这些和其他“一阶”指标属于一类称为虚荣指标的指标,这是一个很棒且准确的术语,描述了它们的肤浅性和毫无意义。依赖它们作为衡量社区健康状况的标准是很诱人的,但脱离上下文来看,它们很容易具有误导性、被操纵/篡改,甚至被有选择地选择以适应所需的叙述。HBO 的硅谷最近一集每日活跃用户就体现了这一点。在节目中,当公司庆祝其软件平台下载量达到 50 万次时,创始人意识到更准确的成功衡量标准——每日活跃用户——却出奇地低,因此他们雇佣了一家点击农场来操纵系统并给投资者留下深刻印象。该计划适得其反,他们最终不得不解决潜在的可用性问题,这教会了他们(和我们)关于虚荣指标的宝贵一课。
无知是福
那么,您应该如何处理虚荣指标呢?如果您想收集、分析并尝试从中得出结论,那也没关系。我明白了,我真的明白。只是要注意您在做什么。(我将在以后的专栏中探讨指标的各种特征,无论是虚荣的还是其他的。)克服对虚荣指标的沉迷是可能的,但这比最初生成它所需的努力要困难得多
胡说八道不对称性:驳斥胡说八道所需的能量比产生胡说八道所需的能量大一个数量级。
— Alberto Brandolini (@ziobrando) 2013 年 1 月 11 日
如果这就是您所拥有的一切,并且您别无选择,只能向要求苛刻的高管或逾期的分析师问卷报告它们,那就去做吧——但请考虑利用这个机会解释为什么从长远来看,拥有更准确的、与业务相符的指标会更好。然后开始努力提出更好的指标,这些指标可以更准确地讲述您的开源社区的故事,并帮助指导您未来的决策。下个月见!
5 条评论