指标。衡量标准。多高?多低?多快?多慢?自从人类文明之初,我们就有一种与生俱来的、永不满足的衡量和比较的欲望。我们从公元前3千年的埃及腕尺和地中海商人的谷物开始。今天,我们有每秒点击次数、点赞数、应用下载量、星级,以及无数其他方法来衡量我们所做的事情。公司花费巨额资金开发花哨的 KPI 仪表板,并每天——有时甚至每小时——追逐他们的指标,以寻求衡量其健康状况的终极、持续方法。这值得吗?这个问题的答案既简单又令人恼火,而且没有特别的帮助:视情况而定。
在本专栏中,我将带您踏上社区指标这个充满挑战但又回报丰厚的世界之旅。我将探讨现有的研究、可用的工具、案例研究(好的和坏的),并最终利用我所学到的知识,为您制定一份行动手册,供您在创建(或改进)自己的社区指标时参考。然后,您可以使用这些指标来了解——或至少大致了解——您的社区今天在哪里,它将走向何方,以及(剧透警告!),当方向与您实现社区目标所需的方向不太一致时,该怎么办。
虚荣指标
作为大型开源社区的前社区经理,我非常清楚那些听起来令人印象深刻,但最终意义甚微的指标的成瘾性和危险性。大约每年一次,当分析公司向商业开源供应商发送调查问卷时,我会收到这封电子邮件
收件人:James Falkner awesome_community_manager@project
发件人:非常忙碌且没有时间处理此事的 CxO
主题:更新的指标?嗨 James,我们社区的最新统计数据是什么?我正在填写这份分析师请求,需要
- 下载量
- 注册量
- 开发者数量
- 提交次数
- 论坛帖子数量
尽管压抑着我的愤怒和想要的回应,我还是会尽职尽责地生成大致对应于上述内容的数字。例如,这是我为注册量生成的图表
在 2011 年 2 月,我们因注册量明显放缓而“受到批评”。他们说,事情非常不对劲。他们说,船显然着火了,而社区经理却在掌舵。毫不奇怪,我当月的 LinkedIn 活动增加了很多。那么发生了什么事?有趣的是——事实证明,在 2 月份,我们在注册表单上启用了 CAPTCHA,并开始非常有效地阻止垃圾邮件发送者,从而大大降低了新的注册数量。几个月后,在分析师报告发布后,垃圾邮件发送者找到了一种绕过 CAPTCHA 的方法,事情又恢复了“正常”。
照片由 Wikipedia 上的 MikeGogulski 拍摄,CC BY 2.5
这些和其他“第一级”指标属于一类称为虚荣指标的指标,这是一个很棒且准确的术语,描述了它们的肤浅和毫无意义。将它们作为衡量社区健康状况的标准很诱人,但脱离上下文来看,它们很容易产生误导、被操纵/作弊,甚至被有选择地选择以适应所需的叙述。HBO 电视剧《硅谷》最近的一集每日活跃用户就证明了这一点。在剧中,当公司庆祝其软件平台下载量达到 50 万次时,创始人意识到更准确的成功衡量标准——每日活跃用户——出奇地低,因此他们雇佣了一个点击农场来操纵系统并给投资者留下深刻印象。该计划适得其反,他们最终不得不解决潜在的可用性问题,这给他们(和我们)上了一堂关于虚荣指标的宝贵一课。
无知是福
那么,您应该如何处理虚荣指标呢?如果您想收集、分析并尝试从中得出结论,那也没关系。我明白,我真的明白。只是要注意您在做什么。(在以后的专栏中,我将探讨指标的各种特征,无论是虚荣指标还是其他指标。)克服对虚荣指标的沉迷是可能的,但这比最初生成它所需的努力要困难得多
胡说八道的不对称性:反驳胡说八道所需的能量比产生胡说八道所需的能量大一个数量级。
— Alberto Brandolini (@ziobrando) 2013年1月11日
如果这就是您所拥有的一切,并且您别无选择,只能向要求苛刻的高管或过期的分析师问卷报告它们,那就去做吧——但请考虑利用这个机会解释为什么从长远来看,拥有更准确的、与业务相符的指标会更好。然后开始着手提出更好的指标,这些指标可以更准确地讲述您的开源社区的故事,并帮助指导您未来的决策。下个月见!
5 条评论