评分卡无效题目：怎么找出来并砍掉
怎么找出评分卡无效题目：当一个选项占了百分之八十的答案，这个问题就没区分任何人。这里讲怎么去读它们，并把它们砍掉，别再留着凑数，也别让人白白多花时间。
怎么找出评分卡无效题目：逐题去读答案。如果某一个选项占了百分之八十或更多的答案，这个问题就没把任何人区分开，只是白白花掉注意力而没有信息。砍掉它，或者重写它。
如何找出评分卡无效题目
你写了二十来个问题。每一个你都觉得不错。其中有些其实什么也没做。
一个无效的问题，在纸面上看起来没问题。措辞得当，内容相关，整整齐齐地待在它的维度里。可几乎所有人的答案都一样。它对任何人都没有说明任何东西。更糟的是，它让每个人花了几秒钟注意力，却什么也没回报给他们。
你坐在桌前是看不出来的。只有在真实的答案里才看得出来。所以找出评分卡里的无效题目，是读的工作，不是写的工作。
百分之八十规则
检验很简单。看一个问题的答案在它各个选项上是怎么分布的。如果某一个选项占了百分之八十或更多，这个问题就是无效的。
为什么是这条线？因为一个问题靠把人群分开来赢得位置。如果几乎所有人都选同一个答案，这个问题就分不出一个人和另一个人。它给几乎每个分数加的是同样的量。拿掉它，排名几乎不动。
分布分散的问题，是在做它的本分。两三个选项各占一个像样的份额，意味着人们在这里有差异，而你的打分把它捕捉到了。
别等到完美。指南建议在前五十来份完成数之后做这次阅读，之后每月一次。在那之前，你盯着的是噪音。
免费指南 · 28 页做诚实的那一版。一份能区分人群、说真话,并给你开启对话理由的测评。获取免费指南 →没有任何东西会替你算出来
这可能会让你吃惊。你会以为你的工具会标出无效题目。它不会。
指南检查了一款成熟测评产品的整个分析层。没有题目与总分的相关性。没有信度系数。没有区分度指数。一个都没有。这个类别里的每个平台都只给你看分布，把解读留给你。
奇怪的是，这对你是好消息。这意味着你没有错过什么神奇的仪表盘。方法就是一眼看一个问题的一张图，问问它是不是偏的。你一个下午就能做完。
这也意味着，技能在于知道自己在看什么。只做一份评分卡的人靠猜。做出一份好评分卡的人会读。
评分卡无效题目出现的四种方式
答案偏斜是最明显的迹象。但问题死掉的原因不同，修复取决于原因。
| 你看到什么 | 可能的原因 | 修复办法 |
|---|---|---|
| 某个选项占了百分之八十或更多 | 问题太容易、太明显，或者你受众里的每个人都有这个特征。 | 砍掉它，或者重写成问更难的事。评分卡里多数无效题目都从这里开始。 |
| 每个人都选了讨好的答案 | 问题暗示了自己的正确答案。 | 重写，去问行为和实际存在的东西，而不是观点或打算。 |
| 滑块停在中间附近 | 滑块会预先把自己答在中点，所以没碰过的滑块看起来就像刻意选的中间答案。 | 改用单选题，或者接受这份数据不可靠。 |
| 一个问题似乎能带动整个维度 | 量表不匹配，比如是非题得一百分，而旁边的邻居最高只有四分。 | 改成与其他一切相同的量表。 |
滑块这一项值得说两句。滑块总有一个位置。所以它算作已答，并在任何人碰它之前就得到一半的分。在你的数据里，它与一个认真想过、选了中间的人无法区分。如果你用了滑块，对它们的结果要抱怀疑。
量表那一项更隐蔽。在从零到四的评分卡里放一个是非题，它可能悄悄占据几乎整个维度，因为“是”得一百分，而旁边的邻居最高只有四分。没有任何报错。你只能通过注意到每当某一个问题变动，某个维度就跟着变动，才能发现它。修复在设计里，如何给评分卡问题设置权重讲了这个。
为什么砍掉是你能做的最好的编辑
重写让人觉得有成效。砍掉更有价值。
砍掉一个无效题目，同时做两件事。它缩短测评，从而提高完成率。它也去掉噪音，让每个结果更清晰。很少有编辑能回报两次。
对独立运营者来说，还有第三个好处：要维护的更少。每个问题都是你写过、翻译过、辩护过的东西。问题更少，意味着能出问题的地方更少。
还有一个隐藏的考虑。长度决定了你做的是哪一种评分卡。指南指出，规模明显扎堆：免费送出去的，二十到二十九个问题；收费的，一百二十五到一百四十五个。如果你做的是免费的那个，你每砍掉一个问题，都让你留在管用的规模之内。
对每个留下来的问题要问的是：它有没有可能把人群分开？如果诚实的答案是“它在那里是为了完整”，那就是你的信号。
免费测评你到底被困得有多深？完成职场窒息指数——这项免费测评告诉你是否已准备好成为独立创业者。开始测评 →小心地砍，因为没有任何东西会重新计算
现在是咬人的部分。分数在某人完成评分卡时写入一次。没有重新打分。不管你改什么，过去的答题者都保留他们当时得到的结果。
所以上线后砍掉一个问题，并不会改写历史。之前回答过它的人仍然带着它的贡献。之后做更短版本的人，是用不同的方式被衡量的。你的数字现在来自两份略有不同的工具，而且没有任何东西记录某个人做的是哪一份。
这引出几个习惯：
- 在引流之前调好。砍的最便宜的时机，是在认真的人做过之前。
- 把改动攒成一批。一次砍几个，而不是每周砍一个。
- 在你自己的笔记里给每次改动标上日期。系统不会替你做。
- 永远不要跨过一次编辑去读趋势。你砍掉一个问题之后出现的变化，可能是这次砍造成的，而不是受众的变化。
问题的措辞可以放心编辑。选项的措辞不行。上线后改选项，是工具的新版本，而不是编辑，因为它可能弄坏翻译，也可能弄坏做到一半的人。如果你想重写一个无效题目而不是砍掉它，就改问题文本、别动它的选项，或者把它当作新版本。
如果砍完让某个维度变薄了，问题可能比一个问题更大。如何校准评分卡讲了怎么读整个维度的跨度，以及当它永远不会改变任何人的建议时该怎么办。
一个下午的阅读
- 等大约五十份完成数。比这少就是噪音。
- 逐题打开答案。记下任何有一个选项占百分之八十或更多的。
- 按原因给每个无效题目分类。太容易、暗示答案、滑块、量表不匹配。
- 能砍的就砍。只重写必须重写的。
- 把日期和改动写进你的笔记。然后一个月内别再动它。
在你开始砍之前，先检查你留下的问题是不是在喂养什么。一个分布很好、背后却没有建议的问题，是同一个问题的较小版本，如何写评分卡行动方案处理的就是这个。
免费指南 · 28 页做诚实的那一版。一份能区分人群、说真话,并给你开启对话理由的测评。获取免费指南 →一个活的问题是什么样
知道目标有帮助。一个健康的问题，答案分散在它的选项上。不一定均匀。但是够多的人选了两三个选项中的每一个，让这个选择真的说明了他们的一些东西。 一个好问题问的是行为和实际存在的东西，而不是观点或打算。“你有新客户入职的书面流程吗？”能把人群分开，因为有的人有，有的人没有。“你在乎客户体验吗？”就不能，因为所有人都会说在乎。第二种是无效题目最常见的来源：它本该问事实，却问了态度。
还要检查没有哪个问题暗示了自己的正确答案。如果一个人能看出你想要哪个选项，他们就会选它，这个问题就死在礼貌上。解药是用平实的话，描述人们在每个级别上实际做什么，让每个选项读起来都像一个真实的情景，而不是一个好或坏的评分。
卡住的时候，问问自己，在和一个陌生人交谈之前，你想知道关于他的什么。你真的会用来区分一场对话和另一场对话的问题，是活的。你只是为了显得周全才加的问题，就是会变成评分卡无效题目的那些。
免费测评你到底被困得有多深？完成职场窒息指数——这项免费测评告诉你是否已准备好成为独立创业者。开始测评 →常见问题
我怎么知道一个问题是无效的？
看答案在它各个选项上怎么分布。如果某一个选项占了百分之八十或更多，这个问题就没把任何人区分开。一个健康的问题，答案分散在不止一个选项上。
我的评分卡工具会标出无效题目吗？
多半不会。指南检查了一款成熟测评产品的分析，发现没有题目与总分的相关性，没有信度系数，也没有区分度指数。分布要你自己去读。
什么时候该检查评分卡里的无效题目？
前五十来份完成数之后，然后每月一次。比这更早，数字太少，不可信。在你大力引流之前做，因为之后的改动会搅乱你的历史。
砍掉一个问题会改变旧的结果吗？
不会。分数在完成时写入一次，没有任何东西会重新计算。已经做完的人保留他们的结果。把改动的日期记在笔记里，这样你就不会跨过它去读趋势。
完整的方法和清单都在《评分卡手册》里，这是一份免费的28页手册。
你到底被困得有多深？
完成职场窒息指数——这项免费测评告诉你是否已准备好成为独立创业者。