良好的判断力

良好的判断力是休谟所说的监督能力：理性站在感知背后，检查它的工作。没有它，其他标准都可能失灵：耳朵灵敏，却不知道什么时候该信自己；练习把一种偏差练成了习惯；广度收集了大量接触，却从不掂量。良好的判断力，是评判者身上知道自己的评判什么时候可靠、什么时候不可靠的那一部分。

这听起来没法测量：一种关于能力的能力。其实能测。决策科学给它起了一个精确而乏味的名字：校准。当一位评判者的把握和准确率相符，也就是他愿意押上 95% 的答案，大约 95% 的时候是对的，而那些像抛硬币一样的感觉，大约一半时候是对的，他就校准得很好。过度自信和信心不足，都正是休谟所指的那件事的失败：知道自己判断的可靠程度。

所以训练馆测量它。在表现类题目上，也就是有客观正确答案的试次，比如细辨测试（Delicacy Trials），你给每个答案附上一个把握程度：95%、70% 或 50%。把自报的把握和实际的准确率画在一起，就得到一条校准曲线；布里尔分数（Brier score）概括了你离把握与现实一致的那条对角线有多远。结果就是休谟最抽象的一条标准变成了算术：一条你能读懂的曲线，和一个表示它离那条线多远的数字。

关于诚实，有一点要说明，因为这是这里的规矩：你输入的把握从不抬高你的分数，也不给它加权；它是对照着你的准确率来测量的，从不掺进去。一个有把握的错误答案，会让你在校准上失分；它买不来分数。训练馆从名气偏差测试（Prestige Test）开始；完整的测量规则写在方法论里。