显影· 三主题树 术语表

测一测你的判断

天气预报的准头是可以算的——你对自己的判断,也是。

⏱ 5–8 分钟讲 · 例 · 练 · 卡编号 drive-08
学习证据 学完后,怎么核对? 如何核对 · 适用边界 · 最后复核

把学习结果留在一个可以回看、可以复做的动作里;这一区只写学生能自己检查的证据。

如何核对

  • 预测与结果对照
  • 多次校准记录

适用边界

判断需结合延迟自测和多次记录;单次感觉或分数不足以下结论。

最后复核

这是内容复核日期,不是学习截止日期。

什么叫「校准」

气象里的 80% 是一种长期说法:把许多相似、都报 80% 的预报放在一起,实际发生率如果接近 80%,才可以说这一档校准得好。做题时也一样——先选一个明确答案,再给“这个答案会不会对”报把握。单题只能告诉你这一次对不对,不能单独证明校准。

两种失准,都误事

  • 偏高(盲目自信):把握常常高于同类判断的实际正确率,容易在“假会”的地方少复习。
  • 偏低(过度自卑):把握常常低于实际正确率,可能不敢尝试已经掌握的题。

要区分这两种情况,必须把题目族、答案、把握和结果放在同一张账上。判断的准头不是一次感觉,而是相似记录反复核对出来的。

三步测法

  1. :先选真 / 假(或一个明确答案),不要先看结果。
  2. :给所选答案报 50–100% 把握;把握不是保证正确。
  3. 对账:揭晓后记录选对 / 选错、样本量和原来的把握。

关键动作只有一个:把答案和把握在揭晓前写下来。单题可以计算 Brier loss 作为预测评分:若 q 是所选答案的把握、z 是选对记 1 或选错记 0,则 loss=(q−z)²,0 最好、1 最差;它不是单题校准结论。

核心句:先选,再报,揭晓后对账。八题练流程,长期结论留给更多同类记录。

朵朵一直觉得自己「数学时好时坏,全看运气」。她挑了同一任务族——分数、小数和百分数的等值判断——用三步测法查了查:

朵朵我做 8 道分数—百分数等值判断。每题先选真 / 假,再给所选答案报 50–100% 把握;揭晓后把原始行留下。
AI账来了:本轮 8 题里选对 5 题,准确率 62.5%;平均把握 76%。有一题报 90% 却选错,单题 Brier loss 是 0.81。这个 loss 只给那一题评分,不能叫“单题校准”。
朵朵那我能说自己长期偏高了吗?
AI还不能。8 条只够练流程;要谈可靠性或校准,要继续做许多相似判断,并让同一把握档有多次记录,再按档比较实际正确率。

所谓「时好时坏」,拆开看往往是没有把答案、把握和结果放在一起。账一对,下一次复习才有可观察的起点。

互动案例

数学天气校准台 · 先判真假,再报把握

八道同一任务族的分数/百分数判断:先选真或假,再为你选的答案报 50–100% 把握;揭晓后保存原始记录。

互动版需要运行脚本(本地 HTTP 预览);不运行脚本时,上面的静态例子已包含同样的内容。

完成这 8 题后,哪句话没有越过样本边界?

上手 · 下一组数学判断 · 先选后报
  1. 挑一组同一任务族的明确真 / 假命题;每题先写答案,再给所选答案报 50–100% 把握。
  2. 揭晓后保留原始行:命题、答案、把握、选对 / 选错;需要时计算单题 Brier loss。
  3. 先报告样本量、准确率和平均把握;只有记录继续增多且各把握档都有多次,才讨论可靠性 / 校准。

怎么算过关:完成一张同族判断账本,并写清“本轮描述”与“长期结论尚不能下”的边界。

加练 练功房 · 先押注再看答案 开练 ›

复习卡 · 点一下翻面

判断账本的顺序是什么?单题 Brier loss 能不能证明校准?

答案

先选真 / 假 → 给所选答案报把握 → 揭晓后对账。单题 Brier loss=(q−z)²,0 最好、1 最差,只评分这一题;校准要靠许多相似记录和足量分档样本。

  • 先选,再报,揭晓后写进账本。
  • 准确率、平均把握和 Brier loss 回答不同问题。
  • 八题练流程;长期校准要更多同类记录。