← 拆书合集 · x → f → f(x)
超预测

超预测

Superforecasting: The Art and Science of Prediction · 2015
Philip Tetlock & Dan Gardner
x
专家的政治预测平均不比掷飞镖的猩猩准,越有名越自信错得越系统;可锦标赛里一小群普通人却持续更准——预测靠的到底是什么:天赋,还是可以学会的动作?
f
预测是一门可训练的技能:拆小问题、给具体概率、随证据小步更新、用 Brier 分数残酷记分——四个狐狸式动作咬合成一个带反馈的校准回路,谁在跑回路,谁就持续变准。
f(x)
自己做预测按回路跑:先基率、给数字、预设改判条件、事后对账;听别人预测反着听:警惕最自信最有故事的,信满口概率、敢认错的——并且只在有反馈、可判定的问题射程内动用这份信任。
x · 作者在讨论什么问题

Tetlock 是研究「预测」的心理学家。他早年那项追踪二十年、上万条专家预测的研究,得出过一个著名的难堪结论:专家的政治预测平均并不比掷飞镖的猩猩更准;更糟的是,越上电视、越自信、越有名的专家,往往错得越系统。

如果故事到此为止,结论只能是「未来不可预测,谁都别信」。《超预测》讲的是后半段的转折。在大规模预测锦标赛 Good Judgment Project 里,Tetlock 发现一小群没有内幕、智商也不超常的普通志愿者——「超级预测者」——持续地、显著地比别人准,按 Brier 分数甚至比手握机密情报的职业情报分析员还准约三成。

同一个世界,专家整体失灵,一小群普通人却稳定命中。问题于是收窄成一个:他们靠什么?如果答案不是天赋、智商和内幕,那「预测能力」就必须能被拆成具体的、可以学会的动作——这本书要做的,就是把这些动作拆出来,摆在所有人面前。

f · 作者怎样回答

Tetlock 的回答一句话就能说完:预测不是天赋,是一门可训练的技能。但这句话能成立,靠的是四个动作咬合成的一个回路。

先看身份底色。借伯林的老区分:刺猬有一个统领一切的大理论,什么都用它解释——自信、有故事、上镜,但预测差;狐狸知道很多小事、不信单一理论、乐于自我怀疑。超级预测者全是狐狸。但「狐狸」只是结果的名字,真正可学的是动作。

拆解。把「某国明年会不会爆发冲突」这种大而模糊的问题,拆成一串可分别估计的子问题,而且顺序固定:先问「这类事件历史上的基率是多少」,再用本案的特殊信息修正。反过来先看细节再查基率,基率就沦为给既有直觉贴金的装饰。

概率。不说「会/不会」「有可能」,说「73%」。具体数字封死了事后「我当时其实没那么确定」的退路——退路被封死,校准才有动力。

更新。新证据一到就小步、高频地调数字,既不固执,也不被单条新闻带着剧烈摇摆。书里记录过 2012 年叙利亚化武问题的真实轨迹:初始估计 12%,随后逐条掂量每个新证据的诊断力——它在「会用」与「不会用」两种情形下出现的可能性差多少——最终落在 28%。不是押注,是乘法校正的累积。

记分。用 Brier 分数(1950 年为气象预报设计的评分规则:预测概率与实际结果之差平方后取均值)残酷对账,把「我错在哪」当校准的燃料,而不是要捍卫的伤口。

四个动作缺一即溃:不拆解就没有可估计的对象;不给具体数字就没有可记分的答案;不记分就没有反馈,技能无从生长;不更新则再好的数字也会过期。合在一起,预测从「性格与口才的表演」变成一门带反馈回路的手艺——「可训练」三个字的全部含义就在这里。维持回路的心理条件只有一条:把信念当可证伪的草稿,不当身份。Tetlock 实测发现,这种「积极开放性」对准确率的贡献,超过原始认知能力本身。

大而模糊的问题
    │ ①拆解:先查同类事件的基率,再用本案细节修正
    ▼
一串可估计的子问题
    │ ②概率:给「73%」这样的具体数字,不说「会/不会」
    ▼
一个可以被判错的预测
    │ ③更新:新证据到,按其诊断力小步高频调数字
    ▼
结果揭晓 → ④记分:Brier 分数残酷对账
    │
    └──「我错在哪」喂回下一轮的①──技能在回路里长出来
f(x) · 怎样回应这个世界

接受这套回答,改变发生在三个位置。

做预测时,起手式换了。以前遇到大判断,第一反应是找一个能解释一切的叙事,然后说「我觉得会」;现在的顺序是:先拆小、先查基率,再写下一个具体数字(「70%」而不是「应该会」),并在证据出现之前就写明「什么信息会让我改这个数字」,事后用「我错在哪」对账,而不是护面子。

听预测时,排序反了。以前给可信度排序,标准是自信程度、名气、故事的完整度;这本书最反直觉的发现却是「准确」与「好听」几乎负相关——麦克风按好听分配,最响亮的声音恰恰来自预测最差的刺猬。所以反着听:警惕给确定结论、讲大叙事的,去找满口「73%」「这取决于」、频繁更新、敢公开认错的。

用方法时,边界立了。这个回路只在有明确判定标准、有反馈、时间窗口不太长的问题上长技能——书里给出的有效预见窗口约 400 天,再往外优势显著衰减。对黑天鹅、对一辈子等不到清晰反馈的人生大判断,狐狸的动作并不比别人高明。所以最后一步是克制:先分清手里的问题在不在射程内,再决定给这套方法多少信任;射程之外,先问「我该做点什么」,再去算「会发生什么」。

资料校准