基本信息
阅读时间:约 14 分钟
字数:约 5614 字
摘要:结果好不等于决定对。本文提出 IROV 四问卡——信息、推理、选项、期望值——在结果揭晓前就能给决定本身打分,并配一套可落地的评分、度量与复盘清单。
全文语音
中文
English
日本語
한국어
那次「压对了」的拍板,我后来不敢再翻记录
2024 年 9 月的一个周三晚上八点,杭州未来科技城一间小会议室里,白板上还留着两栏马克笔的字。34 岁的周珩是这家 B 端软件公司的产品负责人,那天他必须在一小时内给出答复:把原定 11 月发布的新功能砍掉一半先上,还是按原计划全量发布。

他记得自己当时的原话是那五个字:「我赌一把,先全量。」后来那次发布的数据确实好看,首月激活比上一版高出三成,季度复盘会上,这个决定被当成正面案例讲了两次。

但半年后他翻出当时的聊天记录,只找到三句支撑的话,没有用户数据、没有竞品对照、也没有任何关于「如果不这么做会怎样」的推演。他说:「我赢了一次,可我说不清我赢在哪里,这才是最吓人的地方。」

这正是结果偏差最棘手的地方:好的结果会倒过来给过程镀一层金,让一个只有三句话支撑的决定,在后来的叙述里慢慢长成一段深思熟虑。你越成功,就越难发现自己当时其实是在蒙。

周珩后来做的事,是把结果和决定拆开来看:结果由运气与过程共同决定,而过程只能由过程自己负责。这篇文章要讲的,就是一套在结果还没揭晓之前,就能给决定本身打分的四问评估法。

结果偏差:好结果为什么会奖励坏决定
心理学里有一个被反复验证过的现象,叫结果偏差,英文写作 outcome bias:人在评价一个决定好不好时,会被那个决定的结局牵着走,哪怕结局在逻辑上根本不该参与对过程的评价。

最经典的证据来自 Baron 与 Hershey 在 1988 年发表的实验室研究,来源类型是同行评议期刊论文。他们让被试阅读同一段医疗决策描述:一位医生面对是否实施某项手术的抉择,决策过程完全相同;唯一的区别是,一半被试被告知患者后来恢复良好,另一半被告知恢复不佳。

结果完全相同的决策过程,在结局良好的那一组得到的专业评价明显更高,差异达到统计显著水平,原始文献报告量级为 p 小于 0.01;后续在司法判决、商业决策等场景的重复研究,也复现出中等量级的同类效应。换句话说,人不是在评价决定,是在给结局打分。

这个偏差会带来三个很具体的后果。第一,坏决定被强化:一次侥幸的成功会让你把错误的方法写进经验,下次照做不误。第二,好决定被误杀:一次不走运的失败会让你放弃本来正确的流程。第三,组织层面的激励错位:只按结果褒奖,等于公开给运气发奖金。

所以谈决策质量的第一步,不是学更多模型,而是承认一件事:结果这个信号里混着大量噪声,而在单次事件里,噪声往往比信号更大。想把两者分开,需要一件工具——在结果出现之前,先把当时的状态封存下来。

决策日记:在结果揭晓之前先把「当时所知」封住
这件工具叫决策日记,做法极简:每做一个有一定分量的决定,就在 24 小时内写下五行字,之后只读不改。周珩把它做成了手机备忘录里的一个模板,标题只有日期和决定名,翻起来像一本流水账。

五行分别是:一、当时的情境与约束,包括时间、资源和谁在催;二、我考虑过的全部选项,至少三个,其中必须包含「什么都不做」;三、我对各选项的预估结果与概率,写成百分比,而不是「大概率」;四、我认为最关键的两条假设;五、我此刻的情绪与身体状态,是否疲惫、是否刚和人争执过。

为什么必须卡在 24 小时内?因为记忆会被结果重新编辑。人在知道自己赌赢之后,会不自觉地想起当初其实看得挺清楚,这不是撒谎,是记忆的正常工作方式。写下来,就是给未来的自己留一份无法篡改的快照。

周珩的模板底部还有一行只有他自己看得懂的备注:「如果三个月后我回来改这一页,先写下为什么改。」他说真正起作用的不是记录本身,而是那一瞬间的心虚——当你伸手想改旧记录时,你已经在和自己的结果偏差正面照面了。

有了这份快照,才谈得上评估。下面这四问,就是给快照逐项打分的尺子:信息、推理、选项、期望值。我把它们合起来叫作 IROV 四问卡,每一问 0 到 2 分,满分 8 分,八分不代表会对,只代表该做的功课做完了。

第一问:信息——手上有几块拼图,又有几块是猜的
第一问检查的是信息:做这个决定时,你所依赖的事实里,有多少是查证过的,又有多少只是假定成立。很多决定的脆弱点不在推理,而在那些被当成事实使用的假设上。

具体做法是把决定用到的事实列成一张四格表:已知,有来源可复核;假定,合理但没有验证过;可知而未查,花两小时就能拿到、当时却没拿;不可知,现在无论怎么做都拿不到。周珩复盘那次发布时发现,第三格里躺着两条:竞品同类功能的留存数据,和老用户的迁移成本,都只要一次用户访谈就能问出来。

评分标准很直白:关键事实全部落在已知格,2 分;有一到两条停在假定格但被明确标注出来,1 分;存在未经标注却被当作事实使用的假定,或者有关键项落在可知而未查格里,0 分。

这一问最容易露馅的地方,是信息量的错觉。读了二十份报告不等于信息充分,如果那二十份讲的是同一件事,你掌握的其实是一条信息被复制了二十遍。有效的检查是反问一句:如果这二十条里有一半是错的,我的决定会变吗?如果不会,说明真正起作用的并不是它们。

还有一个极小的技巧:把「我听说过」和「我核对过」分成两栏写。周珩说,第一次这么分的时候,他发现自己八成的论据都站在左边那一栏,那一眼比任何方法论都管用。
第二问:推理——从事实到结论,中间跳了几级台阶
第二问检查推理链。信息是台阶,结论是楼顶,中间每一级跳跃都得能站住脚。做法是把「事实到推断、推断到推断、推断到结论」完整展开,然后在每一个箭头上标注可信度:高,有直接证据;中,有间接证据或类比;低,主要靠感觉。

展开之后,最常出现的三种松动是这样的:一是把相关当因果,看到两件事一起出现就断言其中一件导致另一件;二是以偏概全,用一两个鲜明的例子覆盖掉整体分布;三是可得性偏误,最近发生、最容易想起的那个案例,在心里被放大成普遍规律。

周珩那次发布的推理链只有两级:老用户抱怨过功能太多,这是事实;所以应该全量上线更完整的新版,这是结论。中间被整个跳过的那一问是:抱怨功能太多的用户,和真正愿意为新版多付钱的用户,是同一批人吗?他后来补了数据,答案是有交叠,但远不是同一批。

评分口径:每条关键箭头都有直接证据支撑,2 分;混有中等可信度的跳跃但已经标明,1 分;出现未标明的低可信度跳跃,尤其是把相关当因果,0 分。

这一问还配一个反向动作,值得一并写进日记:写下「什么证据一旦出现,我会立刻改变这个决定」。写不出来的人,多半不是在推理,而是在给已经想好的答案找理由。这句话在事后尤其锋利——当那个证据真的出现时,你会看清自己当初到底有没有打算听它的。
第三问:选项——你是在做选择,还是在给直觉盖章
第三问检查的是选项集本身。决策质量的前提,是你确实在一组真正不同的选项之间做了选择,而不是对着一个已经想好的答案走了一遍过场。

判断标准有两条。第一条:选项数量是否达到三个,并且包含一个什么都不做或者延后一轮的基准项。只有一个做或者不做的决定,其实是在问要不要,不是在问怎么做。第二条:这些选项之间是否存在实质差异,还是只是同一个方案的三种包装。

给选项集加压的经典做法,是 Kahneman 提出的事前验尸,英文叫 premortem:在决定落地的那一刻,假设半年后它彻底失败了,用五分钟写下三条最可能的失败原因。这个动作的价值在于,它把反对变成了流程的一部分,而不是某个人的立场。

周珩后来给自己加了一条规矩:凡是要花掉一个团队两周以上工作量的决定,事前验尸必须有两个人以上参加,且至少有一人不直接对该决定负责。他回忆第一次这么做时,那位旁听的同事只问了一句「如果老客户根本不想迁移呢」,就把整个方案的前提撕开了一道口子。

评分:三个以上实质不同的选项,且做过事前验尸或同等强度的反面检验,2 分;选项达标但没有反面检验,1 分;只有二元选项,或者选项之间无实质差异,0 分。
第四问:期望值——把「我觉得会赢」换成一道算术
第四问把模糊的信心翻译成可复核的数字:写下每个选项的期望值。形式不必复杂,一行就够,大致等于成功概率乘以成功时的收益,加上失败概率乘以失败时的代价。收益与代价用你真正在意的单位衡量,用户数、工时、满意度、现金流都可以,不必强行折算成钱。

关键不在于算得多准,而在于写下概率这个动作本身。一旦写下七成,三个月后就可以回来数一数:你标七成的事,到底有几成成了。Philip Tetlock 主持的 Good Judgment Project 属于公开研究项目报告,它给出了这项能力可塑性的证据:经过训练并持续回看的所谓超级预测者,其预测误差,也就是 Brier 分数,比对照群体低出三到六成的量级,而他们最突出的习惯,正是把判断写成概率并逐条复盘。

于是有了两个很好用的度量。一是校准度:把所有你标为七成的判断挑出来,看实际发生的比例,如果只有四成发生,说明你的七成其实偏乐观。二是分辨力:你标八成的事与标五成五的事,实际发生率差距够不够大,差距大说明你的概率真的携带信息。

需要提醒的是,期望值只在重复出现的场景里才稳定地显现价值。单次事件中,一个期望值很低的选项也可能碰巧赢,而这也正是结果偏差的温床。所以正确的做法不是盯着一次的结果,而是攒够二十次、三十次之后回头看分布,这也正是决策日记必须坚持长期记的原因。

评分:明确写出概率与收益代价,且单位清晰,2 分;只写了定性判断,比如大概率或者风险不小,但方向明确,1 分;通篇只有一句我感觉会成,0 分。
专业分析:IROV 四问评分卡与三项公开研究的交叉验证
IROV 按信息、推理、选项、期望值排序,是因为这四个环节恰好对应一次判断会失手的四个位置:输入错了、过程跳了、选项窄了、口径糊了。下面用公开研究与两个成熟框架做一次交叉比对,说明它和既有方法的关系与分工,也说明它不是凭空造出来的第四个概念。

证据部分逐条注明来源类型。其一,Baron 与 Hershey 在 1988 年发表于同行评议期刊的实验,直接证明结果信息会污染对决策过程的评价,效应达到统计显著,原始报告量级为 p 小于 0.01;后续在司法判决、商业决策等场景的重复研究复现出中等量级效应,这是必须把结果与决定分开评价的直接依据。其二,Tetlock 团队的 Good Judgment Project 公开报告显示,把判断写成概率并持续回看能显著提升预测精度,超级预测者的 Brier 分数优于对照群体三到六成的量级。其三,Kahneman 提出的事前验尸,在组织实践中被用来以极低成本引入反对视角。以上均为公开发表或公开报告的方法与结论,量级为文献报告的量级,而非本文测算。

框架对比。与 Chip 与 Dan Heath 在《Decisive》中提出的 WRAP 框架相比:WRAP 的四步是拓宽选项、现实性检验、制造距离、做好出错准备,它瞄准的是决定做出之前,解决如何把决策过程做对;IROV 瞄准的是决定做出之后、结果出现之前,解决如何在信息不全时给它打分。两者并不冲突,WRAP 更像施工规范,IROV 更像验收表。与 Annie Duke 在《Thinking in Bets》中倡导的以决策质量而非结果质量做评价相比,IROV 的贡献在于提供了可打的分数与可查的四格表,把一句原则拆成八个格子。

可落地的四项度量指标。第一,四问总分,区间 0 到 8 分,目标为重要决定的平均分不低于 6 分。第二,决策日记覆盖率,等于做了日记的重要决定数除以全部重要决定数,目标不低于八成。第三,校准误差,即标称概率与实际发生率的平均绝对差,目标是在累计三十次记录后控制在十个百分点以内。第四,结果决策分离率,即复盘结论中提到过程而非结果的句子占比,目标是逐步提高到七成以上。

执行清单,照抄即可用。第一,在手机备忘录建一份决策日记模板,固定情境、选项、概率、关键假设、状态五行。第二,决定落地二十四小时内填完,填完只读不改。第三,用 IROV 四问逐项打 0 到 2 分。第四,凡耗时超过团队两周的决定,加一场五分钟的事前验尸。第五,每月抽十分钟回看一次日记,只问一句「当时标七成的事,后来成了几件」。第六,季度末统计四项指标,写在当季总结的第一页。
把四问装进日常:十分钟版本与季度版本
方法落不了地,通常不是因为太难,而是因为太重。所以要把 IROV 拆成两个版本:一个十分钟版本,处理日常那些中等分量的决定;一个季度版本,做系统性的回看和校准。

十分钟版本的流程是固定的:决定一出口,先花两分钟写下情境与选项;再花三分钟给每个选项写一个概率和一句收益代价;然后花三分钟做一次迷你事前验尸,写下三条可能的失败原因;最后两分钟打四问分。十分钟之后,这一页就封存了。

季度版本只做三件事。第一,把当季所有日记按四问总分排序,找出最低的两条,问一句「当时缺的到底是时间还是信息」,如果连续两次都是缺时间,那不是决策问题,是排期问题。第二,统计校准误差,把所有标七成的判断拉出来数一遍。第三,挑一个结果很好但分数很低的决定,在会上公开讲一遍,这是对抗结果偏差最有力的组织动作,因为它把运气这两个字说出了口。

在团队里推行时最容易卡住的是氛围。复盘一旦变成追责,所有人都会开始修饰自己的日记,记录本身就失去了意义。周珩的做法是:复盘会上只谈过程分,不谈结果分,并且由负责人先讲自己的一次低分决定。他说第一次这么做时会议室安静了半分钟,但三个月后,团队开始主动提交自己的低分记录。

还有一个很实在的收益:当你开始按过程给自己打分,失败就不再等同于过失。一次期望值算对、过程干净、结果糟糕的决定,在 IROV 里依然是七分。允许自己是对的但没赢,是长期把事情做对的前提,也是一个人能持续做出好决定的心理条件。
四问卡的边界:哪些决定不值得打分
任何工具都有适用边界,四问卡也不例外。把它用在所有决定上,既浪费时间,也会让真正重要的决定失去分量。判断标准其实很简单,看两件事:这个决定的可逆性,和它的影响时长。

第一类是高度可逆、代价很小的决定,比如中午吃什么、要不要马上回复一封邮件。这类决定不需要打分,快速试错比仔细评估更划算,把四问用在这里,本身就是一种决策资源浪费。反过来,不可逆、代价高、影响超过一个季度的决定,必须走完四问,一次也不能省。

第二类是时间被压缩到分钟级的应急场景,比如线上故障、突发的舆情。这时没有条件做四格表和事前验尸,正确做法是依赖事先演练过的流程,而不是指望临场的决策质量。应急能力是演练出来的,不是评估出来的。

第三类是那些要靠结果才能积累信息的探索性动作。有些事做一次才知道答案,比如尝试一种新的获客渠道。这类决定记录的重点不是打分,而是把假设写清楚,方便事后把新信息收进下一次判断里,让一次的尝试变成一群人的经验。

一句话概括:四问卡服务的是那些你会反复做、并且能从中学到东西的决定。把力气集中在这类决定上,二十次之后你会明显感觉到自己的判断在变稳——不是每次都对,而是错得越来越清楚,清楚到你知道下一次该改哪一格。
常见问题
1.问:四问评分要花多久,会不会拖慢决策节奏?
答:完整版十分钟,日常版可以压到三分钟——只写情境、三个选项和一句概率。建议先对「耗时超过团队两周」或「影响超过一个季度」的决定强制使用,其他决定自愿。跑满一个月后,你会自然知道哪些决定值得十分钟,哪些不值得,不必一开始全面铺开。
2.问:概率总是写不准,是不是就没有意义了?
答:恰恰相反,写不准才是记录的价值所在。校准能力是可以训练的,Tetlock 团队的公开报告显示,持续把判断写成概率并逐条回看的人,预测误差会系统性下降。具体做法是每月把标为七成的判断挑出来数一遍,看实际发生率是四成还是七成,下一次你会自动往回收。写不准不是问题,不写才没有参照。
3.问:结果明明很好,为什么还要挑过程的毛病?
答:因为好的结果是有欺骗性的奖励信号。Baron 与 Hershey 的实验说明,同样一个决策过程,在结局好与结局坏两种条件下,得到的评价会显著不同。如果只挑坏结果复盘,你会同时犯两个错:把运气当成能力,以及把能力当成运气。挑过程不是为了否定结果,是为了让下一次的成功可以被复制。
4.问:团队里没人愿意记录,怎么推得动?
答:先降低门槛,把模板做成手机备忘录里五行字的填空,而不是文档。其次由负责人先公开自己的一次低分决定,把氛围从追责改成核对。第三,把过程分而不是结果分写进季度总结的第一页,让大家看到记录确实被使用。三件事做完一个月,记录率通常能从零散提到八成以上。
图片来源:图1 FilipFilipovic / Pixabay (CC0) · 图2 Dusan_Cvetanovic / Pixabay (CC0) · 图3 Makalu / Pixabay (CC0) · 图4 FilipFilipovic / Pixabay (CC0) · 图5 ignartonosbg / Pixabay (CC0) · 图6 TuanAnhNgo / Pixabay (CC0) · 图7 maya_7966 / Pixabay (CC0) · 图8 NoName_13 / Pixabay (CC0) · 图9 blandineschillinger / Pixabay (CC0) · 图10 jatocreate / Pixabay (CC0) · 图11 Tama66 / Pixabay (CC0) · 图12 pen_ash / Pixabay (CC0) · 图13 donauwood_de / Pixabay (CC0) · 图14 pen_ash / Pixabay (CC0) · 图15 pen_ash / Pixabay (CC0) · 图16 PixelAnarchy / Pixabay (CC0) · 图17 Aurélien-Barre / Pixabay (CC0) · 图18 candecegriffin / Pixabay (CC0) · 图19 652234 / Pixabay (CC0) · 图20 lino9999 / Pixabay (CC0) · 图21 fietzfotos / Pixabay (CC0) · 图22 aszak / Pixabay (CC0) · 图23 Pexels / Pixabay (CC0) · 图24 DavidClode / Pixabay (CC0) · 图25 Joloarts / Pixabay (CC0) · 图26 vinsky2002 / Pixabay (CC0) · 图27 JosepMonter / Pixabay (CC0) · 图28 CUONG_ART / Pixabay (CC0) · 图29 tiburi / Pixabay (CC0) · 图30 newtjitsu / Pixabay (CC0) · 图31 SplitShire / Pixabay (CC0) · 图32 Yummymoon / Pixabay (CC0) · 图33 ahmetyuksek / Pixabay (CC0) · 图34 zivica / Pixabay (CC0) · 图35 lin2015 / Pixabay (CC0) · 图36 Couleur / Pixabay (CC0) · 图37 newtjitsu / Pixabay (CC0) · 图38 zivica / Pixabay (CC0) · 图39 花见花开788 / Pixabay (CC0) · 图40 花见花开788 / Pixabay (CC0) · 图41 MiraCosic / Pixabay (CC0) · 图42 Dimhou / Pixabay (CC0) · 图43 MiraCosic / Pixabay (CC0) · 图44 focusonpc / Pixabay (CC0)
本文为认知与方法论科普,不构成任何证券、期货或投资咨询建议,亦不构成个性化投资建议。
本文由 AI 生成,经人类主编终审。

评论(0)