如何验证关于过度自信的信息?
直接回答
关于过度自信的信息可以通过以下方式验证:(1)使用一致的定义,(2)检验人们所表达的信心是否与后续结果相符,(3)记录假设和局限性。这种方法可避免将观点、轶事或一次性结果当作证据。
机制与定义
过度自信通常指个人感受的信心程度与其判断或预测的实际准确性之间存在不匹配。验证始于明确的范围界定:你是在评估一般态度、预测准确性,还是决策行为?
一种实用的操作化方法是将主张拆分为稳定部分和可变部分:
- 稳定机制:指人们可能高估自己的知识、技能或信号,相对于现实世界中的不确定性。
- 可变条件:结果取决于成本、执行质量、时机和当地规则,这些因素在不同情境下可能变化。
在验证任何关于过度自信的陈述时,应明确测量内容(信心水平、概率估计或主观确定性)以及预测内容(方向、范围或二元事件)。还应定义在结果已知前如何记录信心,以防止事后偏见。
证据与可复现的验证步骤
由于不假设实时市场数据,验证可通过通用、可复现的方法,使用已记录的判断来完成。
1) 使用预定义的定义和评分规则
创建一个简单模板:
- 决策:你要判断的事件(明确描述)。
- 信心:一个数值概率(或转换为概率区间的分级信心量表)。
- 时间窗口:结果将被观察的时间。
- 结果:后续记录的实际结果。
验证步骤:根据你的评分规则,计算更高的信心是否对应更高的准确性。
2) 进行校准检查
校准测试所陈述的概率是否与实际频率相符。例如假设:如果你在多次试验中说某事件有70%的可能性,它应大约在70%的时间内发生(在自然变异范围内)。验证步骤:将你的判断分组(如0–10%、10–20%……),比较预测与实际频率。
重要局限:校准需要足够多的观察次数。样本量较小时,随机变异可能看起来像“证明”或“失败”。
3) 使用预先承诺进行“分辨率”检查
分辨率衡量信心是否能有效区分可能和不可能的结果。验证步骤:在结果出现前按信心对判断进行排序;在结果出现后,检验高信心组是否比低信心组更准确。
失败模式:如果你仅在看到结果后才分析案例,结论可能反映选择偏差而非过度自信。
局限性与风险
至少有一个主要局限:过度自信无法作为一个单一数字直接观察。它必须从测量的信心和后续结果中推断得出。
其他风险:
- 结果随市场状况、成本、执行和司法管辖区而变化,因此不能从一个情境推广到所有情境。
- 历史关系不能确立未来结果。
- 信心可能因新信息、技能变化或任务难度变化而改变。
一个常见错误是将“犯错”与“过度自信”混为一谈。一个人可能因多种原因犯错(如数据缺失),但仍处于适当的校准状态。
验证或下一个问题
如果你想为研究或评估验证关于过度自信的信息,请保持过程可复现:
- 精确定义主张(何种类型的过度自信及何种测量方式)。
- 在结果出现前记录信心。
- 使用校准和分辨率类型的检查,并记录假设。
- 报告不确定性和样本限制。
接下来要考虑的问题:你所判断事件的“真实情况”到底是什么?你是否有足够多的记录试验,使校准具有意义?