绩效指标有哪些局限性?
绩效指标:它们衡量的是什么
绩效指标是用于描述交易(例如,一系列货币交易)在特定时间段内表现的数值摘要。它们通常基于交易结果、头寸规模、时间戳,有时还包括风险和成本细节等输入数据。常见的例子包括基于收益的指标(随时间变化的盈亏)、基于风险的指标(回撤)以及效率指标(相对于波动性产生的收益程度)。
在实践中,绩效指标并不等同于“绩效”本身。它是一种依赖于多种选择的计算:包括应包含哪些数据、如何处理手续费和点差、如何定义测量周期的起止时间,以及如何处理缺失或调整的记录。
机制如何造成盲点
由于绩效指标是基于数据计算得出的,因此它们会继承数据中的任何缺口或不一致之处。以下是一些常见地降低其有用性的机制:
-
计算假设:许多指标依赖于可能与实际交易不符的假设。例如,收益可以在不同基础上计算(权益变动、账户货币换算或扣除成本后的净值)。即使两个仪表板使用相同的指标名称,由于公式不同,也可能产生不同的数值。
-
聚合选择:指标会受到时间段分组方式的显著影响。在某一时间框架(每日、每周或每笔交易)上衡量的指标,可能与在另一时间框架上衡量的同一概念表现不同。
-
隐藏成本和执行影响:点差、佣金、融资费用和滑点等成本在不同提供商或回测中通常处理方式不同。当这些成本被排除或建模方式不同时,指标可能看起来比实际执行中更强。
-
样本覆盖范围:如果指标基于部分数据集(缺失交易、不完整的时间戳或仅包含盈利交易),则汇总结果可能会产生误导。
失效模式的证据与实例
一个明显的失效模式是不可比的比较。假设两个绩效指标都被标记为“平均收益”,但其中一个包含交易成本,而另一个不包含。包含成本的指标系统性偏低,因此这种比较并不能仅反映“交易技巧”。
另一种失效模式是对历史数据的过度拟合。在某一时期看似稳定的关联关系,可能在波动性、流动性或执行质量发生变化时失效。因此,绩效指标可能看起来有意义,但却通不过一个基本的压力测试:“如果条件改变,该指标是否仍与良好结果相关?”
最后是风险掩盖。一些指标关注平均值或比率,可能低估尾部事件。例如,某策略可能显示总体收益尚可,但经历罕见却严重的回撤。如果指标未捕捉到回撤深度和恢复行为,则可能隐藏关键局限。
依赖绩效指标的局限性与风险
绩效指标至少存在三个实质性局限:
-
对未来结果的不确定性:历史关系不能保证未来表现。即使过去表现强劲的指标,在市场条件变化时也可能退化。
-
对可变条件的依赖:结果随市场条件、成本、执行质量和其它情境因素而变化。混合了这些影响的指标可能难以单独解释为“技巧”。
-
对假设和定义的敏感性:如果指标的输入或计算规则在不同数据集或工具之间存在差异,则该数值可能内部一致,但在外部具有误导性。
这些局限意味着,绩效指标最好被视为在特定条件下所发生情况的诊断性摘要,而非对未来结果的保证。
如何验证指标实际意味着什么
要独立验证最相关的事实,应将绩效指标视为可复现的计算:
- 检查定义:确认该指标包含的内容(净收益与毛收益、成本处理方式,以及哪些被视为入场/出场)。
- 检查时间范围和样本:验证测量窗口,并确认数据集是否涵盖所有相关交易。
- 检查成本和执行假设:确保滑点、佣金、点差和其他执行影响得到一致处理。
- 检验解释的稳健性:思考如果更改时间范围,或排除具有不同市场行为的时期,该指标是否仍有意义。
对于使用绩效指标评估外汇交易概念或工具的读者而言,最重要的下一个问题不是“哪个指标最高?”