绩效统计有哪些局限性？
定义及绩效统计实际衡量的内容
绩效统计是描述特定时间段内交易结果的汇总指标，通常基于已记录的交易、账户权益或收益。示例包括平均收益、回撤（从峰值到谷值的下降）、波动性（结果波动的程度）以及结合收益和波动性的风险调整后指标。
在实践中，这些统计指标由时间戳、交易方向和规模、报价或成交价格等输入数据计算得出，有时会转换为收益（随时间变化的百分比）。由于它们源自观测记录并依赖选定的公式，其含义取决于数据质量和计算中内置的假设。
机制如何导致不确定性
一个常见的问题是，绩效统计将复杂的过程压缩为少量数字。
-
数据和时间窗口选择。选定的起止日期决定了哪些交易被纳入计算。如果该时间段包含异常平静或异常波动的时期，所得到的指标可能比其他时期看起来更稳定或更极端。
-
执行和成本假设。收益受交易成本（点差、佣金和其他费用）和执行质量（交易是否在预期价格附近成交）的影响。许多绩效摘要未能完全分离这些因素的影响，因此两组统计数据可能对同一策略呈现不同的描述。
-
收益序列构建。指标通常依赖于如何记录权益或余额变化、如何处理部分平仓，以及如何处理缺失或修正的数据。即使底层交易相似，这些机制上的微小差异也可能改变回撤规模或波动性。
-
选择效应。如果仅展示提供商交易期间的结果，或排除不完整的历史记录，则报告的统计数据可能是有偏样本。这是一种测量局限，而非证明底层方法有效或失败的证据。
统计可能误导的证据与示例
考虑两个具有相同策略行为但测量环境不同的账户：
- 账户 A 使用包含高点差时期的较长周期记录收益。
- 账户 B 使用排除这些时期的较短周期记录收益。
即使策略的核心机制未变，账户 B 可能仅因采样市场条件不同而报告更低的回撤和更平稳的表现。问题不在于算术，而在于用于计算指标的条件与未来可能发生条件之间的不匹配。
另一个例子是回撤的解释。回撤统计总结了下降幅度，但并未说明恢复所需时间、下降是否与特定事件相关，或对执行变化的敏感程度。两个提供商可能拥有相同的最大回撤值，但恢复特征却大相径庭。
实质性局限与失效模式
绩效统计存在若干实质性局限：
-
无法保证未来结果。历史收益与风险指标之间的关系并不能确保未来行为相似，尤其是在波动率状态和市场流动性发生变化时。
-
隐藏假设。计算依赖于如何定义交易、如何衡量收益，以及成本是否被充分反映。如果不同报告中的假设不同，比较可能不可靠。
-
非平稳市场。市场动态可能随时间变化。一种方法在某一环境中表现良好，但在另一环境中可能表现不佳，即使执行方式没有任何改变。
-
提供商与报告差异。统计数据可能反映平台如何汇总活动、处理存取款，或修正或过滤活动。这些差异可能影响绩效数字。
-
幸存者偏差与报告偏差。如果仅显示成功或活跃的历史记录，统计数据可能系统性地高估典型结果。
-
司法管辖区与运营因素。交易的实际体验可能因法律和运营环境而异，而绩效统计本身无法可靠捕捉这些因素。
验证与后续应提出的问题
为验证绩效统计在特定情况下的意义，应检查报告的指标是否可从底层交易或权益记录中复现，并识别计算输入和时间窗口。
有助于揭示局限性的后续问题包括：
- 使用了什么时间段？主导的市场条件是什么？
- 成本和执行细节是否一致包含在内？
- 在收益序列中如何处理存款、取款和调整？