评估策略跳转需要哪些数据？
在收集数据前先定义“策略跳转”
策略跳转通常被描述为反复更换交易策略或规则集，而不是长期坚持一个稳定的计划以对其进行评估。为了准确评估，首先需要在你的数据模型中明确定义“策略”和“变更”的含义。
常见的数据选择包括：
- 策略定义字段：规则集名称、进出仓逻辑类别、风险设置概念（例如，固定仓位与变动仓位）、以及时间框架假设。
- 变更检测字段：策略切换发生的时间戳（或至少是顺序），以及具体变更内容（规则、参数、交易品种或执行方式）。
- 结果评估字段：你计划用于评估的指标（例如，回撤、一致性或分布稳定性），但必须在定义测量窗口后使用。
数据输入：观察“跳转”机制所需的信息
要评估是否存在策略跳转及其对结果的影响，你需要能够支持行为描述和后续分析的数据输入。
1) 流程与决策日志
- 交易前意图：在做出决策时计划使用的规则集和风险设置。
- 交易后记录：实际发生的情况，包括成交价或执行结果（如可获取）。
- 切换日志：记录策略更新的时间及声明原因（例如，“规则已修订” vs “市场不再匹配”），因为原因会影响解读。
2) 策略身份与稳定性数据
通过收集以下数据，将稳定的机制与变化的条件区分开：
- 规则集版本：存在多少个版本，以及各版本之间的变化。
- 时间范围：预期的持仓周期范围，因为即使核心规则稳定，“短期”方法的频繁变动也可能看起来像跳转。
- 交易品种范围：该策略是否每次都针对相同的市场。
3) 市场与成本背景（不假设可预测性）
没有背景就无法评估影响，但应将此视为描述性而非预测性信息。
- 交易成本：佣金、适用情况下的隔夜利息/融资费用，以及典型的执行摩擦。
- 执行质量指标：滑点证据（如有记录，指预期与实际执行之间的差异）。
- 市场状态背景：使用一致标准描述市场状况（例如，趋势性 vs 震荡性行为）。
证据、示例设计及应实施的质量检查
当你随时间比较策略时，数据必须允许你检验其他可能的解释。
证据设计（一个具体示例方法）
假设你有一个带时间戳和策略版本的切换日志，你可以计算：
- 切换频率：每个评估窗口内的切换次数。
- 持仓合规性：每个版本在切换前被遵循了多长时间。
- 风险设置的一致性：看似“策略”变化的，是否实际上是风险或执行方式的变化。
这种比较只有在所有版本的定义和测量窗口一致时才有意义。
质量检查（来源、时效性与完整性）
- 来源检查：确认每个数据字段来自可靠记录（例如，实时决策日志而非事后重建的历史）。
- 时效性检查：确保策略版本和切换时间戳在接近决策时间时记录。延迟或事后标记可能产生误导性模式。
- 完整性检查：检测缺失部分（例如，未记录的策略切换，或未关联规则集版本的交易）。
- 分离性检查：验证“策略变更”并非仅仅是成本、执行质量或所选市场的变化。
需要考虑的局限性与常见失败模式
即使有良好的数据，策略跳转评估仍可能失败。
实质性局限
- 无现实世界保证：历史关系不能证明未来结果。
- 结果变异性：结果取决于市场状况、成本、执行和本地约束。
常见失败模式
- 混淆适应与跳转：如果在单一框架内因合理原因更改规则，可能是修订而非跳转。你的定义必须体现这一区别。
- 幸存者偏差与选择偏差：如果只记录或保留成功的版本，你可能会高估“切换”的好处。
- 前瞻或事后重构：事后策略标记可能使变更看起来比实际更明智。
- 指标操纵：使用偶然有利于某个表现良好的版本的评估窗口来衡量绩效。
验证与下一步需澄清的问题
你可以通过检查自己的分析是否能用自身数据回答以下三个“可审计”问题来验证评估：
- 你能指出规则集身份发生变化的确切时间戳吗？