如何测试外汇信号？
明确你要测试的内容（信号 vs. 主张）
外汇信号通常以规则或建议的形式呈现，将市场状况（输入）映射到未来操作（输出）。测试意味着你评估信号的决策规则在明确的时间和成本假设下，是否优于适当的基准。
在比较结果之前，用通俗语言定义以下三项：
- 假设：你可以测试的陈述，例如“在固定执行假设下，该信号的时机规则相对于基准能提高收益。”
- 基准：代表“无信号”或“最少信息”的参考。例如，不使用信号而持有头寸、使用可明确说明的简单移动平均规则，或与匹配信号频率的随机入场时间比较。基准必须定义清楚，以便结果可复现。
- 评估单位：什么算作一次测试实例——通常是一笔交易、一个头寸或一个信号事件。
如果提供者仅以一般术语描述结果，你就无法测试其底层机制。测试需要有文档化的规则集、带时间戳和交易品种标识符的信号事件数据集，或足够信息以无需猜测地重建决策过程。
将信号“机制”具体化为假设
当关键细节缺失或处理不一致时，信号可能无法测试。为使测试独立且可重复，需为从输入到测量结果的每一步写下假设：
- 输入：规则使用的数据（价格、指标、时间、波动率过滤器）。如果未指定输入，你必须承认重建的规则存在不确定性。
- 决策时机：信号生成的时间和假设的执行时间。例如，若信号“在收盘时生成”，可假设在下一根K线开盘执行；若信号为“实时”，你仍需为测量设定时间假设。
- 执行模型：订单如何成交。即使没有实时市场数据，你也需要一个一致的模型，例如“在历史序列中以下一个可用价格市价成交”。
- 成本模型（kostensoorten）：包含所有可建模且不可忽略的摩擦：点差、佣金和任何可定义的平台费用。至少应假设固定的点差和佣金结构；否则你的测试会混淆毛收益和净收益。
- 交易生命周期：头寸何时平仓。信号可能包含止盈/止损逻辑，或指示基于时间的退出。规则不同，评估结果也不同。
这些假设将稳定机制（你要测试的决策规则）与可变因素（市场状况和执行细节）分开。你越明确，测试就越能被独立验证。
选择假设指标并划分数据
没有计划的测试容易导致过拟合——即结果在历史数据上看起来很好，但在新数据上失败。为降低此风险，需预先定义：
- 结果指标：常见选择包括每笔交易的净收益、最大回撤、胜率（需谨慎）或风险调整后指标。选择与假设一致的少量指标。
- 样本处理：避免混合信号方法实际发生变化的时期。
- 数据划分：使用训练/测试方法（或前向滚动验证）。例如，可用历史数据的早期部分校准假设允许的参数，然后保留后期作为样本外测试。
一个实用方法是将过程视为：
- 提出假设并定义指标。
- 固定基准和假设。
- 划分数据集为至少两个时期（早期用于拟合/验证，后期用于测试）。
- 仅在测试期使用预选指标运行一次评估。
即使你不“训练”参数，仍需划分数据以避免选择性偏差。如果你尝试多个定义直到结果看起来吸引人，实际上是在看到结果后改变了假设。
建模成本并变化假设（稳健性检查）
最常见的测试失败之一是信号表现理论上很强，但一旦建模成本和执行，表现就崩溃。即使你假设没有实时数据，仍可进行结构化成本建模和敏感性分析。
示例成本结构（kostensoorten）
假设你评估一个每个信号事件进出一次的策略。
- 点差（可变因素）：根据你的重建方法，将其建模为固定百分比或固定绝对点数成本。
- 佣金（可变因素）：对每边（入场和出场）建模固定费用。
- 滑点（不确定性）：可将滑点建模为额外成本分布或固定缓冲。
明确说明这些假设。然后在不同合理成本水平下重复测试，看结果是否依赖单一乐观情景。
应包含的稳健性检查
- 对时机的敏感性：将执行时间移动一根K线（或小时间延迟）并重新评估。
- 对点差/费用的敏感性：用更高和更低的假设成本运行相同测试。
- 市场状态变化：在不同波动率或趋势状态下比较表现，只要你的分类方法已定义。
- 样本外稳定性：要求在保留时期内表现保持相似（在预定义容差内）。
这些稳健性检查有助于回答任何明显优势是与稳定机制相关，还是仅与特定时期和有利假设相关。
证据与解释：什么算“已测试”
要将一个信号视为已测试，你需要有与假设一致且对简单失败模式有抵抗力的证据。
至少报告：
- 基准及其适当性原因。
- 假设（时机、执行、成本和交易生命周期规则）。
- 数据划分方法。
- 测试期内预定义指标的结果。
- 变化成本和时机时的稳健性结果。
一个主要局限/失败模式
一个关键局限是历史关系不能确立未来结果。外汇市场可能以影响流动性、波动率、相关性和关键事件周围行为的方式变化。一个信号在历史数据中可能表现有效，但当市场状态变化时表现会下降。
另一个主要失败模式是提供者方法漂移：如果提供者改变信号生成方式，过去表现可能不再代表你现在会收到的内容。只有当你有足够的历史元数据来划分方法时期时，测试才能检测到这一点。
验证和你可以独立回答的下一个问题
测试不是一次性行为。你可以通过检查以下内容独立验证一个信号框架是否可测试：