Definición y propósito de las pruebas prospectivas
Las pruebas prospectivas son una forma de evaluar un enfoque de trading basado en reglas utilizando datos posteriores a la etapa de configuración. El objetivo es comprobar si el enfoque que funcionó durante la configuración también se comporta de manera razonable cuando se expone a condiciones nuevas y no vistas. En la práctica, normalmente implica aplicar la misma lógica de entrada/salida, las mismas reglas de riesgo y los mismos supuestos a períodos de tiempo posteriores (o a un feed simulado “similar al real”) y medir los resultados bajo un método de evaluación definido.
Una idea clave es separar la mecánica que controlas (tus reglas, tu método de evaluación y tus supuestos) de las condiciones de mercado y ejecución que no puedes controlar por completo (dinámica de precios, costos de trading y cómo se ejecutan las órdenes). Si cualquiera de los dos lados se modela de manera poco realista, los resultados de las pruebas prospectivas pueden parecer mejores o peores de lo que ocurriría en el trading real.
Cómo funcionan las pruebas prospectivas en la práctica
La mayoría de las pruebas prospectivas se basan en tres componentes:
- Una definición fija de la estrategia: La lógica de entrada/salida y cualquier filtro permanecen sin cambios.
- Un marco de evaluación fijo: Decides cómo se dimensionan las posiciones, cómo se cuentan las operaciones y qué métricas registras.
- Supuestos sobre la ejecución: Incluso si utilizas datos posteriores, aún necesitas supuestos sobre los fills (por ejemplo, si las órdenes se ejecutan al precio registrado y cómo manejas los spreads).
Debido a que estos componentes son explícitos, puedes volver a ejecutar el enfoque de forma independiente con las mismas reglas y supuestos. Pero las pruebas prospectivas siguen limitadas por lo que eliges asumir y por cuán fielmente tu simulación se aproxima a las condiciones reales de trading.
Evidencia y ejemplos de dónde fallan las pruebas prospectivas
Las pruebas prospectivas pueden fallar incluso cuando parecen “coincidir” con los datos históricos. Los modos de fallo más comunes incluyen:
- Desajuste de ejecución: Tu prueba prospectiva puede utilizar fills idealizados, mientras que el trading real puede incluir deslizamiento, retrasos, fills parciales y variación del spread. Las pequeñas diferencias en la ejecución pueden acumularse a lo largo de muchas operaciones.
- Cambio en las relaciones de mercado: Una estrategia puede explotar un patrón que existe en un período pero que se debilita más adelante. Las pruebas prospectivas pueden detectar esa debilidad, pero no pueden probar que la relación se mantendrá estable.
- Sobreajuste mediante evaluación repetida: Si ajustas repetidamente las reglas basándote en nuevos resultados prospectivos, el período posterior ya no es “verdaderamente no visto”. La evaluación se convierte entonces en un bucle de retroalimentación que puede inflar el rendimiento aparente.
- Costos y restricciones no modelados: Las comisiones, el financiamiento, las diferencias entre bid/ask y los límites de trading pueden no estar representados de manera consistente. Si los costos se subestiman, los resultados pueden volverse engañosos.
Estos ejemplos comparten un tema: las pruebas prospectivas solo son tan confiables como el realismo de tus supuestos y la disciplina de mantener la estrategia fija.
Limitaciones y riesgos: incertidumbre que no puedes eliminar
Las pruebas prospectivas reducen algunos riesgos (comprueban el comportamiento fuera de la ventana de configuración), pero no eliminan la incertidumbre. Las limitaciones principales son:
- Sin garantía de resultados futuros: Las pruebas prospectivas miran hacia atrás en relación con el período probado. Los resultados varían según las condiciones del mercado, la calidad de la ejecución, los costos y otros factores.
- Brechas de modelado: Incluso sin datos en tiempo real, una prueba prospectiva necesita supuestos sobre cómo se habrían ejecutado las operaciones y cómo se comportarían tus reglas bajo diferentes regímenes de liquidez o volatilidad.
- Las elecciones de evaluación afectan las conclusiones: Diferentes métricas (beneficio, drawdown, volatilidad, frecuencia de operaciones), diferentes reglas de dimensionamiento del riesgo o diferentes “manejos de eventos” (empates, datos faltantes, suspensiones del mercado) pueden cambiar lo que consideras un resultado aceptable.
Enfoque de verificación y qué preguntar a continuación
Para verificar las afirmaciones de las pruebas prospectivas de manera autónoma, concéntrate en la reproducibilidad:
- Enumera los supuestos utilizados para la ejecución, los costos y los fills, y mantenlos explícitos.
- Mantén la estrategia fija desde la etapa de configuración hasta la etapa de prueba prospectiva, y evita cambios repetidos de reglas basados en el rendimiento prospectivo.
- Documenta las reglas de evaluación (dimensionamiento de posiciones, conteo de operaciones y definiciones de métricas) para que otra persona pueda aplicar el mismo método.
- Repite en múltiples ventanas prospectivas (o en múltiples segmentos fuera de muestra) para comprobar si los resultados son consistentes o aislados.
Si deseas un siguiente paso más profundo, aclara la diferencia entre “una estrategia se comporta aceptablemente durante un período prospectivo” y “el enfoque es robusto en diferentes regímenes de mercado bajo una ejecución realista”. La primera es una verificación parcial; la segunda es mucho más difícil y depende en gran medida de qué tan bien estén representados la ejecución y los costos.