Respuesta directa
La información sobre las estadísticas de rendimiento se puede verificar (1) aclarando la definición de cada métrica, (2) confirmando los datos y el período de tiempo, (3) reproduciendo los cálculos a partir de los datos brutos cuando estén disponibles, y (4) probando cómo cambian los resultados al incluir costos, comisiones o supuestos alternativos. Los resultados históricos se pueden comprobar para verificar su consistencia interna, pero no establecen automáticamente resultados futuros.
Mecanismo y definición
Las “estadísticas de rendimiento” son números resumidos que intentan describir cómo se desempeñó una actividad durante un período. Los ejemplos incluyen rendimientos a lo largo del tiempo, medidas de volatilidad, medidas de reducción (drawdown) y ratios ajustados al riesgo. La verificación comienza con las definiciones:
- Identifique la fórmula de la métrica (cómo se calcula), no solo la etiqueta.
- Identifique el alcance: el período exacto, la fuente de datos y si los resultados son netos o brutos de costos.
- Identifique la base: si los cálculos utilizan cambios de precios, resultados de operaciones ejecutadas o el patrimonio de la cuenta informado.
La mecánica estable son las partes que no dependen de la trayectoria futura del mercado. Las condiciones variables incluyen el régimen del mercado, la calidad de ejecución, la latencia, los tipos de órdenes y los costos como spreads, comisiones y financiación. Cuando alguien informa estadísticas de rendimiento, está combinando implícitamente tanto la mecánica de cálculo estable como las condiciones variables.
Para verificar, enumere los supuestos que debe aceptar antes de que se pueda confiar en cualquier número, por ejemplo, qué se considera un “mes”, si se incluyen fines de semana o días festivos, y cómo se manejaron los flujos de efectivo (depósitos/retiros).
Evidencia y comprobaciones reproducibles
Se puede realizar un flujo de trabajo de verificación reproducible sin datos en tiempo real:
- Confirme el período de tiempo y la granularidad: registre las fechas de inicio/fin y la frecuencia de muestreo utilizada para los rendimientos (diaria, semanal, mensual).
- Vuelva a calcular un pequeño conjunto de valores: elija una métrica y un segmento corto. Utilice la fórmula indicada y la serie temporal proporcionada, si está disponible.
- Compruebe el manejo neto vs. bruto: verifique si las estadísticas informadas tienen en cuenta los costos. Si el conjunto de datos no incluye costos, repita el cálculo bajo un supuesto de “sin costos” y observe qué cambia cuando se introducen los costos.
- Valide la consistencia interna: asegúrese de que las medidas de reducción (drawdown) se alineen con la trayectoria de rendimiento informada y que las medidas de riesgo derivadas de los rendimientos coincidan con la misma serie de rendimientos.
- Realice pruebas de sensibilidad: cambie solo un supuesto a la vez, como cómo se tratan las zonas horarias o si se incluyen dividendos/financiación, y observe si la clasificación o las conclusiones cambian.
Si los datos brutos no están disponibles, aún puede verificar propiedades limitadas: si los números se calculan a partir de unidades consistentes, si coinciden con el período de tiempo declarado y si múltiples métricas informadas corresponden a la misma serie de rendimientos subyacente.
Limitaciones y riesgos (modos de falla materiales)
Varios modos de falla pueden hacer que las estadísticas de rendimiento sean engañosas incluso cuando los cálculos son aritméticamente correctos:
- Costos faltantes: las estadísticas pueden excluir spreads, comisiones o financiación, sobreestimando el rendimiento neto.
- Períodos de informe inconsistentes: cambiar las fechas de inicio o filtrar períodos difíciles puede inflar los resultados.
- Sesgo de supervivencia y selección: solo se pueden mostrar los operadores exitosos, ocultando cómo se comportan los casos típicos.
- Problemas de ajuste de patrimonio: los depósitos y retiros pueden distorsionar los cálculos de rendimiento si no se tratan correctamente.
- No predictibilidad histórica: las relaciones históricas no garantizan resultados futuros; las condiciones del mercado y la ejecución pueden cambiar.
Debido a que los resultados varían según las condiciones del mercado, los costos, la ejecución y la jurisdicción, trate la verificación como una forma de confirmar la consistencia interna y los supuestos, no como una prueba de rendimiento futuro.
Lista de verificación de verificación y siguiente pregunta a responder
Antes de utilizar cualquier estadística de rendimiento, confirme estos puntos:
- ¿Qué definiciones y fórmulas de métricas exactas se utilizaron?
- ¿Qué datos se utilizaron (serie de rendimientos o serie de patrimonio) y fueron netos de costos?
- ¿Qué período de tiempo y frecuencia de muestreo se utilizaron?
- ¿Puede reproducir al menos una métrica a partir de los mismos datos con supuestos explícitos?
- ¿Qué limitaciones podrían cambiar materialmente la interpretación (costos, sesgo, manejo de flujos de efectivo)?
Una pregunta útil a continuación es: ¿Qué supuestos deben ser ciertos para que las estadísticas informadas sean comparables con otras estadísticas informadas? Si no puede responder eso con precisión, los números pueden no ser significativamente comparables.