Por qué la prueba rápida va antes de un backtest completo
Supongamos que ha encontrado algunas estrategias que parecen cumplir con sus requisitos personales. Alguien ya las ha backtesteado y ha reportado altos rendimientos históricos. Antes de comprometerse con un backtest completo—y mucho menos de poner capital en trading en vivo—tiene sentido ejecutar algunas pruebas rápidas. Estas pruebas no están diseñadas para demostrar que una estrategia es buena. Su propósito es exponer debilidades obvias de manera temprana, ahorrando tiempo y costo. Un backtest completo es un proyecto serio. Implica obtener datos limpios, escribir o configurar código, verificar errores y probar en múltiples condiciones de mercado. Ese proceso puede llevar días o semanas. Si la estrategia tiene un defecto fatal, todo ese trabajo se desperdicia. Una prueba rápida actúa como un filtro. Plantea preguntas simples: ¿Es la muestra lo suficientemente grande? ¿Sobrevive el resultado a pequeños cambios? ¿Supera a una entrada aleatoria? ¿Son realistas los costos? Si la respuesta a cualquiera de estas es no, la estrategia puede descartarse sin más esfuerzo. La mentalidad detrás de este enfoque es escéptica y basada en evidencia. Un alto rendimiento histórico no es evidencia de una ventaja duradera. Puede ser el resultado de la minería de datos, el sobreajuste o un período de suerte. Muchas estrategias que parecen viables en papel son en realidad descripciones de ruido pasado. Las pruebas rápidas descritas en este artículo son formas prácticas de separar ideas prometedoras de ilusiones. No reemplazan un backtest completo, pero ayudan a decidir dónde invertir su tiempo. Pasar una prueba rápida es un listón bajo, no una garantía. Fallarla, sin embargo, es una señal fuerte para seguir adelante.
¿Qué hace que una estrategia parezca viable en papel?
Las estrategias a menudo se presentan con un conjunto de métricas impresionantes. Un alto rendimiento anual compuesto, una curva de capital suave, una alta tasa de aciertos, un gran factor de beneficio y una pequeña reducción máxima pueden hacer que una estrategia parezca atractiva. Estos números pueden ser genuinos, pero también pueden ser fabricados. Las pruebas rápidas existen porque las métricas superficiales son fáciles de malinterpretar. Una fuente de ilusión es el sobreajuste. Si las reglas de la estrategia se ajustaron muchas veces hasta que los resultados históricos se vieran bien, el rendimiento probablemente sea específico de los datos pasados. Cuantos más parámetros tenga una estrategia, más libertad tiene el desarrollador para ajustar el ruido. Un sistema simple con dos reglas es menos probable que se curve-fit que un sistema complejo con diez reglas. Otra fuente es una muestra pequeña. Una estrategia que hizo veinte operaciones con una tasa de aciertos del 70% no es estadísticamente impresionante; el azar puede producir ese resultado. Una tercera fuente es el sesgo de selección. Si alguien probó cientos de estrategias y solo le mostró la mejor, el rendimiento reportado no tiene sentido. La mejor de muchas estrategias aleatorias siempre se verá bien. Los informes de backtest también a menudo omiten suposiciones importantes. Pueden ignorar comisiones, deslizamiento y liquidez. Pueden usar una ejecución perfecta al precio de cierre. Pueden probar en un período que fue inusualmente favorable. Una estrategia que parece viable en papel puede ser simplemente un reflejo de estas elecciones no declaradas. Las pruebas rápidas están diseñadas para sondear la integridad estructural de la ventaja reclamada, no solo su rendimiento principal.
