Skip to content

Backtest, conclusiones y las preguntas que conviene hacerse al leer artículos ​

Al terminar esta sección, habrás leído el artículo completo. Podrás evaluar su backtest, sabrás cuál es el siguiente paso según los autores, y te llevarás una lista de preguntas que podrás usar en futuras lecturas de artículos similares.

4.3 Backtest: cómo está diseñado ​

  • Mercado y período: mercado A, un año (de 2025, mes 5, a 2026, mes 4)
  • Señal: clasificar los activos según el rendimiento final previsto
  • Cartera: solo posiciones largas, comprando las N primeras del ranking
  • Cómo se fijan los parámetros: el número de posiciones N y la frecuencia de rebalanceo se eligen en el período de validación y luego se congelan, sin ajustarse en el período de prueba
  • Imposibilidad de comprar en el límite al alza: se omiten las órdenes de compra que cerrarían en el límite al alza
  • Costes: 12.5 puntos básicos al comprar, 22.5 puntos básicos al vender (comisión 2.5, impuesto de timbre 10, slippage de 10 por lado)

Resultados ​

Rendimiento neto anualizado en el período de prueba, después de descontar los costes:

GranularidadRendimiento neto anualizadoRatio de Sharpe
velas de 5 minutos+65.2%1.70
velas de 2 horas+64.4%2.46

En la figura 4, la curva de valor neto de KiT acaba por encima de la cartera equilibrada del mismo universo de acciones, por encima de la mediana de comprar y mantener una sola acción, y también supera al CSI 300 y al CSI 500.

El ratio de Sharpe indica "cuánto rendimiento excedente se obtiene por cada unidad de volatilidad asumida". Con el mismo rendimiento anualizado, las velas de 2 horas tienen un Sharpe más alto, lo que significa que su curva de valor neto es más estable.

Cómo evaluar el backtest ​

La palabra que el propio artículo usa en sus conclusiones es "backtests teóricos" (theoretical backtests), para ilustrar que la predicción "tiene significado económico". Al leerlo, puedes comparar con las reglas del script de backtest de código abierto de la lección Evaluación y backtest y hacerte algunas preguntas:

  • Liquidez y coste de impacto: el script de código abierto indica explícitamente que no considera lotes de 100 acciones ni el impacto de órdenes grandes. Con volúmenes de capital elevados, puede que no se pueda comprar tanto de las acciones pequeñas mejor clasificadas.
  • Supuestos de coste: ¿es suficiente un slippage de 10 puntos básicos por lado con rebalanceos de alta frecuencia (velas de 5 minutos)?
  • ¿Es suficiente un año?: ¿el entorno de mercado de ese año fue atípico?
  • Universo de acciones: qué activos se eligen para el universo afecta por sí mismo al resultado.

Esto no significa que el backtest esté mal, sino que son límites que tiene cualquier backtest. La evidencia principal del artículo es el RankIC de las tablas 1 y 2; el backtest es una ilustración complementaria.

Sección 5: conclusiones y siguientes pasos ​

Los autores resumen tres puntos: modelar trayectorias de velas con un Transformer de difusión basado en flow matching, una representación de cinco dimensiones que preserva estrictamente la geometría de las velas, y una inyección de condiciones diseñada según la naturaleza de la señal.

Proponen dos direcciones:

  1. Entradas de mayor dimensión: como no necesita un tokenizador discreto, KiT puede incorporar directamente datos de más dimensiones; los ejemplos que da el artículo son el libro de órdenes Level-3 y los factores alpha.
  2. Ajuste fino para tareas posteriores: como modelo de base, el ajuste fino para tareas concretas es una dirección que vale la pena explorar. Ya probaste la forma más sencilla en la sección Ajuste fino.

Una lista de preguntas de uso general ​

Al leer cualquier artículo de "predicción", puedes hacerte estas preguntas. Practica con KiT:

Buscarpregunta

Toca uno para ver.

Has terminado la lectura ​

Vuelve a mirar la tabla de la primera sección: tres dificultades, tres respuestas; ahora puedes explicar, para cada casilla, la fórmula, la ubicación en el código y las cifras de ablation.

Pon a prueba tus conocimientosEn el paper de KiT, ¿qué tabla es la evidencia más directa de que “la representación de cinco dimensiones es útil”?

Compruébalo ​

  • Puedo explicar el diseño del backtest y las dos parejas de cifras de rendimiento anualizado y Sharpe
  • Puedo enumerar al menos tres factores de la realidad que el backtest no cubre
  • He repasado KiT con la lista de preguntas

Vuelve a la página de inicio del curso, o ve a Errores y preguntas frecuentes.

gaodong.aiAboutPrivacyContact

Independent tutorials, not affiliated with any product mentioned. Product names and trademarks belong to their owners. Check official pages for prices and policies.