El ratio de Sharpe deflactado y el sobreajuste de backtests
Posición en la rutaMódulo 4 de 4 · Tema 2 de 3
4.2 El ratio de Sharpe deflactado y el sobreajuste de backtests
—Puntuación del lab— / 100XP total—Racha—
Un gran ratio de Sharpe, hallado entre cientos
El ratio de Sharpe es el rendimiento excedente medio dividido por su desviación típica. Con datos diarios se anualiza por 252: una media diaria del 0,05 % y una volatilidad diaria del 1 % dan un ratio diario de 0,05 y un ratio anual de 0,05252≈0,79. Como toda estimación, tiene un error estándar, de unos (1+SR2/2)/T para T años de datos: incluso un Sharpe verdadero de 0,8 medido en cuatro años solo se conoce con unos ±0,57, así que dos estrategias con Sharpe 0,8 y 0,3 son estadísticamente difíciles de distinguir.
Pruebe ahora N estrategias. Aunque todas tengan un Sharpe verdadero nulo, las estimaciones se dispersan alrededor de cero con dispersión σSR, y la mejor es positiva y crece con N, unos σSR2lnN. Con una dispersión de 0,5 y 100 pruebas, se espera la mejor cerca de 0,52ln100≈1,52 solo por suerte. Eso es el sobreajuste de backtests. El ratio de Sharpe deflactado (Bailey y López de Prado) corrige el mejor Sharpe observado por el número de pruebas, la asimetría y la curtosis de los rendimientos y la longitud de la muestra. En la versión simplificada de este tema: reste el ruido esperado del mejor de N antes de creerse la cifra.
Números de SharpeMedia diaria del 0,05 % y volatilidad diaria del 1 %: SR=0,05252≈0,794. Con SR=0,8 en T=4 años, SE≈(1+0,32)/4≈0,574. Entre 100 estrategias con dispersión de ruido 0,5, el mejor esperado es 0,52ln100≈1,517. Si su mejor backtest muestra SR=1,5, el valor deflactado es de unos 1,5−1,0=0,5 cuando el ruido esperado del mejor de N es 1,0: la mitad de la cifra publicada se explica por suerte.
Ratio de Sharpe: rendimiento excedente medio sobre volatilidad; anualice datos diarios por 252.
Mejor de N: el ruido solo da un mejor Sharpe cercano a σSR2lnN.
Defensas: registrar cada prueba, guardar un conjunto de reserva final, preferir ideas simples con una razón, deflactar al ganador.
Un backtest es una hipótesis, no un resultadoLa única prueba limpia de una estrategia son datos que no intervinieron en elegirla: un conjunto de reserva final que se mira una vez, o el trading real. Todo lo demás, por muy cuidadosamente validado que esté, ha sido mirado repetidamente por alguien que elige entre ideas. Indique cuántas ideas se probaron, ajuste por ello y desconfíe de cualquier Sharpe superior a 2 con acciones diarias y un historial corto.
Lab: qué se califica
Un ratio de Sharpe anualizado15 pts
El error estándar de un ratio de Sharpe15 pts
El mejor de muchos a partir del ruido15 pts
Qué hacer con el ganador15 pts
Defensas contra el sobreajuste10 pts
Un ratio de Sharpe deflactado15 pts
Por qué el mejor backtest puede ser suerte15 pts
0/ 7 respondidos
1Respuesta numérica15 ptsSin responder
Los rendimientos excedentes diarios tienen media 0,05 % y desviación típica 1 %. ¿Cuál es el ratio de Sharpe anualizado (multiplique el ratio diario por la raíz de 252)? Dé tres decimales.
SR=aceptado: ± 0.005
2Respuesta numérica15 ptsSin responder
Una estrategia tiene un ratio de Sharpe anual de 0,8 medido en T = 4 años. Use SE = raíz((1 + SR^2/2)/T). Dé tres decimales.
SE=aceptado: ± 0.005
3Respuesta numérica15 ptsSin responder
Prueba N = 100 estrategias sin habilidad real y una dispersión de ruido de 0,5 en las estimaciones de Sharpe. Use E[máx] = 0,5 * raíz(2 ln N). Dé el mejor Sharpe esperado con tres decimales.
E[max]=aceptado: ± 0.01
4Elección15 ptsSin responder
La mejor de 200 estrategias probadas en backtest tiene un Sharpe anual de 1,0 en cinco años. ¿Cuál es la respuesta correcta?
5Elección10 ptsSin responder
Seleccione todas las buenas defensas contra el sobreajuste de backtests.
6Respuesta numérica15 ptsSin responder
Su mejor backtest muestra un ratio de Sharpe de 1,5, y el mejor Sharpe esperado del puro ruido con tantas pruebas es 1,0. ¿Cuál es el ratio de Sharpe deflactado, observado menos esperado?
SRd=aceptado: ± 0.001
7Explicar con palabras15 ptsSin responder
En dos frases, explique por qué el mejor ratio de Sharpe entre muchas estrategias probadas está inflado.
Modo matemáticasEntrada por teclado o LaTeXEjercicio 1 de 7 · Ctrl ⏎ para comprobar