Imagina que quieres una respuesta concreta de alguien y le haces la misma pregunta de cien formas distintas hasta que, por fin, te dice lo que querías oír. Luego te quedas solo con esa respuesta y tiras a la basura las otras noventa y nueve. ¿Has descubierto la verdad? No. Has fabricado la conclusión que ya querías.
En estadística hay una frase famosa: si torturas a los datos lo suficiente, confesarán cualquier cosa. Y eso es exactamente lo que mucha gente hace, sin querer, cuando busca estrategias de trading. La alternativa honesta es sencilla de decir y difícil de respetar: declara tu apuesta ANTES de tirar el dado.
Qué es el p-hacking
El p-hacking (también llamado data snooping o el problema de las comparaciones múltiples) consiste en probar tantas cosas sobre los mismos datos que, tarde o temprano, una de ellas parece funcionar por pura casualidad.
Piénsalo así: si lanzas una moneda cinco veces, sacar cinco caras seguidas es raro. Pero si lo intentas mil veces, alguna tanda de cinco caras saldrá seguro. No es magia ni habilidad: es que has hecho muchísimos intentos. Si luego enseñas solo esa tanda y dices "¡mira mi sistema infalible!", estás haciendo trampa contigo mismo.
En trading pasa igual. Si pruebas 1.000 combinaciones de reglas sobre el mismo histórico de precios, algunas darán resultados espectaculares aunque sean puro ruido. No has encontrado un edge; has encontrado una casualidad disfrazada.
Por qué probar sin fin garantiza un falso descubrimiento
Cada vez que pruebas una idea nueva sobre los mismos datos, le das otra oportunidad al azar de engañarte. Cuantas más pruebas, más casi seguro es que algo parezca brillante por casualidad. Por eso "seguir probando hasta que algo funcione" no es investigación: es coleccionar suerte y llamarla talento.
Un edge real es raro, pequeño y difícil de detectar. Si encontrarlo fue facilísimo tras mil intentos, probablemente no sea real.
El problema es que ese descubrimiento falso se ve idéntico a uno verdadero en el papel. La curva de beneficios sube bonita, las métricas brillan... y en cuanto lo pones en el mundo real, se desmorona, porque solo existía en ese trozo concreto de historia.
La solución científica: declara la apuesta primero
La ciencia de verdad funciona al revés que el p-hacking. Un buen investigador escribe su hipótesis antes de mirar el resultado, y luego intenta demostrar que está equivocado. Si la idea sobrevive a ese intento de derribarla, gana algo de credibilidad. Si no sobrevive, se descarta sin drama.
Esto se llama falsación: no buscas confirmar lo que quieres, buscas romperlo. Y solo aceptas lo que aguanta la paliza.
Cómo lo maneja AlphaLab
AlphaLab convierte este principio científico en una regla del propio programa, no en buena voluntad:
- Registra una hipótesis formal ANTES del backtest. Antes de probar nada, debes declarar tu idea: qué crees que pasa, por qué tendría sentido económico, y cómo se mediría. Esa hipótesis queda congelada e inmutable. No puedes cambiarla a posteriori para que cuadre con el resultado que más te gustó.
- Luego intenta FALSARLA, no confirmarla. AlphaLab somete la estrategia a un arsenal de pruebas duras (como el Deflated Sharpe Ratio, PBO, validación walk-forward y simulaciones de Monte Carlo) cuyo objetivo es tumbarla. Solo si sobrevive a esos ataques se considera válida.
- Prefiere rechazar una estrategia buena a aceptar una falsa. El sistema es deliberadamente exigente. Es mejor dejar escapar alguna idea que quizá funcionaba que dar por bueno un espejismo que te costaría dinero real.
Así, AlphaLab te protege de tu peor enemigo en la investigación: tú mismo buscando la respuesta que ya querías oír. Aun así, recuerda que ninguna prueba garantiza beneficios y que el trading siempre conlleva riesgo de pérdida.
Para recordar
- El p-hacking es probar tantas cosas que algo parece funcionar por pura casualidad.
- Probar sin fin sobre los mismos datos casi garantiza un falso descubrimiento.
- La solución científica es declarar la hipótesis ANTES y luego intentar tumbarla (falsación).
- AlphaLab congela la hipótesis antes del backtest y solo acepta estrategias que sobreviven; prefiere rechazar buenas a aceptar falsas.
Si quieres investigar como un científico y no como un adivino, puedes probar AlphaLab gratis durante 14 días (requiere tarjeta, cancelas cuando quieras) en whop.com/alphalab-005b/alphalab-pro.