Existen muchas variables y calculos que describen un sistema. A veces creo que muchas variables, lo importante es saber interpretarlas. No voy a enumerar todas sino comentaré unas cuantas que creo que tienen valor o alguna de ellas falta de.

[Mas:]

a) % de Ganadores: Muchos buscan que su sistema gane la mayor cantidad de veces en %. Sin duda es un dato importante pero debe de ser acompañado del Payout o Paga del sistema. Para calcular un valor esperado la matemática nos enseña que se necesitan tanto las probabilidades como las pagas. Así que deben de ir de la mano. Y aquí hay una trade off claro. Aquellos sistemas con probabilidades bajas de ganancia regularmente vienen acompañados de pagas altas, de allí que sea su valor positivo.

Aqui depende mucho de la personalidad de cada trader y que tipo de trader se es. Los traders intradía la probabilidad de ganancia es alta porque cada trade tiene paga baja. Sin embargo, como transan muchas veces ganan por volumen. Mientras que los traders de largo plazo, pueden aceptar menor cantidad de ganandoras porque aquellos trades ganandores compensan la mayor cantidad de trade perdedores.

b) el Z value: este indicador no lo utiliza ningún softaware. Lo uso yo y es el que uso para discriminar entre sistemas. Supongamos que tengo dos sistemas creados que se adecuan a mi forma de transar (periodicidad, estilo, etc.) La lógica es escoger el que tenga más rentabilidad. Sin embargo, yo discrimino por la variable z value. Esto viene de la teoría estadística, para todo sistema calculo su valor Z, el que tenga el mayor lo prefiero sobre el otro, aunque sea menos rentable.

La razón: creo que muchos sistemas, incluyendo varios que yo cree y que ya no uso, funcionan para una determinada época del mercado y no es algo de largo plazo. En ese sentido son influídos por la aleatoriedad de los ciclos. Por ejemplo, un sistema rentable para la época 2000-2003 tiene características anormales como excesiva volatilidad y un bear market gigantesco. Lo más seguro es que no funcione en épocas de mercado normal. Por otro lado, el período 2004-2006 tiene características históricos de baja volatilidad, si ud. crea un sistema para ésta época no le funcionará para épocas normales. Y es que hemos pasado de un extremo al otro en ésta década. He posteado mucho de eso.
Cómo saber si un sistema es rentable por pura suerte o es realmente algo importante? la respuesta es usar el z value. Valores mayores a 1.68 indican que con un 95% de probabilidad el sistema no es aleatorio sino más bien tiene un valor real positivo. Sin embargo, cuando creo un sistema el primer corte es que sea mayor a 2.05, es decir, con un rango de confianza de 99% puedo decir que el sistema no es aleatorio. Aunque recientemente hice un ranking de mis estrategias y saqué todas las que tuvieran un Z value menor a 3.

Los típicos estudios estadísticos, encuestas, pruebas de drogas y productos farmacéuticos utilizan un intervalo de confianza de 95% (Z de 1.68) pero creo que ese tipo de estudios no sufren los ciclos que si tiene el mercado.

Finalmente, cuando estudie asegurese de separar sus datos en dos. Los datos in-sample son aquellos que usará para construir un sistema. Cuando lo haya hecho pruebelos en la segunda mitad de sus datos que no usó para la construcción del mismo. Si funciona en ésta época y tiene un buen valor de Z. Es que ha encontrado algo. Sino sobre optimizó y torturó los datos para encontrar que explicara el mercado en la época in-sample.

Torturar los datos agregando más variables de decisión es otro tema importante. Entre más agregue pierde grados de libertad y está sobreoptimizando. Esos sistemas tienden a dejar de funcionar en el largo plazo. La busqueda de sistemas es en sí la busqueda de ineficiencias. Creame hay fondos y traders con pisos enteros de servidores estudiando tick por tick los movimientos de muchos mercados. Las ineficiencias son muy efímeras estos días.