Книга Р. Пардо «Разработка, тестирование и оптимизация торговых систем» – это классика мирового трейдинга: это путь от неуверенности, бессистемности, расшатанных нервов, изматывающих стрессов к осмысленному и прибыльному трейдингу, опирающемуся на оружие, которым оснащает себя каждый трейдер – Успешную Торговую Систему.

Любой метод поиска должен иметь некоторый способ определения того, является ли торговая модель «хорошей», чтобы принять ее или отвергнуть. Хорошей торговой моделью может быть модель с максимальной прибылью, с максимальной прибылью на сделку, с максимальным процентом выигрышей или с комбинацией трех этих показателей. Такой метод определения качества торговой модели называется методом оценки. В статистике он также известен как целевая функция. Хорошая торговая модель зависит отнюдь не только от чистой прибыли. На самом деле, хорошая модель — это комплекс показателей.

При использовании методов поиска очень важным оказывается тип оценивания. Поскольку методы поиска, по определению, в процессе поиска лучшего пути постоянно принимают торговые модели или отвергают их, крайне важно применять правильный метод оценивания: именно этот метод обладает наибольшей предсказательной силой и будет успешным в реальном трейдинге. При использовании неправильного или неподходящего типа оценивания можно пропустить хорошую модель; что еще хуже, можно выбрать для торговли в реальном времени плохую модель.

При выборе типа оценки лучше всего руководствоваться принципом — «Будь внимателен, когда что-то просишь, потому что можешь это получить». Например, если критерием отбора является максимальная чистая прибыль, то будет отобрана модель, приносящая максимальную прибыль. В конечном счете, для трейдера важна именно прибыль. Тогда почему такая модель может быть плохой? Потому что одна лишь максимальная прибыль не является адекватным показателем качества торговой модели. Например, 60% этой максимальной чистой прибыли могли быть получены моделью на одной крупной сделке, которая (будем надеяться) может никогда больше не повториться, такой как короткая продажа во время Краха фондового рынка в октябре 1987 года. Или большая часть этой прибыли могла быть получена в первой половине тестового периода и могла маскировать катастрофические убытки во второй, более актуальной половине. Показатель одной только чистой прибыли игнорирует очень важное требование равномерности распределения прибылей.

Более того, поиск наибольшей чистой прибыли полностью игнорирует вопрос риска. Стратегия с максимальной чистой прибылью может также иметь очень большое и неприемлемое проседание счета. Другой ее недостаток в том, что лучшая прибыль могла быть получена посредством очень небольшого числа сделок. Модель с таким набором сделок имеет ограниченную статистическую валидность.

Метод оценки исключительно по чистой прибыли игнорирует многие важные характеристики, которые необходимо учитывать при выборе топ-модели, обладающей наибольшей предсказательной способностью в отношении будущей реальной прибыли. Подчеркнем некоторые из ключевых характеристик настоящей топ-модели:

• Равномерное распределение сделок.
• Равномерное распределение прибыли.
• Приемлемый риск.
• Статистическая валидность.

Тип оценки должен быть разработан для отбора наиболее устойчивой и стабильной торговой модели, которая не обязательно будет самой прибыльной. Мы выбрали в качестве типа оценивания чистую прибыль, чтобы осветить некоторые факторы, влияющие на устойчивость модели.

Неправильный тип оценки может фактически и неумышленно привести в процессе оптимизации к подстройке. Метод оценивания, отбирающий модели не по их устойчивости, ставит под сомнение весь процесс тестирования. При реальном трейдинге устойчивая торговая модель скорее всего принесет прибыль, а неустойчивая модель — убытки.