Вадим Цудикман - Опционы - Разработка, оптимизация и тестирование торговых стратегий

К сожалению, не существует способа полностью нейтрализовать риск заоптимизированности. Однако частичное решение этой проблемы можно получить, соблюдая следующие общие принципы.

В качестве основного средства борьбы с проблемой заоптимизированности обычно используется так называемый walk-forward анализ. Эта методика, заключающаяся в разделении исторических временных рядов на периоды оптимизации (in-sample) и тестирования (out-of-sample), была описана в разделе 5.4.1. Основная идея заключается в том, что для бэктестинга используются данные, которые не применялись при создании и настройке стратегии. Необходимо, однако, подчеркнуть, что хорошие показатели стратегии, полученные на out-of-sample периоде, не доказывают, что стратегия не подвержена проблеме заоптимизированности. Объяснить это на первый взгляд нелогичное утверждение можно с помощью простых рассуждений. Предположим, что разработчик ставит перед автоматизированной системой следующую задачу: подобрать такие значения для параметров стратегии, что бы ее целевая функция (или функции) имела удовлетворительное значение на in-sample периоде и это значение ухудшалось бы на out-of-sample периоде не более, чем на заданную величину. В главе 2 мы видели, что в процессе оптимизации (на in-sample периоде) может быть получено множество комбинаций параметров с приемлемым значением целевой функции (так называемые зоны оптимальности). Поэтому вполне может оказаться, что хотя бы один вариант из этого множества даст удовлетворительные результаты при out-of-sample тестировании. Это означает, что хорошие результаты walk-forward анализа могут быть результатом простого подбора (заоптимизированности), и скорее всего не сохранятся в будущем при реальной торговле.

При тестировании стратегии на незнакомых для нее отрезках истории необходимо контролировать относительное число сделок. Эмпирическим путем можно определить допустимые пропорции между числом сделок и числом параметров стратегии. Важен принцип, согласно которому, чем больше параметров используется при оптимизации, тем больше должно совершаться сделок, для того что бы можно было с высокой долей вероятности считать, что риск заоптимизированности минимизирован. Это правило является простым вероятностным законом (если считать, что работа стратегии порождает случайную выборку сделок).

Если стратегия неустойчива (небольшие изменения значений параметров существенно снижают показатели стратегии), то с большой долей вероятности можно утверждать, что данная стратегия заоптимизирована (различные аспекты устойчивости были подробно рассмотрены в главе 2). Чтобы убедиться в устойчивости стратегии относительно оптимальных значений параметров, можно провести два параллельных исследования. Первое – рассмотреть изменения показателей стратегии в окрестности оптимального вектора параметров. Второй способ (не заменяющий первый) – исследовать поведение стратегии на слегка модифицированных исторических данных, полученных из исходных с помощью случайных малых возмущений. Устойчивость стратегии к небольшим изменениям значений параметров и временных рядов указывает на небольшую величину риска заоптимизированности.

Оценка прибыльности стратегии является многокритериальной задачей. Не существует единого показателя, с помощью которого можно было бы выразить эффективность стратегии или сравнить ее с другой стратегией. Вместо этого существует целый ряд универсальных показателей, используемых при бэктестинге любых стратегий, независимо от применяемых в торговле инструментов. Хотя эти показатели общеизвестны, их применение и методика расчета для опционных стратегий имеет свою специфику. Помимо универсальных показателей, существуют также показатели, применяемые исключительно для оценки опционных стратегий.

Для расчета показателей эффективности стратегий необходимо дать строгое определение единичного события и элементарного периода времени, для которых производится оценка прибыльности стратегии.

В качестве единичного события может быть принята каждая отдельно взятая сделка по определенному опционному контракту либо совокупность сделок, относящихся к определенному контракту и исполненных в течение одного дня. Кроме того, единичным событием может считаться совокупность всех сделок, исполненных в течение одного дня для построения определенной опционной комбинации. При торговле обычными инструментами в качестве единичного события, как правило, используется каждая отдельно взятая сделка. Выбор единичного события для стратегий, ориентированных на торговлю опционами, зависит от особенностей стратегии. В большинстве случаев при бэктестинге опционных стратегий оценивается не каждая отдельная сделка, а совокупность сделок, относящихся к одной комбинации или к одному базовому активу.