1nTest · бэктестер стратегий и конструктор торговых ботов

Сколько сделок нужно для надёжного бэктеста?

Намного больше, чем есть в большинстве бэктестов. При разбросе результатов, типичном для стратегии 1:3, стратегия вовсе без преимущества может случайно показать до 0,32 R на сделку за 100 сделок, а чтобы отличить от нуля преимущество 0,10 R на сделку, нужно около 1 137 сделок. В нашей сетке из 100 бэктестов медианный имел 26 сделок, и от случайности отличались 0 из 18 прибыльных.

Почему важно количество сделок

Каждая сделка стратегии 1:3 заканчивается примерно на минус одном R или примерно на плюс трёх R, где один R — сумма риска. Результатам, которые так прыгают, нужно много сделок, прежде чем их среднее устоится. В нашем пуле из 6 722 сделок трёх шаблонов 1:3 стандартное отклонение одной сделки — 1,72 R. Шум в среднем результате уменьшается лишь как квадратный корень из количества сделок: вчетверо больше сделок уменьшают его вдвое, в сто раз больше — вдесятеро.

Поэтому короткий бэктест с впечатляющим результатом мало что значит. Среднее нескольких десятков сделок может стоять далеко от настоящего преимущества стратегии в любую сторону, а трейдер, который выбирает самый красивый короткий бэктест, в основном выбирает самый везучий.

Как далеко одна случайность заводит стратегию без преимущества

Мы взяли реальные сделки трёх шаблонов 1:3, вычли их среднее, чтобы преимущество стало ровно нулевым, и 2 000 раз вытянули случайные бэктесты заданной длины. В таблице — результат на сделку, которого достигает или который превышает лишь один бэктест без преимущества из сорока.

30
Результат на сделку только благодаря случаю0,64 R
100
Результат на сделку только благодаря случаю0,32 R
300
Результат на сделку только благодаря случаю0,20 R
1 000
Результат на сделку только благодаря случаю0,10 R

Бэктест на 30 сделок, заработавший 0,64 R на сделку, почти ничего не говорит: стратегия без преимущества делает такое случайно. На 1 000 сделках полоса сужается до 0,10 R, и это всё ещё больше стоимости типичной сделки.

Сколько сделок нужно, чтобы увидеть преимущество

Чтобы отличить преимущество от нуля с уверенностью 95%, среднее должно стоять примерно в двух стандартных ошибках от нуля. При измеренном разбросе на сделку преимущество 0,20 R на сделку требует около 285 сделок, а преимущество 0,10 R — около 1 137. Вдвое меньшее преимущество, которое хотите увидеть, вчетверо увеличивает нужное количество сделок. Стратегия, торгующая несколько раз в месяц на одном активе, не достигает таких чисел и за десять лет.

Что это значит для сетки бэктестов

Наша сетка содержит 100 бэктестов: пять шаблонов стратегий, каждый прогнан на отдельных активах за четыре года. Медианный бэктест имел 26 сделок, а 81 имели меньше 100. Из 56 бэктестов с не менее чем 20 сделками после издержек прибыльными закончили 18, и проверку против нуля для собственного количества сделок прошли 0 из них. Одна случайность дала бы около 1,40 из 56.

Иначе говоря, каждый прибыльный результат сетки совместим с полным отсутствием преимущества. Это не доказывает, что преимущества у стратегий нет; это значит, что бэктесты слишком короткие, чтобы его показать, — обычная ситуация для бэктестов на одном активе сетапов, которые торгуют несколько раз в месяц.

Практические правила

  • Смотрите на количество сделок раньше, чем на результат.
  • Сравнивайте результат на сделку с полосой без преимущества для этого количества сделок; внутри полосы это не доказательство.
  • Чтобы получить больше сделок, тестируйте те же правила на большем количестве активов или на более длинном периоде, а не ослабляйте правила.
  • Помните: проверка многих вариантов повышает шанс, что один из них выйдет за полосу случайно.

Как измеряли

  • Бэктесты движка на прод-сервере, пять шаблонов стратегий на отдельных активах, период 01.01.2022 – 01.01.2026, фиксированный риск 1% на сделку, комиссия и своп одного брокера с комиссией, входы и выходы по ценам bid и ask.
  • Полоса без преимущества: чистые результаты в R всех закрытых сделок трёх шаблонов с целью 1:3, центрированные на ноль; 2 000 случайных бэктестов каждой длины, выборка с возвращением; показан уровень, которого достигает или который превышает один бэктест из сорока.
  • Нужно сделок = (две стандартные ошибки × стандартное отклонение сделки ÷ преимущество)², с округлением вверх. Проверка прибыльного бэктеста: его средний чистый результат на сделку, делённый на собственную стандартную ошибку, против того же порога в две ошибки.

Бэктесты посчитаны 30 октября 2026 г.

Вопросы

Достаточно ли 100 сделок для бэктеста?

Достаточно, чтобы увидеть, что стратегия грубо сломана, но не чтобы подтвердить преимущество. Стратегия без преимущества с целью 1:3 может показать до 0,32 R на сделку за такое количество сделок.

Нужно ли меньше сделок стратегии с более высоким винрейтом?

Да. Когда цель близка к стопу, результаты сделок разбросаны меньше, и среднее устанавливается быстрее. Но и преимущество на сделку обычно меньше, а это действует в обратную сторону.

Можно ли объединить несколько активов, чтобы было больше сделок?

Да, если правила те же. Помните, что активы, которые движутся вместе, например несколько долларовых пар, добавляют меньше независимых сделок, чем подсказывает их количество.

Для обучения, не инвестиционный совет. Прошлые результаты, в том числе бэктесты, не гарантируют будущих.

← Все статьи