Как честно протестировать паттерн и избежать самообмана?Бэктест идеи: как проверить паттерн на истории и не обмануть самого себя
Есть старая трейдерская мудрость: кто хочет видеть сигнал – тот его найдёт на любом графике. Особенно на истории.
Сегодня разберём, как тестировать паттерн по-честному, а не «под себя».
Тема для новичков болезненная: нашёл «грааль», прогнал по истории, всё идеально… закинул деньги – и рынок сразу превращается в другого человека. Было такое?
Разберём по шагам.
1. Начинай с чёткого описания паттерна
Не "ну тут примерно разворот", а конкретно, как для робота:
- что за вход:
- например: бычья свеча после трёх медвежьих у уровня поддержки
- где уровень:
- последний локальный минимум за N свечей
- какие условия:
- тренд вверх: цена выше 200 SMA
- стоп:
- 0,5% ниже минимума сигнальной свечи
- тейк:
- в 2 раза больше стопа
Запиши это текстом, как техническое задание.
Если формулировка размытая – бэктест сразу мёртвый, ты всё равно будешь «подкрашивать» историю, как школьник дневник.
2. Тестируй свеча за свечой, как будто живёшь в прошлом
Самый честный вариант для начинающего – ручной бэктест.
Алгоритм:
1) Взял инструмент и таймфрейм
2) Отмотал график назад
3) Листаешь по одной свече вперёд
4) Находишь паттерн по своим правилам
5) Ставишь виртуальный вход, стоп, тейк
6) Листаешь дальше, смотришь, чем закончилась сделка
7) Записываешь результат в табличку
Тут главное – смотреть только то, что было ДО входа.
Как только ты видишь будущее движение и потом начинаешь думать: «ну да, тут бы я не вошёл...» – тест сломан.
3. Не трогай параметры после каждого «слива»
Классический самообман: делаешь 10 сделок, 3 подряд в минус, и мозг сразу:
«А давай-ка стоп чуть поближе, а фильтр ещё один, а ТФ поменяем…»
И вот ты уже не тестируешь идею, а шьёшь под себя костюм:
в истории сидит идеально, в реале – разваливается.
Сделай так:
- заранее реши:
- сколько сделок протестируешь ДО любых изменений (например, минимум 50)
- только после серии из 50+ сделок можно:
- корректировать параметры
- убирать/добавлять фильтры
- а после изменений – снова новая серия теста, с нуля
4. Делай честное разделение: одна часть для поиска, другая для проверки
Фишка, про которую почти все забывают.
- Возьми большую историю и раздели её:
- первая часть – «тренировочная» (на ней придумываешь и крутишь идею)
- вторая часть – «экзамен» (на ней ничего не меняешь, просто проверяешь)
Как это может выглядеть:
- например, у тебя данные с 2017 по 2024
- 2017–2021 – придумываешь, крутишь, дорабатываешь
- 2022–2024 – холодный тест: НИЧЕГО не меняя в правилах
Если на «экзамене» система развалилась, а на тренировке была супер – поздравляю, ты переобучился. Паттерн работал только на том участке, где ты его подгонял.
5. Считай не только процент прибыльных сделок
Новички любят фразу «80% прибыльных сделок». Звучит сексуально, но может быть обманкой.
Смотри на:
- отношение средний профит / средний убыток
- максимальную просадку
- сколько подряд было минусовых сделок
- общий результат по серии (в R или %)
Если:
- у тебя 75% прибыльных сделок
- но средний убыток в 3 раза больше среднего профита
то это не паттерн, а медленная казнь.
6. Бэктест делай минимум на 100+ сделок
Да, это нудно. Да, это долго. Да, лучше, чем вносить деньги под иллюзии.
- до 30 сделок – вообще ни о чём, это просто «пощупал идею»
- 50+ – уже что‑то видно
- 100+ – появляется статистический смысл
А если паттерн даёт 3 сигнала в год – это не паттерн для новичка, это экспедиция в Антарктиду. Там годами можно ждать погоду.
7. Не подглядывай на инструмент, под который ты «тащишь» идею
Есть тонкий момент: ты смотришь на историю, видишь красивый тренд и думаешь:
«О, на этом инструменте моя система просто ракета».
Проблема в том, что ты уже видел общую картинку и подсознательно будешь подстраивать паттерн именно под эту форму.
Честный подход:
- выбираешь идею
- выбираешь правила
- а уже потом:
- тестируешь на нескольких разных активах
- на разных фазах рынка: тренд, боковик, жесть
8. О спорном: прошлое не гарантирует будущее… но без прошлого вообще нечего ловить
Возможно, я ошибаюсь, но вся фраза «прошлые результаты не гарантируют будущие» в головах новичков часто превращается в: «ну раз история ничего не гарантирует, можно и не тестировать, и так сойдёт».
По факту:
- да, история не даёт гарантий
- но если даже на истории идея не живёт – в будущем она точно не воскреснет
Бэктест – это не предсказание, а фильтр мусора.
Твоя задача – не найти идеальный паттерн, а отсеять заведомо мёртвые варианты.
9. Финальный чек-лист честного бэктеста
Перед тем как верить в паттерн, спроси себя:
- правила входа и выхода у меня чёткие?
- я тестировал свеча за свечой, не глядя вперёд?
- я не менял правила каждые 5–10 сделок?
- я разделял историю на «настройку» и «экзамен»?
- у меня есть хотя бы 100 сделок в выборке?
- видел ли я, как паттерн ведёт себя в боковике и в тренде?
- комфортна ли мне его просадка психологически?
Если на половину вопросов ответ «нет» – это не система, это влюблённость в идею.
Бэктест – это как первое свидание с рынком:
можно надушиться, красиво говорить и фотошопить портфолио, но рано или поздно правда вылезет. Так что лучше сразу знакомиться без фильтров.
Обучение
