Сигнал и шум
@QuantUX
Содержание:
Вступление
Так совпало, что в одной из своих предыдущих статей, я затронул вопрос влияния случайности в контексте прогнозирования погоды (об этом случайном процессе я пишу уже многие годы), игры в покер (потому что сам недавно впервые в жизни начал играть в Техасский холдем, - сразу скажу, что эта игра никак не предназначена для стабильного выигрыша, а в большей степени зависит от удачи), а так же попыток построения алгоритма для игры в шахматы или гоу.
Не удивительно, что, оказывается, подобные примеры (включая неопределенности финансовых рынков) были описаны в книге некоего Нейта Сильвера под названием "Сигнал и шум: почему одни прогнозы сбываются, а другие - нет".
Книга - бестселлер NYT, и так как она затрагивает вопросы прогнозирования случайных процессов, я незамедлительно поспешил в ближайший магазин, и приобрел сие творение.

Сразу отмечу, что по прочтении этого научпопа у меня осталось чувство незавершенности; такое ощущение, что автор абсолютно не раскрыл суть вопроса.
Единственный полезный вывод, который может сделать для себя читатель, - это то, что "Все в мире подвергается случайности, и любой процесс нужно рассматривать с точки зрения его вероятностной оценки". Это буквально все, что можно выудить из "Сигнал и шум".
Murray Cantor, IBM Distinguished Engineer: "Nate Silver's The Signal and Noise is an excellent description of how prediction works. However, he purposefully leaves out the mathematics.
Краткое содержание книги
Ниже, для тех кому интересно, приведу небольшое иллюстрированное содержание "Сигнал и шум":




Про литературу
Да, безусловно, тем кто не привык мыслить категориями случайности и оценки вероятностей, а все еще ошибочно верит в детерминированность нашего бытия, - подобная литература может в доступной форме пролить свет на необходимость вычленения достоверного сигнала из шумных рядов всевозможных данных. Но не более того.
Если говорить в разрезе фондовых рынков, то труд Нейта Сильвера напоминает мне ту огромную массу "книг" по техническому анализу, рыночной психологии, дисциплине и прочему, которые никогда и ни при каких обстоятельствах не приблизят любого инвестора к стабильному росту его P&L.

Ответов на вопрос "как победить рынок" ни одна из подобных популярных, написанных доступным языком книг, никогда не предоставит. Точка. Вы или углубляетесь в математику случайных процессов со всей строгостью академических исследований, или продолжаете влачить свое существование на бирже с показателем Profit Factor <2.
Тоже самое касается и околонаучной литературы:
Можно сколько угодно искать на рынке ситуации с соотношением risk/reward 1:3 или выше, иметь положительное матожидание, проводить успешные curve fitting исторических параметров вашей стратегии, и прочее, - но по прошествию времени в очередной раз признать, что эта динамическая система (рынок) вновь изменила свои свойства и характеристики, а эффективность работы в который раз упала до стат погрешности.
Поэтому, если с годами желание оседлать биржу еще не улетучилось, старайтесь разобраться в разных научных пейперах/фундаментальных трудах, и найти в них ответы на тему того, почему случайные процессы - настолько изменчивая штука.
О вероятностях
Согласитесь, оценка вероятности в покере, прогнозировании терактов, землетрясений и прочем (еще и по Байесу), - это не совсем то (а даже совсем не то) чего все мы ожидаем (особенно если имеем склонность к детерминированности).
Я уже приводил однажды следующий простой пример оценки рыночных вероятностей:

С таким подходом мы заранее обрекаем себя на зависимость от конкретных значений параметров средних и их конкретных отклонений.
Как думаете, что произойдет с подобной оценкой вероятностей при изменении параметров системы? Верно, - результаты окажутся не такими обнадеживающими как мы рассчитывали при бэктестах.
При определенных свойствах одной и той же кривой, конечно, будет наблюдаться обманчивое представление о "правильности" такой оценки, однако стоит этой же кривой немного изменить свои характеристики, как эффективность работы значительно изменится.
Более того, если мы при игре в тот же Техасский холдем оцениваем свою руку в 97% шансов на выигрыш, это еще совсем не означает, что распределение подобных раздач окажется в нашу пользу с положительным матожиданием.
Именно поэтому подобные подходы на дистанции всегда обречены на провал. Насколько я знаю, и в покере, и в трейдинге - стабильный поступательный рост эквити удается лишь 1-5% всех участников. Это и не удивительно - заключаем ли мы сделку исходя из пересечения 21 (7, 14, любого) мувинга (или стохастика, RSI и т.п.), или исходя из трипса на ривере, - все суждения о достоверности оценки вероятностей требуют от нас более глубоких количественных (математических) расчетов.
При чем расчеты эти должны вписываться в динамические модели случайных процессов. Точка.
Заключение
Прогнозирование - это действительно очень трудная работа: мало того, что она требует создания сложного алгоритма всевозможных математических оценок, построения статистических фильтров, моделей, - так еще и сталкивается с необходимостью постоянного пересчета получаемых коэффициентов в виду изменчивости свойств динамических систем.
И если Вы собираетесь добиться успеха в этом деле (в частности при торговле на рынках), то должны осознавать всю степень трудности поставленной перед собой задачи.
А такие нон-фикшн книги, как "Сигнал и шум: почему одни прогнозы сбываются, а другие - нет", - это всего лишь самый первый шаг младенца в беспощадный недетерминированный мир случайных процессов. Однако, далеко не самый важный шаг с практической точки зрения.
Лишь осознание проблемы и успешное решение всех поставленных задач приведет к заветной цели.
О том, какие результаты предоставляют количественные методы биржевой игры, мы как всегда поговорим в следующих статьях. Всем успехов!
P.S. Поздравляю всех с Днем числа Пи!

Единственный канал без воды о трейдинге и количественных методах оценки биржевых данных: применение математики и статистики, количественная оценка вероятностей, построение прогнозных моделей и цифровых фильтров. Только КОНКРЕТНЫЕ вероятностно и статистически взвешенные торговые рекомендации. ПОДПИСЫВАЙСЯ!!! https://t.me/quantux