Постов с тегом "Прогнозирование": 82

Прогнозирование


Думай медленно — предсказывай точно. Часть 3. Искусство и наука предвидеть опасность. Филип Тетлок

Думай медленно — предсказывай точно. Искусство и наука предвидеть опасность. ФилипТетлок, ДэнГарднер

Электронная книга https://t.me/kudaidem/1808

Часть 1 https://smart-lab.ru/blog/673858.php Часть 2 https://smart-lab.ru/blog/674129.php



( Читать дальше )

Думай медленно — предсказывай точно. Часть 2. Искусство и наука предвидеть опасность. ФилипТетлок, ДэнГарднер

Думай медленно — предсказывай точно. Искусство и наука предвидеть опасность. ФилипТетлок, ДэнГарднер

 Электронная книга https://t.me/kudaidem/1808
Часть 1 https://smart-lab.ru/blog/673858.php



( Читать дальше )

Думай медленно — предсказывай точно. Искусство и наука предвидеть опасность.

Думай медленно — предсказывай точно. Искусство и наука предвидеть опасность. ФилипТетлок, ДэнГарднер

Электронная книга https://t.me/kudaidem/1808



( Читать дальше )

Как работает Machine Learning.

    • 01 января 2021, 22:30
    • |
    • 3Qu
  • Еще
Различных методов Machine Learning очень много, но все они работают примерно одинаково. Это и нейросети, и леса-деревья, и Байесовские классификаторы, и многое другое. Найти и прочитать как ходят-как сдают, как обучают и проверяют правильность обучения — не проблема.
Но пользователи часто забывают одно правило: мусор на входе — мусор на выходе. Для обучения недостаточно сделать обучающую последовательность с правильными ответами — результатом будут хорошие результаты на обучающей последовательности, и никакие на реальных данных.
Таким образом, мы должны четко себе представлять, чему именно мы учим, и это вовсе не правильные ответы, а правильные ответы на правильные вопросы. Если не хотите получать дурацкие ответы — не задавайте дурацкие вопросы.

Т.е., для обучения МЛ нам нужно сформулировать адекватные вопросы и ответы на них. Только в этом случае метод МЛ реально обучится и будет реально работать не только на обучающейся последовательности.
Вопрос ещё в том, что обычно мы не знаем и правильных вопросов.
Но это дело поправимое  Мы формируем какую либо гипотезу, например — три солдата показывают нам то-то и то-то. Мы как-то ищем этих трёх солдат на истории, там же находим ответы на них, обучаем на этом метод МЛ, проверяем на независимом отрезке истории, и выясняем — действительно ли эти 3 солдаты так важны для нашей торговли, или ну их на фиг.
Понятно, что и при обучении и на реале нам надо задавать МЛ только значимые вопросы, а именно, показывать МЛ не все данные подряд, а только наших трёх солдат.
Ну, а если солдаты воевать не желают, проверяем значимость вороны на шесте.) И так, пока действительно не найдем что-то стоящее.

Классификация сделок в торговых системах 2 (пример).

    • 17 декабря 2020, 21:04
    • |
    • 3Qu
  • Еще
Был у меня топик  "Классификация сделок в торговых системах" — в общем, не зашел. Но некоторые плюсанули, вот, для некоторых и напишу пример конкретного применения. Рекомендую прочитать предыдущий, иначе можете не понять этот топик.
К счастью, у меня оказался рояль в кустах — вялотекущий проект системы прогнозирования котировок, вычисляющей прогноз изменения цены на интервале Т по значению и состоянию цены в момент t — dС(t+Т). Ну, и общая формула прогнозирующей системы:
                              dC(t+T) = C(t+T) — C(t),
где C(t) — цена в момент t.
График теста системы я показывал в комментариях к предыдущему топику вот он:

Классификация сделок в торговых системах 2 (пример).
По Х (Predict)  — прогноз изменение цены, по У (Real) — реальное изменение цены через время Т. Не обращайте внимание на значения осей, это не сами изменения цены, это нормированные к диапазону системы значения изменений цен.

( Читать дальше )

Эти предсказуемые "черные лебеди".

Популярность книги Талеба, с ярким описанием проблем прогнозирования кризисов, нередко сбивает с толка интересующихся, лишая стимулов углубленного изучения рынков/экономики. Всеобщая апатия побудила написать этот текст.

Трудности, непреодолимые для далеких от реального рынка людей, включая экономистов, вовсе не означают, что толковые трейдеры, инвесторы, бай-сайд аналитики или любители самостоятельно мыслить не могут успешно предсказать «черный лебедь».

Пример 1, мартовское падение 2020 года.

С конца весны прошлого года практически все мировые СМИ, уделяющие внимание биржевой тематике, сообщали об усиливающейся инверсии доходностей дальних и ближних американских бумаг. Это хорошо известное, неоднократно описанное явление с фундаментальной основой (не путать с «фундаменталом» из книжек для инвесторов), часто предваряющее снижение рынков и торможение экономики. Однако пользоваться такой закономерностью непросто, поскольку скорость изменений невелика и до значительной реакции бирж обычно проходит от полугода до двух лет. На известных трейдерских ресурсах тему обсуждали неоднократно, причем с идентичными выводами: для определения времени входа нужны дополнительные факторы. Например, полезна информация о поведении других инструментов хеджирования, типа золота, мощный рост начался прошлым летом.

( Читать дальше )

R, Matlab, Julia, Python, Eviews, Stata, SAS, SQL - что выбрать?

Дорогие друзья!

может быть среди смартлабовцев найдутся те, кто пользуется и разбирается в этом вопросе.

Какие из перечисленных средств (а может и что-то другое) посоветуете для анализа данных и прогнозирования?

Чем они друг от друга отличаются, какой для чего лучше использовать, какой проще в использовании? 

R, Matlab, Julia, Python, Eviews, Stata, SAS, SQL

Спасибо!


15 качеств отличных прогнозистов. Сколько из них есть у вас?


Как повысить точность предсказаний финансовых рынков?
Это уже третий пост. Первые два найдете тут: https://smart-lab.ru/books/superforecasting/ 

15 качеств хороших прогнозистов:
👉Осторожны
👉Скромны (не будут писать, что «это лучшая в России аналитика» ©😁
👉Нет детерминизма / судьбы (понимают, что ничто не предопределено)
👉Не предвзяты
👉Умны и эрудированы
👉Склонны к рефлексии
👉Обладают математическими способностями
👉Прагматичны (не привязаны к идеям, взглядам и тп)
👉Аналитический склад ума
👉«Зрение стрекозы» (Способность разглядеть проблему со всех сторон)
👉Понимают вероятностный анализ
👉Вдумчиво обновляют суждения
👉Хорошие интуитивные психологи
👉«Мышление роста» (Вера в самосовершенствование)
👉Выдержка, терпение

Получилось всего 15 черт-факторов примерно. К слову сказать, естественно я отмеряю это всё на себя, и у меня получилось, что по-меньшей мере 12 черт мне точно свойственны (в остальных 3 просто не уверен, лучше со стороны судить). Я сам не считаю себя удачным прогнозистом, я просто читаю и пытаюсь проанализировать прочитанное. Делюсь тем, что получилось.

❓А у вас сколько факторов совпало?

Другие интересные моменты последней трети книги:

( Читать дальше )

Как повысить точность предсказаний финансовых рынков?

Вчера я писал первую часть про книгу Филипа Тетлока «SUPERFORECASTING». Но там так много идей, что за один присест не успел осилить.
Как повысить точность предсказаний финансовых рынков?
Итак, вот методика суперпрогнозирования:

1️⃣Расчлени вопрос на компоненты — более простые вопросы
2️⃣Отдели известное от неизвестного
3️⃣Подвергнуть каждое допущение тщательному исследованию
4️⃣Взглянуть на вопрос снаружи и в сравнении
5️⃣Переключиться на взгляд изнутри
6️⃣Обновляй прогноз, когда выходят новые факты (см. ниже Теорему Байеса)


👉Чтобы хорошо прогнозировать, надо саморавиваться.
👉Чтобы развиваться, надо делать обратную связь
👉Обратная связь возможна только если вы четко однозначно формулируете прогноз и используете четкие даты, чтобы не подменить прогноз задним числом (распространенная ловушка)

👉Можно повысить точность, если после прогноза предположить, что он неверен, и попытаться подумать о причинах и снова сформулировать новый прогноз. Точность повышается почти также, как если 2 суперпрогнозист подумал над проблемой и дал прогноз.
👉Значит при прогнозировании важно уметь отстраняться от самих себя
👉Сделав прогноз, ищите доказательства противоположного
👉«зрение стрекозы»: Широкий взгляд на проблему формируется через синтез: взгляд снаружи, взгляд изнутри, альтернативный взгляд.
👉Ключ к успеху: Необходимо подвергать сомнению базовые эмоционально заряженные оценки.



( Читать дальше )

....все тэги
UPDONW
Новый дизайн