Автоматический экспорт данных с Финама перестал работать. Кто-то уже нашел решение этой проблемы?

Интересует именно способ как-то похачить сайт Финама, iss moex, yahoo.finance, etc. не предлагать

finam экспорт данных

MadQuant

не определен

794

17 258

с 24 ноября 2016

39 Комментариев

Я не пью!
24 апреля 2020, 03:00
Вообще существует, из питона можно selenium'ом совершать все нужные действия в невидимомом хроме. Работы (писать код) на 15 минут.
+2
- Max Skinner
  24 апреля 2020, 03:42
  Я не пью!, питон нужно знать…
  0
- Artemunak
  24 апреля 2020, 10:23
  если кто найдёт способ в личку скиньте
  +1
  - Friend
    24 апреля 2020, 10:59
    Artemunak, Скинут тебе, скинь мне :)
    0
    - Artemunak
      29 апреля 2020, 12:49
      Frend,
      качай пока не отключили
      smart-lab.ru/blog/617859.php
      0
      - Friend
        29 апреля 2020, 13:32
        Artemunak, Спасибо
        0
- broker25
  24 апреля 2020, 11:12
  Я не пью!, 15 мин? Недавно полтора часа возился только чтобы подключить селениум к браузеру. Там глючные драйвера
  0
  - Я не пью!
    24 апреля 2020, 11:13
    А что там подключать? У меня он сразу цепляет хром
    0
    - Я не пью!
      24 апреля 2020, 11:53
      Я не пью!,… вроде работает, но это тот еще костыль.
      0
- Beach Bunny
  24 апреля 2020, 11:55
  Я не пью!,
  проще расширение для Chrome или Firefox написать на JS чем возится с Selenium, тем более что через Selenium что через расширение делать нужно будет одно и тоже, но расширение проще отлаживать и ничего дополнительно ставить не нужно.
  0
Я не пью!
24 апреля 2020, 03:17
Но конечно было бы правильнее понять как вычисляется token в их новых ссылках на котировки…
+1
chizhan
24 апреля 2020, 03:27
Ну видимо теперь только ручками. https://www.finam.ru/profile/moex-akcii/gazprom/export/

Там же указано "Автоматический импорт котировок с сайта запрещен"
0
- Гусев Владимир Петрович
  24 апреля 2020, 07:14
  chizhan, они гугловую рекаптчу поставили для получения токена.
  0
birga
24 апреля 2020, 07:04
Пора привыкать к новой реальности. Из Финама пошли МИНУСОВЫЕ ПОТОКИ информации. И пошли ведь… Пока -37,63. Что будет дальше-пока туманчик. Где-то в регламенте Финама есть видно такой п., пп, главы, части.., раздела1.
Объяснить это на самом деле очеееень легко. Ну смотрите Финам ДОПЛАТИТ ВАМ за то, что ВЫ сумеете прочитать. Такой вот опциончик. Все просто препросто: когда t=36.7 платить никому не надо, а вот когда t= -37.6 ну тогда опциончик однако.
Добро пожаловать в новый мир обнулений и не только.
0
Lexuz77
24 апреля 2020, 07:13
А чем iss moex не угодил? Мы пока что на него перешли…
0
- MKS
  24 апреля 2020, 08:14
  Lexuz77,
  1. там тиковые данные только за последнюю сессию
  2. там только текущие инструменты мосбиржи
  0
- Носорог
  24 апреля 2020, 08:28
  Lexuz77, и если не ошибаюсь — 3т.р. в месяц.
  И не радуйтесь что можно качать бесплатно. Я это проходил, пока не сравнил данные с другими. Там специально выставленные искажения. В принципе сначала даже написал шумодав (ибо искусственные шипы и в цене и в объёме космические), но потом решил что это колхозный путь
  +1
Иван Файртрейдов
24 апреля 2020, 08:11
forum.finam.ru/posts/t109844-Avtomaticheskii-ehksport-dannykh
люди изливают свое негодование,
вообще крайне тупая политика, сделали бы сервис получали бы копеечку, небольшую бы но получали, скажем 30 баксов в месяц, тыща человек — 30 штук
+1
- ch5oh
  24 апреля 2020, 12:32
  Иван Файртрейдов, если готовы платить, то платная подписка для скачивания данных есть на МФД. Неужели на финаме свет клином сошелся?
  0
  - Иван Файртрейдов
    25 апреля 2020, 08:30
    ch5oh, там тики один день минутки год, библа голимы dll — под линуксом не пашет
    0
    - ch5oh
      25 апреля 2020, 14:00
      Иван Файртрейдов, странно. Они даже бесплатно дают тики скачать за большой период времени. Прямо с сайта.
      0
      - Иван Файртрейдов
        25 апреля 2020, 15:39
        ch5oh, хм, правда, надо приблуду сделать чтоб качать из программы тогда
        0
MKS
24 апреля 2020, 08:13
Вот был уже топик здесь:
smart-lab.ru/blog/614712.php

По теме — selenium не обязательно на питоне. Можно на разных языках использовать.
Пока это видится единственным вариантом.
0
Replikant_mih
24 апреля 2020, 09:20
ыы, а я думаю, че это моя качалка не запустилась).
0
SergeyJu
24 апреля 2020, 10:43
Можно писать тиковый поток в БД и считать самостоятельно.
0
- MadQuant
  24 апреля 2020, 11:03
  SergeyJu, да мне нужны дневные бары, раньше я пару раз в месяц свою шарманку запускал, насчитывал по ним веса — и ребалансился. Как-то ради них постоянно держать на компе какие-то процессы и за всем этим следить — очень неохота…
  0
  - Михаил
    24 апреля 2020, 12:06
    MadQuant, а чем вам дневные бары с iss не подходят?
    0
    - MadQuant
      24 апреля 2020, 13:11
      Михаил, может, у меня руки кривые, но я не смог заставить это нормально работать, особенно если котиры с 2000-го года нужны. То есть выгрузить за последний месяц — вроде без проблем, за 20 лет — это не работает.
      0
      - ch5oh
        25 апреля 2020, 14:00
        MadQuant, скорее всего на сервере ограничение стоит по объёму одного запроса. Попробуйте кусочками выкачивать.
        0
  - ch5oh
    24 апреля 2020, 12:33
    MadQuant, с тиками сложнее, но бары от минуток и выше обычно можно через апи брокера дёрнуть. АйтиИнвест какое-то время назад снял ограничение на скачивание баров М1.
    0
broker25
24 апреля 2020, 11:38
а чем web.DataReader в питоне плохо, если дневные бары? Я в смарткоме качаю
0
- MadQuant
  24 апреля 2020, 13:10
  broker25, может, у меня руки кривые, но по некоторым тикерам скачивается какая-то хрень, к реальным котировкам отношения не имеющая. Кроме того, там на глубину ограничения вроде бы, а я привык с 2000-го данные с финама грузить без проблем
  0
Пафос Респектыч
24 апреля 2020, 13:59
Да, удобно было… Придётся снова делать как-то удобно.
В кошки-мышки с ними играть как-то лень, хочется сделал и забыл, поинтереснее задачи есть.
0
Алексей Ван <o-s-a.net>
24 апреля 2020, 16:13
Проблему эту не решить.
Это же не ошибка и не баг. Это политика такая. Ну обойдём мы эту капчу, они поставят другую. Мне каждый месяц с ними в кошки-мышки играть не охота. Полный — перманентный отказ.

MOEX ISS подключили, вот реализация: github.com/AlexWan/OsEngine/blob/master/project/OsEngine/Market/Servers/MOEX/MoexIssDataServer.cs
Трейдов действительно нет. Фьючерсы за 2 года последние. Акции вроде с начала. Костылей хватает...
Сегодня сел за MFD. Тоже будет с открытым кодом в этом же репозитории. В это воскресенье.
+6
- tashik
  24 апреля 2020, 21:38
  Алексей Ван , огонь! спасибо!
  0
Beach Bunny
26 апреля 2020, 20:15
В общем с помощью расширения для Chrome можно качать с Финама, но для каждой новой загрузки нужен новый токен.
Сгенерили токен, загрузили один файл и т.д.
0