Начало — Изучаю FIX протокол с нуля. Разбор протокола, первый код на c#

Вступление

     В прошлой статье я положил начало циклу разработки класса для работы с FIX протоколом. Обсудили его особенности передачи данных. Теперь время немного по программировать. Если профессионально подходить к делу, то нахрапом такие задачи решать нельзя. Надо посидеть с кружкой чая, порисовать схемы программного продукта. Что как будет взаимодействовать. Накидать блок схемы после полученного первого опыта. Наверное многие скажут, что это какой то дедовский способ. Но и программист я из старой плеяды, до сих пор любящий семерку Delphi.

Рисуем

     Напомню, как работают сетевые соединения. Через сокеты связываемся с сервером и начинаем обмениваться сообщениями.
     Из опыта первой статьи вы наверное вспомните, что я предложил под каждый блок сообщения делать класс и на основе этих классов строить сообщение. Переспав с этой идеей, сегодня за кружкой чая, я решил остановиться на этой идее. А именно:

( Читать дальше )

Вступление

     Никогда не увлекался скоростным трейдингом. Всегда хватало терминала. Изучать этот протокол меня побудил набор вакансий. Надо отметить, что я неспешно перебираю хорошие вакансии на рынке. Частному трейдеру очень сложно развиваться в одиночку — психологически, эмоционально, физически. Создавать и развиваться постоянно хочется, поэтому принял решение вливаться в коллектив. За несколько месяцев, мне удалось провести несколько собеседований. На втором этапе я проваливался именно из за не знаний протокола.  Предметную область я примерно представлял. Ну что там сложного? Соединился с биржей по сокетам и начинай обмен сообщениями. Надо отметить, что в этой области есть уже готовые разработки в виде quickfix или готового API от StockSharp (правда платные). Но я принял решение разбираться с нуля, чтобы вникнуть в детали.

Технические аспекты протокола

     Итак. Любой протокол, какой бы он сложный не был, работает примерно одинаково. Мы создаем у себя соединение с сервером, устанавливаем некий туннель между нами и сервером, посредством которого будем обмениваться сообщениями. Протокол — это как раз и есть набор правил, по которым строятся сообщения нужного формата. Если говорить технически, то мы должны создать сокет соединение с сервером на указанный порт.
Сообщение в FIX, как и в любом другом протоколе, состоит из нескольких блоков:

• <Заголовок сообщения>
• <Сообщение>
• <Концовка сообщения>

     Наша задача, правильно заполнить эти блоки и отправить на сервер. Заголовок сообщения в свою очередь состоит из следующих данных:

• <Начало сообщения, версия протокола>
• <Длина (размер) сообщения>
• <Тип сообщения>
• <Идентификатор отправителя>
• <Идентификатор получателя>
• <Номер сообщения>
• <Время отправки>

     Обращу ваше внимание, что я перечисляю обязательные поля. Есть еще и дополнительные. Концовка сообщения должна выглядеть так:

• <Контрольная сумма сообщения>

     Сами данные заполняются достаточно легко. В виде: <тип поля> = <значение>. Например, <длина сообщения> = 78, то есть мы серверу говорим, что размер передаваемого нами сообщения составляет 78 байт. Стоит обратить внимание, что в протоколе FIX, типы полей кодируются в виде числовых значений. Например,  <длина сообщения> в протоколе передается как цифра 9. Исходя из выше сказанного, наш заголовок сообщения, выглядел бы следующим образом:

• 8=FIX.4.4 _____ начало сообщения, протокол версии 4.4
• 9=78 _____ размер сообщения 78 байт
• 35=A _____ тип сообщения А, что означает попытка на соединение с сервером
• 49=<ваш идентификатор выдается биржей>
• 56=FG _____ идентификатор получателя, раздел Forts на бирже
• 34=1 _____ первое сообщение
• 52=20160212-11:42:51.812 _____ время отправки сообщения

Организационные вопросы

1. Наша биржа дает тестовый контур для отработки своих алгоритмов по данному протоколу. Надо всего лишь написать запрос на доступ. Надо признать, тех служба работает отменно. Очень все быстро было организовано. Подробности http://moex.com/s442
2. Обязательно понадобится описание протокола для нашей биржи ftp://ftp.moex.com/pub/FIX/Spectra/test/docs/spectra_fixgate_ru.pdf
3. Чтобы вникнуть в тонкости передачи, мне очень помогла эта программа от биржи (позже я покажу как помогла) ftp://ftp.moex.com/pub/FIX/Spectra/Utils/fix_client.zip
4. Описание самого протокола от создателей (на английском). Мне помог сильно wiki. http://fixwiki.org/fixwiki/FIXwiki
5. Чтобы найти свои ошибки, мне приходилось перехватывать сообщения рабочего клиента биржи и сверять со своими. Для этого мне понадобился tcp/ip сниффер — программа перехвата сетевого трафика.
6. Разработку я веду на c#.

К бою. Немного теоретической практики

     На момент изучения протокола, я уверен, многие столкнуться со следующими вопросами:

• как именно считать длину сообщения
• как разделять между собой данные
• как считать контрольную сумму

     Если говорить образно. То, чтобы отправить сообщение на сервер, нам просто нужно сформировать нужную строку со всеми данными и отправить ее на биржу. Ну например:

8=FIX.4.4;9=78;35=A;49=FG;56=tgFhcfx901U05;34=1;52=20160212-11:42:51.812;98=0;108=3000;141=Y;10=047;

     Если быть внимательным, то мы увидим, что кол-во символов в строке у нас 100, а в заголовке сообщения мы передаем, что 78 (9 = 78). По правилам протокола FIX, длину сообщения нужно считать без учета концовки и первых двух полей заголовка. А именно:

     С длиной сообщения разобрались. Теперь про разделитель. Пока в моем скрине это ";". В документациях западных написано что это символ SOH. Чтобы однозначно ответить на этот вопрос, я запустил прилагаемого клиента биржи и сниффером стал перехватывать сообщения между клиентом и биржей. Кстати, программа ведет логи, и их общение выглядит так (зеленое — передача запроса на биржу, красное — ответ от биржи):

     Зачеркнул свой идентификатор, прошу понять правильно. Ну а перехват сообщения выглядит так:
     Зеленым я отметил именно разделители. Как вы уже видите, это просто в шестнадцатеричном виде код 01. То есть, в нашу строку в виде разделителей, нужно вставлять код 01. Также я отметил для себя последовательность полей в сообщении. Почему то в другом порядке у меня вызывало ошибки (возможно тут я не прав)
     Ну и контрольная сумма. Контрольная сумма считается над всем сообщением, за исключением концовки. То есть в расчет берется только заголовок и само сообщение. Для этого, мы переводим каждый символ в его Ascii код и вычисляем их сумму. Полученную сумму делим по модулю 256. Это и будет контрольной суммой сообщения. При этом, значение должно быть трехзначным. Если мы получаем 2 знака, то подставляем 0 слева (например, если контрольная сумма = 68, то должны передать значении 068).

К бою. Начало программирования

     В законченном виде, разработка будет составлять готовый класс, для работы с протоколом. Теперь начинаю строить его по кирпичикам. Для начала, я создал несколько классов:

• класс для работы с заголовками
• класс для работы с сообщением подключения к серверу (onLogon)
• класс для работы с концовкой

    Каждый класс включает в себя поля, которые передаются и некоторые методы для их обработки.
    Класс для работы с заголовками. Пока просто выглядит так: 


     Как видим, первый метод строит нужную строку из полей. Обратите внимание, там присутствует наш разделитель в виде спец символа \u0001. Второй метод вычисляет размер заголовка (чтобы потом высчитывать размер сообщения). Надо обратить внимание, что при передачи времени, миллисекунды должны указываться в трехзначном формате (даже если миллисекунды = 52, то передаем 052). Следующие классы строятся по аналогии.
Класс создания сообщения на подключение (инициализация сессии)

Класс создания концовки сообщения


Попробую привести код консольной программы для теста в виде цитаты. Картинки вставляются плохого качества. Подробно комментирую.

//Получаем ip сервера
IPAddress ipAddr = IPAddress.Parse(server);
IPEndPoint ipEndPoint = new IPEndPoint(ipAddr, port);
//Создаем заголовк
HeaderMessage msHeader = new HeaderMessage
{
BeginString = «FIX.4.4»,
MsgType = «A», //Тип сообщения на установку сессии
SenderCompID = "",
TargetCompID = «FG»,
MsgSeqNum = 1
};
//Создаем сообщение на подключение onLogon
LogonMessage msLogon = new LogonMessage
{
EncryptMethod = 0,
HeartBtInt = 3000,
ResetSeqNumFlag = true
};

//Вычисляем длину сообщения
msHeader.BodyLength = msHeader.GetHeaderSize() + msLogon.GetMessageSize();
//Создаем концовку сообщения
TrailerMessage msTrailer = new TrailerMessage(msHeader.ToString() + msLogon.ToString());

//Формируем полное готовое сообщение
string fullMessage = msHeader.ToString() + msLogon.ToString() + msTrailer.ToString();
Console.WriteLine(«Сообщение для отправки {0}»,fullMessage);

//Создаем сокет для подключения
sSender = new Socket(ipAddr.AddressFamily, SocketType.Stream, ProtocolType.Tcp);
//Подключаемся
sSender.Connect(ipEndPoint);
Console.WriteLine(«Сокет соединился с {0} », sSender.RemoteEndPoint.ToString());

byte[] msg = Encoding.UTF8.GetBytes(fullMessage);
//Отправляем сообщение
int bytesSent = sSender.Send(msg);
Console.WriteLine(«Отправил {0} байт», bytesSent.ToString());

//Получаем ответ от сервера
byte[] bytes = new byte[1024];
int bytesRec = 0;
bytesRec = sSender.Receive(bytes);
Console.WriteLine(«Ответ от сервера: {0}», Encoding.UTF8.GetString(bytes, 0, bytesRec));

Все таки приложу и в виде картинок. Так наглядней. Кликабельно.


В результате мы запросили у сервера подключение с нашим логином. И получили от него ответ.

По мере развития, буду продолжать с теоретической частью. Если модераторы перенесут в раздел «Алго», я не против.

Продолжение Изучаю FIX протокол с нуля. Рисуем и программируем дальше.

Последний раз я писал про свои успехи в программировании 10 дней назад. За эти 10 дней я:

• потратил еще 18 часов чистого времени изучения. (Маловато, всего 1 час 48 минут в день в среднем получается)
• всего потрачено 75 часов.
• продвинулся по книге Изучаем C# со стр. 304 до стр. 492.
• написал и отправил на ютуб ещё 8 программок

Итак, что я до сих пор не знаю?

( Читать дальше )

Управление капиталом с помощью портфеля торговых роботов в январе закрылось с результатом +14.03%. Месяц был хороший, особенно порадовали «жирные» движения на валютной секции. Счет вышел на новый исторический максимум.

Доходность с начала года составила +14.03%. С момента запуска в январе 2013 года доходность составила +249.85%.
Также с начала года в целях повышения эффективности управления мы начали размещать условно свободные остатки денежных средств (та часть, которая предназначена для покрытия возможных просадок) в биржевом ETF FXMM на Московской бирже. Теперь каждый день дополнительно «капает» доходность 8-10% годовых. При этом деньги в случае необходимости можно вернуть на срочный рынок в течение одного дня. На текущий момент в состав портфеля входит около 15 алгоритмов на 3 самых ликвидных российских фьючерсах (Ri, Si ,Sr). Состав портфеля регулярно дополняется, в зависимости от ситуации в ручном режиме происходит динамическая переаллокация лимитов на отдельные группы стратегий. Все вышеуказанные результаты подтверждены отчетами брокера.
Всем удачных торгов!

Написанное далее, написано устроителем конкурса 
(Обратите внимание, что первый раз такое, когда человек устраивает конкурс, тратит деньги, не для пиара а из любви к искусству):

Уф. Приготовьтесь к длинному посту.

Прежде всего, коллеги, большое спасибо за участие в конкурсе. Озвученный Тимофеем ранее «вердикт», конечно, был произнесен в шутку. Когда снова перечитывал отобранные посты, было крайне интересно. В очередной раз убедился, что люди у нас всё-таки талантливые и творческие. Трейдинг – нелегкая интеллектуальная загадка, и в постах конкурсантов содержатся ответы на многие и многие вопросы пазла.

Было крайне сложно сделать выбор. На то, чтобы сделать выбор два дня. Некоторые посты-победители очень похожи друг на друга по содержащимся идеям, и сначала мы хотели выдать призы не первым трём местам в порядке 50-25-10, а первым пяти местам по 17 т. Но сообщество проголосовало по-другому, желая увидеть, кто же всё такие первые три. Выбор этот субъективный. Заранее прошу простить, если чьи-то ожидания не оправдались. Когда придумаем тему, мы сделаем еще один конкурс.

( Читать дальше )

Хочу сразу поблагодарить всех, кто комментировал предыдущий пост. Вы знаете, тут на смартлабе люди жалуются, что срач и качество комментариев низкое. Но как я понял, срач всегда притягивается на соответствующие темы постов. Если ты пишешь о высокоинтеллектуальных вещах, то нежелательный контингент отваливается сам собой, поэтому в комментах сложилась очень теплая и конструктивная атмосфера. Ещё раз спасибо!

Итак, с момента публикации моего предыдущего поста про моё изучение C# прошло еще [42->57] 15 часов чистого времени. Я по-прежнему иду по книге Стиллмена Изучаем C#

Первые 250 страниц (которые уже прочел три года назад) прошли относительно легко. Но теперь, такое ощущение, что с каждой страницей я начинаю увязать в содержании всё сильнее и сильнее. Вещи становятся всё более абстрактными, они уходят всё дальше от жизни и пока не ясно, как это всё использовать.


( Читать дальше )

В этой статье я опишу метод, который сам активно использую в своей торговле, и расскажу как торговать на рынке без прогнозирования цены.

Я скептично отношусь к рыночным прогнозам, и являюсь сторонником того, что рынок спрогнозировать не возможно, и что абсолютно любая точка в движении цены может быть разворотной. Моя концепция торговли сводится к тому, чтобы забрать от рынка столько, сколько он даст и с минимальным риском для меня.

Хотя и использую в своей торговле ценовые формации, которые имеют цели исполнения (что по сути является прогнозом), так же спокойно отношусь к рынку, когда цели не исполняются когда формация ломается, что бывает достаточно часто. Тем не менее, это не мешает оставаться гибким к рыночной ситуации. Для меня, любая формация (момент приближения цены к границе фигуры) лишь означает момент, точку перелома, которую следует отработать. Причем, я буду одинаково рад и отработке фигуры, и если пройдет ложный пробой. С той лишь разницей, что при отработке фигуры есть приблизительное представление, где будет цена (цели по фигуре), а при ложном пробое такого представления нет, и фиксация произойдет по стопам, которые я плотно трейлю за позицией. Важно в этот момент понять истинность пробоя/отбоя, и вовремя поймать его или ложный, который почти всегда дает отличные точки входа с очень хорошим соотношением риск/прибыль. Особенно если это делать на самом малом таймфрейме.

( Читать дальше )

Привет Смартлаб! И так революция продолжается и у меня в планах сделать разбор роботов Черемушкина. Сегодня начнем с робота Макс.
Это робот основаный на пересечении EMA и все до омерзения просто. Конечно разобрать именно робота Черемушкина не получится в связи с его отсутствием у меня зато я создал его аналог — робот Маркс. Сразу скажду я не в курсе поповоду стопов у Макса но в Марксе есть фиксированный стоп который выполняет скорее аварийно-техническую роль по скольку Маркса я планирую запустить. И так вот вам алгоритм.


Вход по пересечению EMA и выход либо по стопу либо по котрсигналу.

Оптимизировался робот достаточно просто и быстро а так же было множество параметров работающих в будущем. Были успешно пройдены все тесты с комиссией 20 рублей на круг и с депозитом 25 000 а теперь давайте взгляним на график доходности с учетом форвардного тестирования.





( Читать дальше )

2560 x 1440
hostingkartinok.com/show-image.php?id=a18b00f24f45f43a4558fa8772a764bd

1920 x 1080
hostingkartinok.com/show-image.php?id=e0e41b3c17fabb55420dd6675905beed

( Читать дальше )

Философия? Тебя интересует философия по одной простой причине: у тебя в голове каша, и ты пытаешься упорядочить ее при помощи какой-то философии. Ты не доверяешь самому себе, потому что знаешь, ты себя не в состоянии контролировать и в один день ты можешь потерять всё. Но попытка найти ответы на свои вопросы в трейдинге при помощи философии — это всё равно что, ну, скажем, пытаться построить ракетный двигатель и читать Дарью Донцову в качестве инструкции.

В глубине души ты знаешь, что последовательно зарабатывать на бирже можно только лишь дисциплинированными системными упорядоченными действиями. Но по какой-то причине ты не создаешь эту систему.

Вот тебе моя философия.

Опорные тезисы:

• рынок сверхконкурентен (А)
• на бирже нет ничего определенного (Б)

Главная цель: долго и последовательно делать максимальную прибыль при минимально возможном риске.

Все хотят заработать денег на бирже. Но по факту, мы вынимаем деньги из карманов друг друга. Неслучайно зарабатывают те, кто систематически эксплуатируют те или иные ошибки тех, кто деньги раздает. Суть в трейдинга состоит в том, чтобы так или иначе найти систематические ошибки тех, кто раздает деньги и забрать эти деньги.

Систематические ошибки порождают некий статистический сдвиг. Если стат.двиг достаточно большой по сравнению с транзакционными издержками, то этот сдвиг дает положительный результат по сумме сделок. Этот стат. сдвиг по сумме сделок называется положительным матожиданием сделок.

( Читать дальше )