|
|
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Есть сотня клиентов, каждый из которых ~ сто раз в секунду что-то хочет от сервера. Это "что-то" (чего хотят клиенты от сервера) небольшое и уже (почти) готовое - "только спроси, сразу отдам". Протокол tcp. Возможно, клиентов будет не сто, а тыща. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 01:59:03 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Давно хотел ZeroMQ потрогать. Кроме чтения описания и небольших тестов - не пробовал. Только другим советы давал... Для Delphi есть библиотека - оболочка: https://github.com/bvarga/delphizmq ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 02:12:24 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Засада: The package contains a wrapper (zmq.pas), and a higher level api (zmqapi.pas). It should work with ZMQ 2.2.x, and with 3.2.x. А последний Stable Release на сегодня - 4.0.4. Берем предыдущую 3.2.4, от греха подальше: http://miru.hk/archive/ZeroMQ-3.2.4~miru1.0-x86.exe Из всей инсталляции нужна только библиотека libzmq-v90-mt-3_2_4.dll (ядро системы обмена сообщения, скомпилированная MS VS 2008, "релизный" вариант) -> переименовываем в libzmq.dll и помещаем в каталог с будущими исполняемыми файлами. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 02:26:38 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Не забываем, что для приложений, созданных в MS VS 2008, требуется "редистрибутабле пацк": http://www.microsoft.com/ru-ru/download/details.aspx?id=5582 Скорее всего, он у всех уже установлен, но мало ли. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 02:31:23 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Инсталлер можно не грузить, а построить библиотечку самостоятельно, из исходников: http://download.zeromq.org/zeromq-3.2.4.zip Для построения нужна MS VS 2008 Pro для С++. Можно обойтись и бесплатной Express версией MS VS, но тогда пакет библиотек для построения в Windows придется грузить отдельно. В инструкции пишут, что можно обойтись и MinGW: http://zeromq.org/build:mingw Однако, лично мне этого сделать так и не удалось. В общем, MS VS 2008. Можно и более новую студию но, пишут, что приложения не будет работать на Win2K и WinXP. Распаковываем скаченные исходники, открываем каталог builds\msvc, открываем из MS VS "решение" msvc.sln Выбираем конфигурация "Release" и даем команду "построить решение" (F7). Идём пить чай, это не дельфи, это минут на десять. ... ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 02:42:56 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Готово. В подкаталоге \lib появилась нужная библиотека: libzmq.dll. Какая-то она подозрительно маленькая (всего 186кБ), по сравнению с теми вариантами, что в инсталляторе были, но, надеюсь, это не беда : ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 02:48:02 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
чччД - а зачем ты все это написал ? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 02:59:00 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Кроме "любезно приложенной мной" () dll - ки, для дельфикодинга нужен фал, описывающих функции в этой библиотеке. Это есть вот здесь: https://codeload.github.com/bvarga/delphizmq/zip/master Из всего, что скачано, для работы потребуется совсем чуть-чуть. Нужны два файлика: 1. zmq.pas 2. zmq.inc Если хочется работать не с функциями dll, а использовать дельфийские классы - обертки, то можно использоват еще два файлика: 3. zhelpers.pas 4. zmqapi.pas Как работать - примерно описано в файле README.md. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 02:59:22 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Всё! Будем писать сверхскоростной сервер обработки сообщений. :) ...пошел варить кофе. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 03:01:15 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
READMEYou should use the higher level api, which'll save you a lot of time, and incidentally the code'll be easier to read. Очередная реинкарнация ) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 03:03:38 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Дополнение к ТЗ ( 16562010 ): сервер получает беззнаковое 32 - разрядное целое и возвращает квадрат этого числа в беззнаковом 64м целом. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 03:04:13 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
В общем, все вышеупомянутые .pas и inc файлы складываем в одно место и указываем Delphi, чтобы она это место знало (например, добавляем директорию в library path). И так, сервер, готов: Код: pascal 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18. 19. 20. 21. 22. 23. 24. 25. 26. 27. Сервер в цикле слушает порт №5555, читает из порта число и пишет значение квадрата числа. Надеюсь, он будет работать безупречно. А пока он только компилируется, стартует и выводит Starting... ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 03:32:57 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Клиент: Код: pascal 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18. 19. 20. 21. 22. 23. 24. 25. 26. 27. 28. 29. 30. 31. 32. 33. 34. 35. Судя по выводимым сообщениям, все работает правильно. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 04:01:14 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Нужно убрать из циклов тормозящие Writeln(), запустить сервер на удаленном компе и оценить скорость работы с несколькими клиентами... ... ...завтра. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 04:02:04 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Меряю. Разное количество клиентов. Клиенты запускаются и ждут, пока запустится сервер. Сервер выполняет 1 млн запросов и выводит сообщение о времени выполнения. ... При попытке выполнить 1024 коннекта получил сообщение "assertion failed fds.size() <= fd_setsize"... Посмотрел в исходниках dll на этот самый fd_setsize - он там действительно FD_SETSIZE равен 1024. Просто уменьшил число клиентов до 1000. ... ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 06:14:42 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
То есть, после двух сотен клиентов - на пределе, еле справляется. Нужно попробовать разнести серверную части в несколько потоков. ... Вообще, клиенты могут сами регулировать нагрузку. Все, что нужно - выполнить привязку сокета к двум верверам: Код: pascal 1. 2. - и все. Запросы будут поочередно отсылаться разным серверам. Но хочется выжать все из одного процесса сервера. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 06:19:43 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
чччДТо есть, после двух сотен клиентов - на пределе, еле справляется. Нужно попробовать разнести серверную части в несколько потоков. ... Вообще, клиенты могут сами регулировать нагрузку. Все, что нужно - выполнить привязку сокета к двум верверам: Код: pascal 1. 2. - и все. Запросы будут поочередно отсылаться разным серверам. Но хочется выжать все из одного процесса сервера. Профилировщиком шмальни, где он супостат чешетца.. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 06:55:49 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
чччД, А написать сервер на портах завершения ввода/вывода (IO completion ports)? Пишут, что это чуть не лучший вариант под Windows для обработки многих запросов. http://msdn.microsoft.com/ru-ru/library/windows/desktop/aa365198(v=vs.85).aspx http://habrahabr.ru/post/145140/ ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 09:51:43 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
чччД, не пробовал в тот же сценарий запрячь что-либо из этого набора , чтобы потом можно было как-то сравнить результаты? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 11.09.2014, 13:35:49 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Интересно, что длина сообщений может быть любой (почти: Integer), просто короткие сообщения доставляются прямо в теле сообщения, а для длинных специально автоматически выделяется память и в сообщении - адрес начала блока. После чтения следующего сообщения предыдущее "пропадает". ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 17.09.2014, 05:10:48 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
...в общем, выяснилось, что клиентов не будет больше сотни, и скорость обработки вполне приемлима. ... ~~~~~~~~~~~~~~~~~~~~~~~~ Таким образом, был рассмотрен режим обмена сообщениями по схеме "Запрос-Ответ" (Request-Reply). Схема работы "Запрос-Ответ": сервер слушает сокет, принимает сообщения от всех желающих, и отвечает на запросы. ... ~~~~~~~~~~~~~~~~~~~~~~~~ Бывает, что нужно по-другому. Сервер должен оповестить клиентов о каком-то событии. Клиенты отправляют серверу заявку, что они готовы получать сообщения о наступившем событии ("подписываются" на событие). Одних клиентов могут интересовать одни события, других - другие. А сервера вообще не волнует, кому из клиентов что нужно. Сервер - это как бы радиоприемник, вещающий в эфир. Кто слушает - молодец. А кто не слушает - тот ССЗБ. Такая схема называется "Издатель - Подписчик" (Publisher-Subscriber). Пример. Автоматическая метеостанция измеряет температуру, атмосферное давление и скорость ветра. Результаты измерений время от времени (например, после завершения цикла измрений) передаются "всем заинтересованным лицам". Кого-то интересует всё, кому-то нужна температура, кого-то волнует только скорость ветра. Пишем код метеостанции (), то есть, сервер-издатель : ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 17.09.2014, 06:08:55 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Через сокеты не тестил ? Synapse, к примеру. Интересно, сильно уступит по скорости. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 17.09.2014, 10:15:19 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
чччДА сервера вообще не волнует, кому из клиентов что нужно. Сервер - это как бы радиоприемник, вещающий в эфир. Кто слушает - молодец. А кто не слушает - тот ССЗБ. В смысле, используешь UDP broadcast или TCP multicast? Posted via ActualForum NNTP Server 1.5 ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 17.09.2014, 12:16:14 |
|
||
|
Cервер обработки сообщений
|
|||
|---|---|---|---|
|
#18+
Dimitry SibiryakovчччДА сервера вообще не волнует, кому из клиентов что нужно. Сервер - это как бы радиоприемник, вещающий в эфир. Кто слушает - молодец. А кто не слушает - тот ССЗБ. В смысле, используешь UDP broadcast или TCP multicast? ZeroMQ вроде точно не использует UDP. Как реализовано - можно посмотреть в исходниках libzmq.dll. Прикладной программист выбирает транспортный уровень для сокета с помощью zmq_bind: Код: pascal 1. ... Заявлено, что ZeroMQ позволяет обмениваться между разными системами "в сети", между процессами и между потоками в рамках процесса. Я ничего, кроме tcp пока не пробовал. В документации пишут, что в данны момент поддерживается работа на базе TCP, IPC (на POSIX), inproc, TIPC ("Transparent IPC" от Ericsson), SCTP, PGM, NORM и SOCKS5 (насчет последнего упоминают особо - типа, теперь ZeroMQ может и через сеть Tor ходить) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 17.09.2014, 15:59:06 |
|
||
|
|

start [/forum/topic.php?fid=58&startmsg=38743676&tid=2042211]: |
0ms |
get settings: |
11ms |
get forum list: |
12ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
163ms |
get topic data: |
9ms |
get forum data: |
2ms |
get page messages: |
60ms |
get tp. blocked users: |
1ms |
| others: | 225ms |
| total: | 489ms |

| 0 / 0 |
