|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Вроде по всем докам Monitor должен работать быстрее, но у меня получается наоборот. Или я что то пропустил? ... |
|||
:
Нравится:
Не нравится:
|
|||
02.07.2018, 23:18 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosВроде по всем докам Monitor должен работать быстрее, но у меня получается наоборот. Анекдот про сферического коня в вакууме процитировать? Монитор - это аналог critical section, и существует внутри одного процесса. AutoResetEvent и ManualResetEvent видны в разных процессах, что влечет за собой некоторый оверхед в реализации. Ну, и плюс специфика использования тех и других несколько разная. Вне контекста задачи говорить о предпочтительности использования того или другого бессмысленно. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 06:13 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Сон Веры Павловны, Безотносительно коней ты тоже сказал что есть оверхед для WaitHandle, чего я не наблюдаю почему то. А задача такая: Имеются - {m} работ, {n} ресурсов. Каждая работа может потребовать некоторое подмножество ресурсов из {n}. Каждая работа добавляет в {m} новые работы и меняет состояние ресурсов из {n}. Работа может окончиться неуспешно и вернуться в {m}. Надо организовать конкурентный доступ к {n} для {m}. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 09:27 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
На самом деле зависит от задачи. Event медленнее, но критические секции (Monitor) - это спинлок плюс Event. Т.е. делается N попыток блокировки в цикле, затем при неудаче засыпание на Event. Если блокировки обычно нет, то Monitor быстрее, если наоборот и все ядра проца загружены, т.е. обычно заблокировано, то медленнее, т.к. впустую тратится процессорное время на спинлок. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 09:38 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima T, где то прочитал, что есть ограничение на количество AutoResetEvents (64), не сталкивался ( я не вижу реакции)? ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 10:34 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosDima T, где то прочитал, что есть ограничение на количество AutoResetEvents (64), не сталкивался ( я не вижу реакции)? AutoResetEvents это обертка над виндовым Event , для него нет ограничений по количеству. Есть ограничение 64 для вызова WaitAll() или WaitAny() потому что внутри виндовая WaitForMultipleObjects() и это ее ограничение. Для Monitor ничего подобного WaitAll()/WaitAny() вообще нет. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 10:48 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima T, хреново что 64, у меня объектов может быть больше намного ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 11:00 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosВроде по всем докам Monitor должен работать быстрее, но у меня получается наоборот. Или я что то пропустил? Это по каким докам? ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 11:01 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRos, Если у тебя преимущественно больше чтения, чем записи, можешь посмотреть в сторону ReaderWriterLockSlim. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 11:08 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRosВроде по всем докам Monitor должен работать быстрее, но у меня получается наоборот. Или я что то пропустил? Это по каким докам? MSDN пишет что Monitor эффективнее Мониторы и дескрипторы ожидания Важно отметить различия между использованием объектов Monitor класса и WaitHandle объектов. Monitor Класс полностью управляемые и полностью переносимые, а также могут оказаться эффективными в плане использования ресурсов операционной системы. Объекты WaitHandle представляют объекты ожидания операционной системы, удобны для синхронизации между управляемым и неуправляемым кодом и предоставляют некоторые расширенные функции операционной системы, например возможность ожидания сразу нескольких объектов. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 11:23 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRos, Если у тебя преимущественно больше чтения, чем записи, можешь посмотреть в сторону ReaderWriterLockSlim. Задачу я выше описал. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 11:24 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosDima T, хреново что 64, у меня объектов может быть больше намного Читай внимательней что я писал. Еще раз: объектов сколько угодно , хоть 100500, но только 64 объекта можно ждать одновременно (WaitAll() или WaitAny()). ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 11:26 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRos, Я просто не увидел, с чем сравнивается. ViPRosЗадачу я выше описал. Всё равно не понятно, насколько больше чтения, чем записи. В решении одной задачи у меня смена Monitor на RWSL существенно увеличило производительность, я также учёл переход в режим Update, без рекурсии. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 11:56 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima TViPRosDima T, хреново что 64, у меня объектов может быть больше намного Читай внимательней что я писал. Еще раз: объектов сколько угодно , хоть 100500, но только 64 объекта можно ждать одновременно (WaitAll() или WaitAny()). ну, я понял, надо делать как и с монитором - не пользоваться WaitAll/Any Просто я думал - может WaitAll/Any как т по особому этот массив обрабатывают (для массива мониторов нужен еще один монитор - вощем получается многоуровневая структура мониторов) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 12:18 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRos, Я просто не увидел, с чем сравнивается. ViPRosЗадачу я выше описал. Всё равно не понятно, насколько больше чтения, чем записи. В решении одной задачи у меня смена Monitor на RWSL существенно увеличило производительность, я также учёл переход в режим Update, без рекурсии. Нет ни чтения, ни записи - есть блокировка объектов на время работы критической секции ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 12:20 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Интересно, почему нет исходников Enter и т.д. в Monitor.cs ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 12:22 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosПросто я думал - может WaitAll/Any как т по особому этот массив обрабатывают (для массива мониторов нужен еще один монитор - вощем получается многоуровневая структура мониторов) По-особому. Потому что внутри используется виндовая WaitForMultipleObjects() , а для мониторов ( CRITICAL_SECTION ) ничего похожего нет. PS Если для мониторов ты делал самодельный WaitAll(), то скорее всего он будет тормознее чем WaitAll() для эвентов. PPS Для твоей задачи можно поизобретать самодельный объект для синхронизации. Менеджер ресурсов. Примерно так: обработчик регистрирует запрос нужных ресурсов и встает на ожидание, менеджер контролирует освобождение ресурсов и как только все нужные освободились - будит обработчика. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 12:47 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosИнтересно, почему нет исходников Enter и т.д. в Monitor.cs Потому что они extern c атрибутом MethodImpl, у которого Value = MethodImplOptions.InternalCall, что означает The call is internal, that is, it calls a method that is implemented within the common language runtime. ( https://msdn.microsoft.com/en-us/library/system.runtime.compilerservices.methodimploptions.aspx) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 12:54 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima TViPRosПросто я думал - может WaitAll/Any как т по особому этот массив обрабатывают (для массива мониторов нужен еще один монитор - вощем получается многоуровневая структура мониторов) По-особому. Потому что внутри используется виндовая WaitForMultipleObjects() , а для мониторов ( CRITICAL_SECTION ) ничего похожего нет. PS Если для мониторов ты делал самодельный WaitAll(), то скорее всего он будет тормознее чем WaitAll() для эвентов. PPS Для твоей задачи можно поизобретать самодельный объект для синхронизации. Менеджер ресурсов. Примерно так: обработчик регистрирует запрос нужных ресурсов и встает на ожидание, менеджер контролирует освобождение ресурсов и как только все нужные освободились - будит обработчика. Думал о менеджере ресурсов. Но, менеджер этот тоже должен быть синхронизирован. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 12:55 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Наверное, легче сделать иерархию AutoResetEvents (по 64 в блоке), вощем все это я уже делал для монитора потому что WaitAll действительно по особому ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 12:58 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosДумал о менеджере ресурсов. Но, менеджер этот тоже должен быть синхронизирован. Его надо вынести в отдельный поток. Запросы передавать через очередь. Т.е. сам менеджер однопоточный, ждет сообщения из очереди, по мере поступления обрабатывает. Внутри сообщения AutoResetEvent для пробуждения обработчика и указание требуемых ему ресурсов. Т.е. как только ресурсы освободились - будим обработчик и закрепляем ресурсы за ним, по окончании он сообщает что закончил, ресурсы освобождаются и т.д. Осталось придумать как быстро отслеживать кому какие ресурсы нужны :) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 13:08 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima TОсталось придумать как быстро отслеживать кому какие ресурсы нужны :) Как вариант: массив счетчиков для обработчиков, при регистрации прописываем их количество: Код: plaintext 1.
для ресурсов массив массивов (List<List<int>>), т.е. по одному массиву на каждый ресурс, а во внутренний массив писать список обработчиков, ожидающих ресурс. При регистрации обработчика он добавляется во все ресурсы. При освобождении ресурса проходим по списку привязанных к нему обработчиков и делаем всем worker[i]--, как только получили 0 - значит все необходимые ресурсы свободны и можно запускать обработчик. При блокировке ресурса - всем ожидающим worker[i]++ ИМХО в однопоточном варианте должно достаточно быстро работать ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 13:18 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima TКак вариант: массив счетчиков для обработчиков, при регистрации прописываем их количество: Код: plaintext 1.
опечатка: записываем количество требуемых ресурсов. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 13:20 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosНаверное, легче сделать иерархию AutoResetEvents (по 64 в блоке), вощем все это я уже делал для монитора потому что WaitAll действительно по особому Тут тоже не все просто. Каждый WaitAll() должен работать в своем потоке, затем надо их как-то синхронизировать, т.е. еще один поток ожидающий все первые. Сразу просматривается проблема: в первом WaitAll() все ресурсы освободились, а во втором - нет. Что дальше делать? Первый сигналит что "свободно" и требует что-то делать, перестать ожидать первые - а вдруг пока второй набор освобождался в первом уже опять что-то заняли. Как вариант (без больших переделок): разбиваем ресурсы на кучки по 64, ожидание первой (один WaitAll()), при сработке допроверка остальных, если какая-то несвободна, то ждем ее и т.д. по кругу. Как все освободились - закончили ожидание. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 13:33 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima T, этот менеджер скорее всего станет узким местом у меня тут много режимов работы однопоточный 2поточный (тут нет блокировок) многопоточный (управляемое количество потоков) все это работает в зависимости от структуры ресурсов, характера конкуренции ну я думал о менеджере много раз не стал реализовывать в коде так как это долбаные ресурсы любят объединиться в долговременные и кратковременные пулы, одновременно могут быть членами разных пулов, могут блокироваться частично (% мощности) и т.д. нужны стационарные менеджеры и диспетчеры, которые вообще то сами являются обычными ресурсами и т.д. хотел как то перевести на Акку, н не получилось концептуально (в мозгах) а воще то задача - моделировать производственно/финансовые мощности холдинга и построить план работ ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 13:37 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosэтот менеджер скорее всего станет узким местом Сомневаюсь. Менять состояния пачки из сотен эвентов это тоже не быстро, а тут у тебя один эвент на обработчика и немного простейших операций с массивами чисел. Главное повысить приоритет потоку с менеджером чтобы обработчики его не вытесняли. ViPRosхотел как то перевести на Акку, н не получилось концептуально (в мозгах) ИМХО задача не подходит для Акки. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 13:48 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima T, ну, менеджер этот в мозгах уже лет 20 сидит, но он сцуко один в один повторяет структуру предприятия а в структуре есть и мобильные ресурсы (активные и пассивные) - транспорт, многостаночники, наладчики даже стационарные непросты - хорошо когда рабочее место содержит стационарный станок, набор инструментов, приспособлений, прикрепленного набора рабочих, а есть просто пустое место, где можно собраться и поработать вместе мобильным и .д. очень сложная структура и объекты все со сложным поведением при этом!!! - сама критическая секция (запланировать единицу работы) работает так быстро, что телодвижения с блокировкой этих ресурсов отнимают офигенное количество времени когда мощности хорошо сбалансированы под работы не особо большая разница во времени, что в один поток, что в 100 потому остерегаюсь создавать эти менеджеры - пытаюсь обойтись примитивами но когда нить для души попробую полностью симулировать ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 14:16 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
А так все это один в один повторяет механизм эскалации блокировок МССКЛ :) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 14:17 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
сейчас вообще то у меня самая серьезная проблема - запись сгенерированной информации в СУБД на ноуте за минуту генерируется 1000 000 процессов (~ 10 000 000 записей) а запись отнимает 5-7 минут (с учетом всех распараллеливаний, симплов, балков, 610 и т.д фигни) куда бы архитектурно эту инфу сбагрить бл* ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 14:23 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
а в реале надо 50 - 70 000 000 процессов и хорошо бы не больше тех 1-5 минут ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 14:24 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosпри этом!!! - сама критическая секция (запланировать единицу работы) работает так быстро, что телодвижения с блокировкой этих ресурсов отнимают офигенное количество времени когда мощности хорошо сбалансированы под работы не особо большая разница во времени, что в один поток, что в 100 Код надо смотреть, так сложно что-то понять. ViPRosпотому остерегаюсь создавать эти менеджеры - пытаюсь обойтись примитивами но когда нить для души попробую полностью симулировать Если тебе надо WaitAll() то однозначно уходи хотя бы на Event`ы, т.к. самодельный WaitAll() на мониторах - это извращение. ИМХО мой вариант с "кучками" 21539166 может заработать и переделка небольшая. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 14:59 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima T, Ну, я ж согласился что надо блоками ивентов управлять Я почему то думал, что монитор что то легковесное (в принципе везде так и написано, а исходников нет что бы посмотреть) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:23 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Код (создание процесса - очень большой), а так начало Код: c# 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18. 19. 20. 21. 22. 23. 24. 25. 26. 27. 28. 29. 30. 31. 32. 33. 34. 35. 36. 37. 38. 39. 40. 41. 42. 43. 44. 45. 46. 47.
-----------блабла и конец Код: c# 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13.
... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:27 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosсейчас вообще то у меня самая серьезная проблема - запись сгенерированной информации в СУБД у тебя? вообще-т 99% узких мест, это IO операции. если нет желания/возможности масштабирования операций, то в сторону акка нет смысла. думал о реактивном подходе? ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:31 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRos, если бы ты работал с асинхронным IO, то Monitor тут не получится использовать ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:34 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttесли нет желания/возможности масштабирования операций, то в сторону акка нет смысла. думал о реактивном подходе? ну, акка просто не подходит, неохота вспоминать почему все эти rx тоже под наблюдением пока что лучше всего TPL DataFlow, но для того что бы перейти надо кучу вещей переписать - создать конвеер ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:42 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRos Код: c# 1.
Почему не использовать потокобезопасные коллекции? Так блокировать коллекции не по феншую, да и не блокирует доступ к коллекции. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:45 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosну, акка просто не подходит, неохота вспоминать почему Да тут и нечего вспоминать, весь смысл акторов в масштабировании, кто бы там чего не говорил. В рамках одного процесса акторы -- оверхед без видимого профита. ViPRosпока что лучше всего TPL DataFlow, но для того что бы перейти надо кучу вещей переписать - создать конвеер Неблокирующий конвеер -- наверное лучшее, что можно придумать, согласен. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:47 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Код: c# 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18.
У тебя захват блокировок внутри блокировки, т.е. чтобы начать захватывать ресурсы надо захватить algroup и monLockStru. Это гарантирует что все задачи последовательно будут выполнятся, т.к. пока хоть одна задача висит на ожидании какого-нибудь ресурса, то другие потоки висят на lock (algroup) Как минимум надо вынести этот цикл за lock (algroup) Код: c# 1.
... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:49 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRos, если бы ты работал с асинхронным IO, то Monitor тут не получится использовать IO асинхронная (в таких же тасках, без begin/end) Монитор в принципе плохой, его самого надо монитором закрывать, а не то стартуют процессы - клоны а чем асинхронность записи мешает монитору не знаю ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:51 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRos Код: c# 1. 2. 3. 4.
if надо либо ещё раз выполнять после входа в критическую секцию, или выполнять внутри, иначе это небезопасно :) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:52 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima T Код: c# 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18.
У тебя захват блокировок внутри блокировки, т.е. чтобы начать захватывать ресурсы надо захватить algroup и monLockStru. Это гарантирует что все задачи последовательно будут выполнятся, т.к. пока хоть одна задача висит на ожидании какого-нибудь ресурса, то другие потоки висят на lock (algroup) Как минимум надо вынести этот цикл за lock (algroup) Код: c# 1.
Этих algroup много - lock (algroup) пропускает неоднотипные процессы а если не сделать lock (monLockStru) то все однотипные процессы ломанутся одновременно и будет дедлок ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:54 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Код: c# 1.
так делать тоже нельзя, т.к. ты заранее блокируешь ресурсы. Например тебе надо ресурсы 1,3,5. В этом цикле ты заблокировал 1 и 3, а 5 оказался занят и ты повис в ожидании, но при этом 1 и 3 тобой заблокированы, но ты ими не пользуешься, т.к. ждешь 5. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:54 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
это такое двойное сито перед блокировкой ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:54 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima T Код: c# 1.
так делать тоже нельзя, т.к. ты заранее блокируешь ресурсы. Например тебе надо ресурсы 1,3,5. В этом цикле ты заблокировал 1 и 3, а 5 оказался занят и ты повис в ожидании, но при этом 1 и 3 тобой заблокированы, но ты ими не пользуешься, т.к. ждешь 5. именно для этого и блокировка lock (monLockStru) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:55 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosМонитор в принципе плохой, его самого надо монитором закрывать, а не то стартуют процессы - клоны а чем асинхронность записи мешает монитору не знаю тем, что код, находящийся после await, может быть выполнен в другом потоке, соответственно, блокировка на поток может быть проигнорирована, что приведёт к дедлоку. т.е. надо использовать семафоры. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:55 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRosМонитор в принципе плохой, его самого надо монитором закрывать, а не то стартуют процессы - клоны а чем асинхронность записи мешает монитору не знаю тем, что код, находящийся после await, может быть выполнен в другом потоке, соответственно, блокировка на поток может быть проигнорирована, что приведёт к дедлоку. т.е. надо использовать семафоры. ну можно указать контекст если надо ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:55 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRos Код: c# 1. 2. 3. 4.
if надо либо ещё раз выполнять после входа в критическую секцию, или выполнять внутри, иначе это небезопасно :) это поле статик - задается при конфигурации ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:57 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRos Код: c# 1.
Почему не использовать потокобезопасные коллекции? Так блокировать коллекции не по феншую, да и не блокирует доступ к коллекции. +1 Тогда и сабж монитор не понадобится) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:58 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Да все в этом коде рабочее и протестировано ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:58 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosэто поле статик - задается при конфигурации это все выглядит как костыли, может лучше бы подошли потокобезопасные очереди. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 15:59 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRos Код: c# 1.
Почему не использовать потокобезопасные коллекции? Так блокировать коллекции не по феншую, да и не блокирует доступ к коллекции. они все потокобезопасные :) но их можно использовать как объект блокировки ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:00 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Petro123hVosttпропущено... Почему не использовать потокобезопасные коллекции? Так блокировать коллекции не по феншую, да и не блокирует доступ к коллекции. +1 Тогда и сабж монитор не понадобится) пшел нах ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:00 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRosэто поле статик - задается при конфигурации это все выглядит как костыли, может лучше бы подошли потокобезопасные очереди. хотя может это тот случай, когда что-то рабочее за вменяемое время написать -- уже победа. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:00 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosони все потокобезопасные :) но их можно использовать как объект блокировки это только если ты знаешь, что к коллекции надо обращаться только через критическую секцию, так делать не рекомендуется, настоятельно :) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:01 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRos, или ты просто сэкономил на лок-объкете ) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:02 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVostthVosttпропущено... это все выглядит как костыли, может лучше бы подошли потокобезопасные очереди. хотя может это тот случай, когда что-то рабочее за вменяемое время написать -- уже победа. Хвост не горячись - потокобезопасность коллекции делают потокобезопасным только их, а не твой код все коллекции там потокобезопасные (кроме особых случаев - созданы только для лока) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:02 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRos, или ты просто сэкономил на лок-объкете ) ну я ж прогер 40 летним стажем :) ячейка память бережет! ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:03 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosЭтих algroup много - lock (algroup) пропускает неоднотипные процессы а если не сделать lock (monLockStru) то все однотипные процессы ломанутся одновременно и будет дедлок Но в коде с эвентами вызов WaitAll() вынесен за блокировку. Если не путаю WaitAll() не блокирует AutoResetEvent, в WinAPI это так, как тут - не знаю. Если так, то у тебя вообще нет блокировок AutoResetEvent. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:06 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima TViPRosЭтих algroup много - lock (algroup) пропускает неоднотипные процессы а если не сделать lock (monLockStru) то все однотипные процессы ломанутся одновременно и будет дедлок Но в коде с эвентами вызов WaitAll() вынесен за блокировку. Если не путаю WaitAll() не блокирует AutoResetEvent, в WinAPI это так, как тут - не знаю. Если так, то у тебя вообще нет блокировок AutoResetEvent. Ты не внимателен - коллекции areEvents, monEvents локальные ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:09 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
а блокировка сразу задается в конструкторе ивента ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:09 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRos, Как сказал ....."ты злишься, значит неправ))" ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:10 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Petro123ViPRos, Как сказал ....."ты злишься, значит неправ))" не я не злюсь, просто мы кои-то веки без тебя тут пару часов по человечески поговорили, а тут ты! ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:12 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosТы не внимателен - коллекции areEvents, monEvents локальные Я про lock (algroup). Эвенты ждутся после этого лока, а мониторы внутри. выделил нужные строкиViPRosКод (создание процесса - очень большой), а так начало Код: c# 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18. 19. 20. 21. 22. 23. 24. 25. 26. 27. 28. 29. 30. 31. 32. 33. 34. 35. 36. 37. 38. 39. 40. 41. 42. 43. 44. 45. 46. 47.
-----------блабла и конец Код: c# 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13.
Про блокировку AutoResetEvent.WaitAll() ничего не нашел, в хэлпе только про WaitOne() ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:17 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosони все потокобезопасные :) Сожалею, но это не отмаз). ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:20 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima TViPRosТы не внимателен - коллекции areEvents, monEvents локальные Я про lock (algroup). Эвенты ждутся после этого лока, а мониторы внутри. выделил нужные строкиViPRosКод (создание процесса - очень большой), а так начало Код: c# 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18. 19. 20. 21. 22. 23. 24. 25. 26. 27. 28. 29. 30. 31. 32. 33. 34. 35. 36. 37. 38. 39. 40. 41. 42. 43. 44. 45. 46. 47.
-----------блабла и конец Код: c# 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13.
Про блокировку AutoResetEvent.WaitAll() ничего не нашел, в хэлпе только про WaitOne() Ну все правильно ==> foreach (var e in monitorEventsObjects) Monitor.Enter(e); установили блокировку (только не для себя, мы не ждем эти события - мы их для других поставили) тут тоже для себя зеленая дорога (сигнал установлен в конструкторе), а после WaitAll двери захлопываются ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:26 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
System.collections.concurrent. Минимальный лок на минимальное время содердится в коде метода List.Add(Object). А потом уже мониторы, семафоры и блок по логике процессов. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:27 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosНу все правильно ==> foreach (var e in monitorEventsObjects) Monitor.Enter(e); установили блокировку (только не для себя, мы не ждем эти события - мы их для других поставили) тут тоже для себя зеленая дорога (сигнал установлен в конструкторе), а после WaitAll двери захлопываются всё же тут напрашивается rx ) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:29 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Petro123ViPRosони все потокобезопасные :) Сожалею, но это не отмаз). му**ло, они все ConcurrentDictionary, Bag, Queue, Satck, ... ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:30 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRosНу все правильно ==> foreach (var e in monitorEventsObjects) Monitor.Enter(e); установили блокировку (только не для себя, мы не ждем эти события - мы их для других поставили) тут тоже для себя зеленая дорога (сигнал установлен в конструкторе), а после WaitAll двери захлопываются всё же тут напрашивается rx ) RXы внутри точно так же сделаны ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:31 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosRXы внутри точно так же сделаны это верно, но позволяет не городить огороды, и сосредоточиться на главном ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:34 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRosRXы внутри точно так же сделаны это верно, но позволяет не городить огороды, и сосредоточиться на главном Хвост!!!!! Я показал 10 строк кода! Какой еще огород!!! ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:36 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
И тут это самое главное - запустить параллельно те процессы, которые не претендуют на одни и те же ресурсы. Эти 5-10 строк кода полностью решают данную задачу. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:38 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosPetro123пропущено... Сожалею, но это не отмаз). му**ло, они все ConcurrentDictionary, Bag, Queue, Satck, ... Да? У них ConcurrentDictionary появился метод Add(..... Уверен? "Ты материшься значит не прав" ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:39 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Petro123ViPRosпропущено... му**ло, они все ConcurrentDictionary, Bag, Queue, Satck, ... Да? У них ConcurrentDictionary появился метод Add(..... Уверен? "Ты материшься значит не прав" Как же ты надоел ViPRoshVosttпропущено... хотя может это тот случай, когда что-то рабочее за вменяемое время написать -- уже победа. Хвост не горячись - потокобезопасность коллекции делают потокобезопасным только их, а не твой код все коллекции там потокобезопасные (кроме особых случаев - созданы только для лока) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:45 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosХвост!!!!! Я показал 10 строк кода! Какой еще огород!!! ну огород с локами, я просто всегда думаю в контексте разработки, в которой участвует много людей, и с учётом того, что люди приходят/уходят, поэтому, да, огород :) а также скорее всего, получится организовать конвеер с очередью. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:50 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosИ тут это самое главное - запустить параллельно те процессы, которые не претендуют на одни и те же ресурсы. Эти 5-10 строк кода полностью решают данную задачу. ну ок :) для обсуждения нужна была бы понятная, пусть упрощённая, но полная задача. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:51 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttа также скорее всего, получится организовать конвеер с очередью. с конвеером есть проблемы - не все процессы идут прямоточно есть процессы со сроками хранения продукции, с гарантийными сроками и т.д. и часто не укладываешься в эти сроки их приходится вернуть в очередь, вся цепочка уничтожается и идет перепланировка скорее всего можно что то придумать - в следующий раз переведу все в DataFlow (если доживу) ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:55 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRosИ тут это самое главное - запустить параллельно те процессы, которые не претендуют на одни и те же ресурсы. Эти 5-10 строк кода полностью решают данную задачу. ну ок :) для обсуждения нужна была бы понятная, пусть упрощённая, но полная задача. задача полная m работ n ресурсов …. - в постановка теории расписаний - т.е. самая упрощенная модель ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 16:57 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVostt, rx не вижу для него. У rx основа события извне. Причем асинхронные. А у него обсчёт вариантов. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 17:52 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosDima Tпропущено... Я про lock (algroup). Эвенты ждутся после этого лока, а мониторы внутри. выделил нужные строкипропущено... Про блокировку AutoResetEvent.WaitAll() ничего не нашел, в хэлпе только про WaitOne() Ну все правильно ==> foreach (var e in monitorEventsObjects) Monitor.Enter(e); установили блокировку (только не для себя, мы не ждем эти события - мы их для других поставили) тут тоже для себя зеленая дорога (сигнал установлен в конструкторе), а после WaitAll двери захлопываются Я просил код где максимальная нагрузка, а ты старт-стоп показал, самое важное вырезал. Не хочешь обсуждать - твое право, но зачем так тролить? Удачи. ... |
|||
:
Нравится:
Не нравится:
|
|||
03.07.2018, 20:38 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
Dima TЯ просил код где максимальная нагрузка, а ты старт-стоп показал, самое важное вырезал. Не хочешь обсуждать - твое право, но зачем так тролить? Удачи. Да там обычный код вычислительный (создается множество производственных процессов для производственных структур, которые заблокированы как раз этими строчками и выбирается лучший процесс по заданному критерию при заданных ограничениях), ничего особенного (но объемом в несколько тыщ строк). Код этот очень быстрый и не требует оптимизации. Раньше однопоточная версию устраивала, так как процессов таких надо было выбрать 2-5 миллиона из 10-20. Теперь цифры выросли на порядок и мне надо как то все это вертикально масштабировать, потому решил и этот код распараллелить. А распараллеливание этого кода не всегда может быть эффективен. Допустим, если производственных мощностей мало и они универсальны, то все техпроцессы будут выполняться на любом из них (или все рабочие универсальны), тогда по любе алгоритм все процессы поставить в очередь это как многозадачность в однопроцессорной машине без IO). Тут распараллеливание только мешает. Потому самая сложная задача ФОРМИРОВАНИЕ этой очереди (фронта работ) для алгоритма планирования. Это похоже на выталкивание по приоритетам (которые вычисляются в зависимости от производственных структур, структуры работ и т.д. много параметров. Если коротко, то делается вот что. 1. Кто то разузловывает изделие/проект... (которые в производственных заказах специфированы), находить терминальные ДСЕ, выбирает все альтернативные ТП и из их терминальных (начальных) операций формирует очередь процессов (ТП) 2. Кто то анализирует эту очередь на совместимость по многим политикам - переналадки (упорядочение для минимизации) - динамические сборы (печи, гальваника, транспорт,...покраска сушка - совместная обработка) - технологические сборы (совместная обработка сопрягаемых поверхностей) -- и выкидывает в фронт работ (оттуда можно их брать для планирования - где будем делать, кто будет, на чем будет, когда будет,... куча ограничений) 3. Кто то эти работы параллельно (раньше был один поток и он успевал) планирует и если что то не так все начинается с п.2 4. После того как какое то изделие/заказ/проект/…. окончательно запланирован идет параллельно запись. Вот вся задача ооооочень коротоко. Мы обсуждали часть п.3., которую я переделал недавно. И я никого не троллил, а просто спросил кое что. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2018, 01:44 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRos, Интересно, а человек в этом алгоритме участвует? Может он внести изменения в процессе, или только на конечном или начальном этапах? ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2018, 10:58 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRos, Интересно, а человек в этом алгоритме участвует? Может он внести изменения в процессе, или только на конечном или начальном этапах? Человек управляет алгоритмом через политики, ограничения и параметры процессов. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2018, 12:25 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRos, То есть только на начальном этапе. Поправить "в середине" нельзя? Или исправить результат? Я понимаю, что это возможно вообще не требуется. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2018, 15:45 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRos, То есть только на начальном этапе. Поправить "в середине" нельзя? Или исправить результат? Я понимаю, что это возможно вообще не требуется. Хвост! Там миллионы процессов генерируются (да хоть сотни), что ты там хочешь в интерактиве делать? Поправить всегда можно, после расчетов видны состояние заказов, указаны заказы с нарушениями директивных сроков и т.д. Если что то не устраивает, то можешь менять политики, ограничения, параметры и запустить перерасчет. А так делается по такой схеме. 1. Получили расписание. 2. Работаем и вводим факт. 3. На мониторе диспетчеров видны отклонения. Когда отклонения не влезают ни в какие ворота (что решает диспетчер или программа по заданным политикам - допустим отклонение в сутки - перерасчет автоматически) инициируется перерасчет. Перерасчет начинается локально (сначала внутри вышестоящего контекста - для РМ это допустим Участок, для Участка - Пролет, Цех и т.д.) и если можно отклонения компенсировать (т.е. планы других структурных элементов не затрагиваются), то перерасчет заканчивается) и идет эскалация до полной компенсации отклонений. В худшем случае (обычно когда выбраны неадекватные политики - допустим JIT) пересчитывается все расписание. Потому очень важна скорость расчетов. А так диспетчер может вручную переставить палки по своему усмотрению (основной режим работы всяких херовых ЕРП) - но я бы дал ему по башке за это. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2018, 16:22 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
После первого расчета расписания получаются так называемые реперные точки (В ВИП.Производстве они называются "Устойчивые к перезапуску процессы". Если при перерасчете эти реперные точки смещены, то по идее я должен оповестить вышестоящие органы - владельцев этих процессов, но пока я это не сделал - нафиг никому ничего не надо. Это точки обычно - моменты отгрузки покупателю, моменты пополнения запасов (закупки, кооперация,...,), финансовые операции и т.д. вещи связанные с внешней логистикой. В принципе в серийном и массовом производстве после перерасчета расписание должна удалиться автоматически, оставив только реперные точки. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2018, 16:29 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
ViPRosКогда отклонения не влезают ни в какие ворота (что решает диспетчер или программа по заданным политикам - допустим отклонение в сутки - перерасчет автоматически) инициируется перерасчет. Ну отклонения понятно, а переносы? По времени, или использование освободившихся ресурсов. Такое. ViPRosА так диспетчер может вручную переставить палки по своему усмотрению (основной режим работы всяких херовых ЕРП) - но я бы дал ему по башке за это. Я же не знаю, какие у вас регламенты. Часто самые умные и отлаженные процессы не всегда работают в контексте "данного случая". В целом понятно. ViPRosЕсли при перерасчете эти реперные точки смещены, то по идее я должен оповестить вышестоящие органы - владельцев этих процессов, но пока я это не сделал - нафиг никому ничего не надо. А этот момент управляется только разработчиком? ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2018, 18:29 |
|
AutoResetEvent vs Monitor
|
|||
---|---|---|---|
#18+
hVosttViPRosЕсли при перерасчете эти реперные точки смещены, то по идее я должен оповестить вышестоящие органы - владельцев этих процессов, но пока я это не сделал - нафиг никому ничего не надо. А этот момент управляется только разработчиком? Все что я пишу - мое. От А до Я. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.07.2018, 18:46 |
|
|
start [/forum/topic.php?all=1&fid=20&tid=1399306]: |
0ms |
get settings: |
9ms |
get forum list: |
11ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
35ms |
get topic data: |
10ms |
get forum data: |
2ms |
get page messages: |
139ms |
get tp. blocked users: |
1ms |
others: | 310ms |
total: | 523ms |
0 / 0 |