вылечить этот недуг может такая модификация алгоритма:

которая, кстати, приведёт к заметному увеличению потока сущностей, сбрасываемых на диск:

1001-я сущность, например, будет сброшена полюбасу, потому что для неё (countOfBest >= runningCounter / 1000) перестанет выполняться.

нет, не определился. У меня вообще концепция проекта эволюционирует. То, что мы тут мурыжим, это не "задача, которую я решаю", а малюсенькая служебная приблуда в ней.
ну вот вы и начали путаться, где у нас 1000 стоит -- в числителе или в знаменателе...

доктор сказал "в морг", значит в морг. Если критерий (он же алгоритм) сказал "сохранить()", значит сохранить.

я не знаю. Я даже не знаю, буду ли я сбрасывать 1/1000, или 1/10000, или 1/1000000.

Я уже писал вчера, что у меня, на самом деле, "пакетная" обработка данных, то есть мне необходимо осуществлять не один "поток записи на диск (типа, со скважностью 1/1000)", а как минимум 100 таких потоков одновременно.

Но публика же на слове ловит: раз на вопрос "Тысяча? Десть тысяч? Миллион?" ( 22321305 ) ответил "миллиард" -- значит все, лапка завязла, птичке конец -- 1/1000 от миллиарда это миллион -- "ха-ха, всего-то".

на шестой странице топика вы всё ещё не поняли, что мне не нужны ни 1000, ни даже 1/1000 (будем считать, что вы просто описАлись) "самых-самых высоких значений". Мне нужны сущности с "самыми высокими значениями", а не сами эти значения.

И я не буду накапливать их в "динамическом буфере" -- посмотрите четвертую реплику в обсуждении (сейчас какая по счёту, черт, сколько тут реплик на странице помещается?!):
-- вы понимаете, что означают слова " большая " и " нельзя "? Вы, наверное, думаете, что если нельзя, но очень хочется, то можно??

нет, не знаю, потому что просто не понимаю на что указывает местоимение "стандартное решение многократно предложено на первой странице".

вы продолжаете путать Q и сущности -- как мне донести до вас, что это не одно и то же?

А "этим пунктом ТЗ" я отсёк ровно то, что я им отсёк. Вы понимаете, что одобрив код, предложенный Dimitry Sibiryakov, и даже немного его поправив, я уже согласился (скрепя сердце) хранить в памяти всю кучу лучших значений Q? Не "всех числовых значений самого Q", как в том "пункте ТЗ", на который вы сейчас ссылаетесь, а "всех отобранных по критерию лучших числовых значений самого Q".

предметом задачи является именно критерий (и алгоритм) отбора сущностей для записывания оных "в файл", но ваш эпитет "нужные" не является таковым критерием (алгоритмом).

в задаче ни слова не сказано о (и у меня по факту нет) какой-либо "необходимости получения сущности", которая уже обработана программой, обратно в эту программу.

в ссылке ведущей куда? Вы прочитали в четвертой реплике в дискуссии ???

Эта программа занимается "разыгрыванием" по методу Монте-Карло, для чего создаёт эти сущности из ничего, из ДСЧ (на основе контекста Монте-Карлемой задачи, конечно), после чего их --возможно -- сбрасывает на диск и -- точно! -- уничтожает. И никакие ссылки на них после этого указывать не могут.

замечу, однако, что решение на основе "кучи лучших" более-менее оформилось. По решению "без кучи" -- типа, на основе П и Ш (как давно это было!) -- продвижения, увы, нет.

вы настойчиво продолжаете агитировать меня за то, чтобы я все сущности складывал в БД, я правильно вас понимаю? Несмотря на то, что в задаче русским по белому написано ???

(Писать в БД миллионы записей, которые точно потом не понадобятся -- это великое программистское искусство!)

вы модератор, у вас какие-то модераторские соображения, о которых я могу только догадываться ... но не стану. Я могу только констатировать, что у меня степень разумения задачи повысилась ... хотя и времени потрачено изрядно.

exp98, я не понимаю, что значит "переформулировать задачу" ... разве что поднять из 4-й реплики в тело поста -- может быть, заменив "хранить" на "хранить/накапливать"...