АлексейСДобрый день, коллеги.

Встала задача обращения файлами в десятки гб, реализовал на MemoryMapped files, тестировал пока на 4гб максимально, но кое-как работает. Однако у меня есть опасения, что на чтения то оно будет хорошо, а вот на запись лучше не использовать, потому как данные могут понадобиться, но они могут быть еще не записаны. Посему есть мысль оставить чтение на memorymapped, а запись реализовать через голый FileChannel + allocate DirectBuffer.
Спасибо.
Сама по себе идея работы с очень большими файлами вызывает удивление. Есть точка где данные
зарождаются. Есть точка где они обрабатываются и есть место где из них излекается отчёт.
Если вы переливаете из пустого в порожнее, копируете, реплицируете, материализируете
одно и то же в разных местах то можно дойти и до постановки в тербайты и петабайты.

Не думали проанализировать оптимизацию самого тех-задания. Да и Java хоть и быстра,
но на некоторых "ядерных" операциях с диском может быть не самой быстрой.