Роман Дынник
Dataset используют для объемов в среднем 10-20 тыс. записей, не больше. Может конечно и есть такие "мобильные" пользователи у которых по 5 гиг оперативки, но я таких еще не встречал
Posted via ActualForum NNTP Server 1.1

тоже стояла проблема с обработкой больших данных. База около 250000 записей, если задать плохой критерий поиска, то результатом может быть весь объем. Естестно это плохо сказывалось, да и загрузка в грид больше 10000 строк вела к большим тормозам.
Решено было сделать постраниченое отображение данных.
Загрузка проходила в два этапа:
1) по условиям запроса DataReader'ом в фоновом потоке(с небольшим приоритетом чтоб не нагружать систему) загружался массив (на самом деле это был DataTable с одним столбцом) идентификаторов
запрос примерно выглядит так:
2) при загрузке минимиально необходимого кол-ва строк (кол-во строк отображаемых на одной странице) в асинхронном режиме (не прекращая загрузки ID) загружалась информация в основную таблицу, которая и выводилась на экран
запрос примерно выглядит так:
Так же был организован специальный контрол для управления переходом по страницам даже в то время, когда все данные(ID) еще не загрузились.
Тоесть пользователь не дождавшись окончания загрузки уже мог работать с результатом
минус такого подхода состоял в том что при такой технологии необходимо два открытых независмых соединений с БД, ну и немного нестабильная работа(зависания) в 9х осях.