Гость
Войти | Профиль | Очистить
Целевая тема:
Создать новую тему:
Автор:
Действия ...
Форумы / ADO.NET, LINQ, Entity Framework, NHibernate, DAL, ORM [игнор отключен] [закрыт для гостей] / dataTable.Load порциями / 3 сообщений из 3, страница 1 из 1
22.11.2019, 13:41
    #39892879
a_voronin
a_voronin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
dataTable.Load порциями
Господа, существует возможность открыть DataReader и загнать данные в DataTable.

Код: c#
1.
2.
3.
         var queryCommandReader = cmd.ExecuteReader();
         DataTable dataTable = new DataTable();
         dataTable.Load(queryCommandReader);



Я читаю очень длинный поток данных 100+ лямов. В память все за раз не влезет.

Внимание вопрос: есть ли возможность не записывая цикла

Код: c#
1.
while (queryCommandReader.Read())



загнать порцию данных в таблицу, массив и т.п. одним махом (например порцию в 100000 строк)? Потом я её обработаю, потом она пойдет куда надо, потом я загоню в таблицу следующие 100000 строк и т.д.

Нужен dataTable.Load, который не будет вычитывать весь reader, а только до определенного предела.

Мне нужна скорость. На

Код: c#
1.
while (queryCommandReader.Read())



скорость теряется
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
22.11.2019, 16:29
    #39893046
Roman Mejtes
Roman Mejtes
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
dataTable.Load порциями
зачем использовать datatable если вы используйте такое количество?
что мешает разбить recordset'ы через over?
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
25.11.2019, 08:17
    #39893742
a_voronin
a_voronin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
dataTable.Load порциями
Roman Mejtes,

Мешает то, что источник SAP HANA и ридер -- SapHanaReader.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
Форумы / ADO.NET, LINQ, Entity Framework, NHibernate, DAL, ORM [игнор отключен] [закрыт для гостей] / dataTable.Load порциями / 3 сообщений из 3, страница 1 из 1
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение
созд. / загр.: 486ms
Закрыть
start [/forum/topic.php?fid=17&mobile=1&tid=1349095]:
 0ms
get settings:
 9ms
get forum list:
 17ms
check forum access:
 4ms
check topic access:
 4ms
track hit:
 57ms
get topic data:
 13ms
get forum data:
 2ms
get page messages:
 46ms
get tp. blocked users:
 2ms
others: 332ms
total:  486ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]