Читается большой набор данных в Postgres посредством ADOQuery



Таких запросов 2, выполняются последовательно, на выходе 2 txt файла соответственно
Вводные:
1. Задача выполняется ночью, одним клиентом, то есть набор данных точно не изменится, следовательно можно readonly
2. Клиент крутится на машине, физически близкой к серверу (ping = 0)

В настоящий момент используется clUseClient и ctKeyset. Но вот что не могу понять. ADOQuery и ADOConnection используются одинаковые, но файлы заполняются с разной скоростью. Так, первый большой файл в 250 МБ формируется около 4 часов, в то время как второй около 50 МБ формируется около 15 минут. Хотя запросы очень отличаются и обращаются к разным полям хотя тех же самых таблиц БД. Как я понимаю второй файл формируется так быстро потому что данные уже были переданы сервера и кэшировались во время выполнения первого запроса и заполнения первого файла. Вот интересно - если поменяю местами запросы, будет ли первый файл (после изменения уже второй) заполнятся в 3 раза быстрее как сейчас второй

В общем итоговый вопрос - для максимального быстродействия - какой лучше использовать CursorLocation - clUseClient или clUseServer? И далее какой CursorType в зависимости от выбранного CursorLocation?

Хм...поменял местами формирование файлов - ничего не изменилось. Второй файл в очереди (сейчас первый) так и формируется быстро - за 10 минут. Другой файл (в 5 раз больше по размеру) должен по идее формироваться за час, но обычно формируется за 4 часа на том же adoquery и adoconnection. Проверим что будет сейчас

Cobalt747,
нет - пока сравниваю один курсор (client) на разных запросах
server пока вообще не пробовал - вот сейчас наверное проверю

Gerasimenko,
не все так просто. поля полученного dataset определенным образом обрабатываются
командами Delphi прежде чем кладутся в файл. Не уверен что получится то же самое делать непосредственно в запросе.
Да и что это глобально даст? Неужели напрямую из запроса в текстовый файл будет сохраняться быстрее?

Сейчас кстати новая проблема вылезла, которой раньше не было - большой файл (который около 250 МБ) не записывается до конца - то 150 МБ, то сейчас вообще 40 - похоже postgres сбрасывает соединение. Интересно, если поменять курсор на server - поможет ли решить хотя бы эту проблему

Смена курсора на server дала отличные результаты - файл который формировался 4 часа сформировался за 10 минут