Гость
Целевая тема:
Создать новую тему:
Автор:
Форумы / Java [игнор отключен] [закрыт для гостей] / JDBC, huge ResultSet, memory / 3 сообщений из 3, страница 1 из 1
01.07.2013, 21:09:28
    #38316367
questionar
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
JDBC, huge ResultSet, memory
Всем привет!

Есть огромная таблица, в ней огромное количество записей.
необходимо пройтись по всем записям и что-то с ними сделать.

Проблема в том, что после выполнения запроса, спустя какое-то время (в зависимости от настроек Xmx, Xms, Xmn и в зависимости от размера fetchSize) начинаются проблемы с памятью.

Существует ли возможность каким-либо образом "сбрасывать" resultSet?
Т.е., к примеру, после миллиона итераций resultSet.next() выполнить освобождение памяти для resultSet.

Или только один вариант - разбивать запрос на несколько и выполнять несколько запросов?

Заранее спасибо!
...
Рейтинг: 0 / 0
01.07.2013, 21:18:19
    #38316378
Blazkowicz
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
JDBC, huge ResultSet, memory
Стоит сначала поковырять настройки ResultSet-а
Например:
http://docs.oracle.com/javase/6/docs/api/java/sql/ResultSet.html#setFetchSize(int)
...
Рейтинг: 0 / 0
01.07.2013, 21:43:15
    #38316409
questionar
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
JDBC, huge ResultSet, memory
BlazkowiczСтоит сначала поковырять настройки ResultSet-а
Например:
http://docs.oracle.com/javase/6/docs/api/java/sql/ResultSet.html#setFetchSize(int)
Ага, пробовал.
Чем больше fetchSize, тем быстрее выполняется запрос и быстрее растет память
Чем меньше fetchSize, тем память медленнее растет, чаще вызывается gc, вначале редко вызывается full gc, потом чаще, но работает быстрее, чем если бы fetchSize был большим
...
Рейтинг: 0 / 0
Форумы / Java [игнор отключен] [закрыт для гостей] / JDBC, huge ResultSet, memory / 3 сообщений из 3, страница 1 из 1
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]