powered by simpleCommunicator - 2.0.59     © 2026 Programmizd 02
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / оптимизация инсертов
5 сообщений из 5, страница 1 из 1
оптимизация инсертов
    #39264583
fduch f.f.
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
рабочая нагрузка содержит в себе много запросов на вставку в одну большую таблицу
иногда эти запросы начинают выполняться параллельно и тогда увеличивается время их выполнения влоть до таймаутов
при этом друг друга они не блокируют (в pg_stat_activity блокировка = False)

сейчас в конфиге постгреса параметры по умолчанию
может есть какие-нибудь параметры которые имеет смысл поменять для оптимизации такого типа рабочей нагрузки?

или подскажите что почитать для оптимизации постгреса под инсерты
...
Рейтинг: 0 / 0
оптимизация инсертов
    #39264627
Alexius
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
fduch f.f.,

если конфиг совсем дефолтный, то смотреть для начала параметры shared_buffers, checkpoint_segments (max_wal_size в 9.5), checkpoint_timeout + возможно synchronous_commit и wal_writer_delay.
...
Рейтинг: 0 / 0
оптимизация инсертов
    #39264630
Jonhson
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
не являюсь гуру постгреса, но спросил бы про наличие уникальных индексов.

А в качестве лакарства предложил бы либо
1. писать в отдельные GTT, а потом лить в основную отдельным процессом
либо
2. ввести что-то типа session_id и сделать по нему партиции.
...
Рейтинг: 0 / 0
оптимизация инсертов
    #39264690
Фотография Maxim Boguk
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
fduch f.f.рабочая нагрузка содержит в себе много запросов на вставку в одну большую таблицу
иногда эти запросы начинают выполняться параллельно и тогда увеличивается время их выполнения влоть до таймаутов
при этом друг друга они не блокируют (в pg_stat_activity блокировка = False)

сейчас в конфиге постгреса параметры по умолчанию
может есть какие-нибудь параметры которые имеет смысл поменять для оптимизации такого типа рабочей нагрузки?

или подскажите что почитать для оптимизации постгреса под инсерты

Вы для начала скажите что у вас лимитирует скорость вставки.
Варианты: CPU - тогда все очень плохо и надо смотреть чтобы у вас избытка индексов на таблице не было или что сильно более вероятно диски - тогда syncronous_commit=off (если можете себе позволить по бизнес логике) + настройка checkpoints.
Если есть возможность делать вставки не по 1 записи через INSERT а пачками через COPY - будет сильно быстрее и по CPU и по дискам.

--
Maxim Boguk
www.postgresql-consulting.ru
...
Рейтинг: 0 / 0
оптимизация инсертов
    #39264699
fduch f.f.
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
всем спасибо, буду пробовать
...
Рейтинг: 0 / 0
5 сообщений из 5, страница 1 из 1
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / оптимизация инсертов
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]