Приветствую,
Решили перевести проект на PostgreSQL но столкнулись с рандомными задержками, к примеру таблица outputs
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
Table "public.outputs"
Column | Type | Modifiers | Storage | Stats target | Description
-----------+----------+------------------------------------------------------+----------+--------------+-------------
id | integer | not null default nextval('outputs_id_seq'::regclass) | plain | |
trx_id | integer | | plain | |
addresses | bigint[] | default '{}'::bigint[] | extended | |
position | integer | | plain | |
amount | bigint | default 0 | plain | |
spent | boolean | default false | plain | |
Indexes:
"outputs_pkey" PRIMARY KEY, btree (id)
"index_outputs_on_addresses" btree (addresses)
"index_outputs_on_trx_id" btree (trx_id)
"index_outputs_on_trx_id_and_position" btree (trx_id, "position")
При первом запросе без кеша занимает около 12мс:
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
prometheus=> explain analyze SELECT "outputs".* FROM "outputs" WHERE "outputs"."trx_id" = 10212713 AND "outputs"."position" = 0 LIMIT 1;
QUERY PLAN
--------------------------------------------------------------------------------------------------------------------------------------------
Limit (cost=0.56..0.98 rows=1 width=50) (actual time=12.096..12.096 rows=1 loops=1)
-> Index Scan using index_outputs_on_trx_id on outputs (cost=0.56..17.91 rows=42 width=50) (actual time=12.096..12.096 rows=1 loops=1)
Index Cond: (trx_id = 10212713)
Filter: ("position" = 0)
Rows Removed by Filter: 1
Planning time: 0.045 ms
Execution time: 12.107 ms
(7 rows)
В таблице около 35M записей, прогнозируем рост до 100М
Так же очень долгий insert bulk записей, к примеру запрос INSERT INTO "outputs" ("trx_id", "addresses", "position", "amount") VALUES (15341844, '{813298}', 0, 4999500000), (15341844, '{11407753}', 1, 1001313) returning id; может занимать до 20ms, но в большинстве случаев исполняется за 0.5-1ms
vacuum\analyze делали.
Сервер 32GB RAM, конфиг:
synchronous_commit = off - временно отключили его что бы оптимизировать импорт
effective_cache_size = 23040MB
work_mem = 78643kB
maintenance_work_mem = 1920MB
checkpoint_segments = 32
checkpoint_completion_target = 0.7
wal_buffers = 16MB
default_statistics_target = 100
