ReSQL.ru
     
powered by simpleCommunicator - 2.0.61     © 2026 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / куда деть старые данные?
10 сообщений из 10, страница 1 из 1
куда деть старые данные?
    #39194951
kkv79
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
kkv79
Участник
у меня есть таблица с заказами
она постоянно растёт.
есть текущие заказы и есть завершённые.
завершённые заказы я помечаю end_=true
работа идёт по заказам where end_ is null
у меня есть индекс по этому полю
Код: sql
1.
2.
3.
CREATE INDEX orders_idx21 ON public.orders
  USING btree (end_)
  WHERE (end_ IS NULL);


в принципе всё работает быстро
но с каждым месяцем сервак всё больше и больше кушает оперативы.

просто грохнуть старые данные нельзя, ибо отчёты могут пригодится за прошлые годы

что бы такого сделать, чтоб и отчёты работали и память при этом не кушало?
...
Рейтинг: 0 / 0
17.03.2016, 23:54
| Ответить | Цитировать | Написать  
куда деть старые данные?
    #39194970
Фотография vyegorov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
vyegorov
Участник
kkv79,

Что значит "кушает память"? Покажите вывод системных утилит демонстрирующий ситуацию.
...
Рейтинг: 0 / 0
18.03.2016, 00:39
| Ответить | Цитировать | Написать  
куда деть старые данные?
    #39195573
kkv79
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
kkv79
Участник
...
Рейтинг: 0 / 0
18.03.2016, 16:37
| Ответить | Цитировать | Написать  
куда деть старые данные?
    #39195576
kkv79
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
kkv79
Участник
новые клиенты стартуют с 2Gb оперативы
...
Рейтинг: 0 / 0
18.03.2016, 16:38
| Ответить | Цитировать | Написать  
куда деть старые данные?
    #39195597
Alexius
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexius
Участник
kkv79,

аппетиты по памяти у базы регулируются через shared_buffers и work_mem/max_connections. то что там 2ГБ это не значит что backend для чего-то 2ГБ сожрал, в это поле входит и разделяемая память (shared_buffers).
...
Рейтинг: 0 / 0
18.03.2016, 17:07
| Ответить | Цитировать | Написать  
куда деть старые данные?
    #39195666
Фотография vyegorov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
vyegorov
Участник
kkv79,

Вывод `free -m` более информативен для общей картины по памяти.
...
Рейтинг: 0 / 0
18.03.2016, 18:14
| Ответить | Цитировать | Написать  
куда деть старые данные?
    #39195702
kkv79
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
kkv79
Участник
Код: plaintext
1.
2.
3.
4.
# free -m
             total       used       free     shared    buffers     cached
Память:      55360      50663       4696      13901         21      18506
-/+ буферы/кэш:      32136      23224
Swap:        56319          0      56319
...
Рейтинг: 0 / 0
18.03.2016, 18:47
| Ответить | Цитировать | Написать  
куда деть старые данные?
    #39195737
Фотография vyegorov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
vyegorov
Участник
kkv79,

55Гб всего, 32 реально заняты, 23 свободны (однако ядро 18 использует под кэши, может в любой момент отдать по запросу).

Теперь надо эту картинку мониторить.
Если во второй строчке (там где "-/+ буферы/кэш:") второе число становиться маленьким, да ещё и своп начинает расти — вот тут уже проблемы и надо разбираться.
...
Рейтинг: 0 / 0
18.03.2016, 19:15
| Ответить | Цитировать | Написать  
куда деть старые данные?
    #39196245
Oleg Bartunov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Oleg Bartunov
Участник
kkv79,

читай про pg_pathman в блоге у Саши Короткова http://akorotkov.github.io/blog/2016/03/04/pg_pathman-beta-release/ и тебе будет счастье :)
...
Рейтинг: 0 / 0
19.03.2016, 23:30
| Ответить | Цитировать | Написать  
куда деть старые данные?
    #39196319
Фотография MasterZiv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
MasterZiv
Участник
kkv79,


если бд сделана правильно, используются индексы, то старые данные в таблицах тебе не помешают. Просто храни их, вечно. В этом нет никаких сложностей пока размеры таблиц не превысят порог примерно в миллиард записей.

тогда можно будет подумать о архивации.
...
Рейтинг: 0 / 0
20.03.2016, 09:04
| Ответить | Цитировать | Написать  
10 сообщений из 10, страница 1 из 1
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / куда деть старые данные?
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение   Полит. конфиден.  
NoSQL.ru       Кролег: Проекты, Новости, Чат       РЕД ФОРУМ       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=53&fpage=94&tid=1997342]:
 0ms
get settings:
 4ms
get forum list:
 13ms
check forum access:
 3ms
check topic access:
 3ms
track hit:
 42ms
get topic data:
 8ms
get forum data:
 2ms
get page messages:
 26ms
get tp. blocked users:
 1ms
others: 197ms
total:  299ms
созд. / загр.: 299ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]