powered by simpleCommunicator - 2.0.19     © 2024 Programmizd 02
Map
Форумы / Firebird, InterBase [игнор отключен] [закрыт для гостей] / Как замусорить БД?
25 сообщений из 28, страница 1 из 2
Как замусорить БД?
    #40132008
синоп
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Для теста надо получить БД с мусором.
Т.е., допустим, в БД есть пустая тестовая таблица. Надо с помощью некоторых манипуляций, сделать так, чтобы в этой таблице были мусорные версии, и производительность некоторых запросов была бы очень низкой (для низкой производительности надо, видимо, чтобы мусорных версий было очень много. Или все-равно, мусора или нет. Главно, чтобы записей в таблице было много?).
Желательно (если это возможно), получить результат с помощью IBE и его скриптов.
Как вообще определить, что в БД (таблице) есть мусор?
Если Oldest transaction "застряла" -- это гарантирует, что в БД есть некоторое кол-во мусора?
Если Oldest transaction не "застряла" -- в БД может быть мусор?
Что такое savepoint (с помощью которых сервер преобразует rullback в commit)? Когда он не может преобразовать?
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132013
Фотография kdv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
синопКак вообще определить, что в БД (таблице) есть мусор?
gstat -r database
синопЕсли Oldest transaction "застряла" -- это гарантирует, что в БД есть некоторое кол-во мусора?
нет.
синопЕсли Oldest transaction не "застряла" -- в БД может быть мусор?
может
синопЧто такое savepoint (с помощью которых сервер преобразует rullback в commit)? Когда он не может преобразовать?
чушь какая-то. при чем тут savepoint вообще? rollback превращается в коммит если не было изменений в транзакции (undo log).
http://www.ibase.ru/mga

Чтобы нагенерить версии, надо
1. стартануть транзакцию snapshot (застрянет OST и OAT)
2. в других транзакциях делать update/delete
3. смотреть gstat -r
4. когда надо, завершить транзакцию snapshot
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132015
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
kdvrollback превращается в коммит если не было изменений в транзакции (undo log).

....или после применения этого самого undo log.
Posted via ActualForum NNTP Server 1.5
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132646
синоп
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
kdv,
Спасибо.
А можно сделать, чтобы версии мог убрать только sweep?
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132655
dimitr
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
update/delete 100500 записей + rollback
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132660
Фотография kdv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
синопА можно сделать, чтобы версии мог убрать только sweep?
для этого надо во всех коннектах isc_dbp_no_garbage_collect. Тогда в них не будет собираться мусор.
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132686
синоп
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
dimitr
update/delete 100500 записей + rollback

роллбэк снапшота?
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132695
синоп
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
kdv

Чтобы нагенерить версии, надо
1. стартануть транзакцию snapshot (застрянет OST и OAT)
2. в других транзакциях делать update/delete
3. смотреть gstat -r
4. когда надо, завершить транзакцию snapshot

Я делаю так:
1. Стартую снапшот
2. В тр-ии А вставляю запись и подтверждаю тр-ю;
3. В тр-ии В удаляю запись с шага 2 и подтверждаю тр-ю.
Повторяю 2 и 3 много раз. Насколько понял Еманова, это надо повторить 100500 раз;
4. Подтверждаю снапшот транзакцию (насколько понял Еманова, ее нужно откатывать)

Всн правильно или нет?
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132740
Фотография Gallemar
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
синоп
Всн правильно или нет?

Нет. Забыл сделать gstat -r и проверить есть мусор или нет.
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132751
Фотография Симонов Денис
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
синоп,

а теперь самый главный вопрос. Что тестируем?
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132775
синоп
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Gallemar
Нет. Забыл сделать gstat -r и проверить есть мусор или нет.

Мусор был, но, видимо из-за ошибок в программе генерации этого самого мусора.
Сейчас кажется более логичным вставлять записи до старта снапшота.
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132783
синоп
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Симонов Денис
а теперь самый главный вопрос. Что тестируем?

Не правильно сказал... Не тестируем, а показываем.
То, что свип избавляет от проблем с производительностью, которых нет после рестора.
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132784
Мимопроходящий
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
синоп
Не правильно сказал... Не тестируем, а показываем.
То, что свип избавляет от проблем с производительностью, которых нет после рестора.
архитектура какая?
версия?
платформа?
разрыв какой?
ежесуточный прирост транзакций и мегабайт какой?
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132809
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
синопНе тестируем, а показываем.То, что свип избавляет от проблем с
производительностью, которых нет после рестора.
Пристрелить диверсанта.

От проблем с производительностью избавляет рихтовка рук того заскорузлого
пацана, что приложение написал.
Posted via ActualForum NNTP Server 1.5
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40132895
Фотография kdv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
синопНе правильно сказал... Не тестируем, а показываем.
То, что свип избавляет от проблем с производительностью, которых нет после рестора.
господи, ахинея какая...
Вы что, сразу не могли запустить gstat -r ?
Если версии есть, так см. mon$transaction, на наиболее длительные транзакции. Почему и зачем, и изничтожить их.
И не надо никаких сценариев воспроизведения, они и так все известны.
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40133121
синоп
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Мимопроходящий
архитектура какая?
версия?
платформа?
разрыв какой?
ежесуточный прирост транзакций и мегабайт какой?

Везде, к сожалению винда и пока 1.5.
Все остальное везде разное.
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40133132
Гаджимурадов Рустам
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Дремучие партизаны пошли, ещё полуторку используют.
Posted via ActualForum NNTP Server 1.5
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40133136
синоп
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Dimitry Sibiryakov

Пристрелить диверсанта.

От проблем с производительностью избавляет рихтовка рук того заскорузлого
пацана, что приложение написал.

Опять же, то что сборка мусора выполняется не известно когда, не известно как часто, с активными коннектами -- это, имхо, неправильно.
ИМХО, лучше отключить автоматическую и делать это ГФИКСом монопольно каждую ночь.
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40133141
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
синопОпять же, то что сборка мусора выполняется не известно когда, не известно как
часто, с активными коннектами -- это, имхо, неправильно.

Да, неправильно. Поэтому надо "учиться, учиться и учиться" чтобы точно знать
кем, когда и как она выполняется. Подсказка: это детерминированный процесс, не
имеющий никакого отношения к "гфиксу".

PS: В отличии от слоновьего автовакуума.
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40133143
Фотография kdv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
синопОпять же, то что сборка мусора выполняется не известно когда, не известно как часто, с активными коннектами -- это, имхо, неправильно.
не надо путать штатную сборку мусора и свип (автоматический или нет).
На ibase.ru есть несколько достаточно подробных статей и про сборку мусора, и про свип, и т.д. Вместо того чтобы фантазировать, лучше сначала почитать.
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40133145
синоп
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
kdv
господи, ахинея какая...
Вы что, сразу не могли запустить gstat -r ?
Если версии есть, так см. mon$transaction, на наиболее длительные транзакции. Почему и зачем, и изничтожить их.
И не надо никаких сценариев воспроизведения, они и так все известны.

Понятно, что с mon$transaction искать долгие транзакции проще...
Но когда ее нет, это делать затруднительно.

Конечно, это решаемый вопрос. Но это дело точно не 2х недель.
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40133150
синоп
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
kdv
не надо путать штатную сборку мусора и свип (автоматический или нет).
На ibase.ru есть несколько достаточно подробных статей и про сборку мусора, и про свип, и т.д. Вместо того чтобы фантазировать, лучше сначала почитать.

Я имел ввиду авто-свип, который по Sweep interval
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40133151
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
синопНо когда ее нет, это делать затруднительно.

Нет, достаточно рассказать тому заскорузлому пареньку о средствах мониторинга в
используемой им библиотеке доступа к серверу.

А админу БД - о том как читать вывод gstat.
Posted via ActualForum NNTP Server 1.5
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40133167
Мимопроходящий
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
синоп
Везде, к сожалению винда и пока 1.5.
сервер CS, или SS ?
...
Рейтинг: 0 / 0
Как замусорить БД?
    #40133169
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
синопЯ имел ввиду авто-свип, который по Sweep interval

Да, да, все уже давно поняли, что ты очередной чайник, их путающий его со
сборкой мусора, к которой он не имеет никакого отношения. Смотри ответы выше.
Posted via ActualForum NNTP Server 1.5
...
Рейтинг: 0 / 0
25 сообщений из 28, страница 1 из 2
Форумы / Firebird, InterBase [игнор отключен] [закрыт для гостей] / Как замусорить БД?
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]