powered by simpleCommunicator - 2.0.52     © 2025 Programmizd 02
Форумы / Microsoft SQL Server [игнор отключен] [закрыт для гостей] / Подготовка легковесных копий 1с для разработки
14 сообщений из 14, страница 1 из 1
Подготовка легковесных копий 1с для разработки
    #40039297
LexFreeman
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Здравствуйте.
Рабочая база данных весит 1.2 Тб.
Для каждого программиста 1с создана копия рабочей бд с полным набором данных.
Есть задача подготовить автоматизированную копию с обрезанными данными для разработки.
Решение в лоб:
truncate table + shrinkfile выполняются около 36 часов. Есть идеи как ускорить процесс?
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039305
msLex
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
LexFreeman
truncate table + shrinkfile выполняются около 36 часов


Хмм, это очень странно.

Что именно тормозит, truncate table или shrinkfile
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039310
LexFreeman
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
msLex,
тормозит конечно шринк
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039312
0wl
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
0wl
Гость
В качестве идеи:

можно включить партиционирование в основной базе и потом копировать разработчикам только актуальные секции
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039325
msLex
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
LexFreeman
msLex,
тормозит конечно шринк



А насколько база заполнена после truncate table?

Может быстрее будет отребилдить все оставшиеся таблицы и шринкать с truncateonly?

Логи тоже шринкуются?
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039337
LexFreeman
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
0wl,

партиционирование изучаю, спасибо
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039339
LexFreeman
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
msLex
LexFreeman
msLex,
тормозит конечно шринк



А насколько база заполнена после truncate table?

Может быстрее будет отребилдить все оставшиеся таблицы и шринкать с truncateonly?

Логи тоже шринкуются?


На данном этапе база заполнена на 70% после truncate table. Это тестовый вариант.
Отребилдить как? shrinkfile notruncate?
база в простом режиме восстановления, лог пустой.
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039345
msLex
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
LexFreeman

На данном этапе база заполнена на 70% после truncate table. Это тестовый вариант.


Если база остается заполнена на 70%, то ребилд не ваш вариант.

LexFreeman

Отребилдить как?
shrinkfile notruncate?

alter table .. rebuild
Но при 70% заполнении, как я уже сказал, это не вариант.
Могло бы помочь, оставайся в базе 5-10 % данных, тогда ребилд с высокой вероятностью "прижал" бы данные к началу файла(ов) данных и, что самое главное, сделал бы это значительно быстрее, чем shrink. После чего shrinkfile c truncteonly быстро бы высвободил место "справа" от последних существующих данных.

Кстати, truncate - операция асинхронная, т.е. физическое удаление данных (а значит и освобождение страниц) происходит не мгновенно.
Возможно, ваш shrink в том числе переносит уже удаленные данные.



LexFreeman

база в простом режиме восстановления, лог пустой.

Пустой не значит не занимает место на диске, какие файлы и с какими опциями вы шринкаете?

И вообще, зачем вам шринк при такой внушительной заполненности базы. Выиграете 300 - 400 ГБ при исходном размере в 1.2 ТБ, не уж то это так критично?
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039351
msLex
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
0wl
В качестве идеи:

можно включить партиционирование в основной базе и потом копировать разработчикам только актуальные секции


А насколько 1С (я сейчас про сам сервер приложений) позволяет секционировать данные?
Могу ли я на свое усмотрение секционировать, например, какую-нибудь ГК по дате проводки?
Не возникнет ли при этом сбоев в работе самой 1С?
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039355
LexFreeman
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
msLex
0wl
В качестве идеи:

можно включить партиционирование в основной базе и потом копировать разработчикам только актуальные секции


А насколько 1С (я сейчас про сам сервер приложений) позволяет секционировать данные?
Могу ли я на свое усмотрение секционировать, например, какую-нибудь ГК по дате проводки?
Не возникнет ли при этом сбоев в работе самой 1С?

Майкрософт пишет, что для приложений секционирование прозрачно. Влияет ли секционирование на 1с не знаю, надо пробовать.
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039361
msLex
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
LexFreeman
Майкрософт пишет, что для приложений секционирование прозрачно.

Только если эти приложения не занимаются "сверкой" текущей структуры базы с их ожиданиями.
Насколько я слышал, 1С это делает.
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039368
LexFreeman
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
msLex
[
Пустой не значит не занимает место на диске, какие файлы и с какими опциями вы шринкаете?

И вообще, зачем вам шринк при такой внушительной заполненности базы. Выиграете 300 - 400 ГБ при исходном размере в 1.2 ТБ, не уж то это так критично?

dbcc shrinkfile (dbfile,0)
Логфайл пустой - занимает 25мб.

400гб на десяти копиях разработчиков это уже 4тб.
Вообще, тестовый набор данных не окончательный. По быстрому выбрали те таблицы, которые точно никому не нужны.
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039380
0wl
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
0wl
Гость
msLex,

1С 7 очень истерично относилась к структуре БД и падала при любом несоответствии своим ожиданиям.

1С 8 в целом все равно, лишь бы запросы выполнялись. Единственное - при реструктуризации секционированной таблицы (например, если потребуется добавить колонку), 1С пересоздаст эту таблицу заново и всё секционирование превратится в тыкву.

Надо, конечно, протестировать основные сценарии использования на стенде. Но все такие особенности преодолимы
...
Рейтинг: 0 / 0
Подготовка легковесных копий 1с для разработки
    #40039396
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
LexFreeman,

Рассмотрите самый простой вариант - введение архива + усечение рабочий базы
...
Рейтинг: 0 / 0
14 сообщений из 14, страница 1 из 1
Форумы / Microsoft SQL Server [игнор отключен] [закрыт для гостей] / Подготовка легковесных копий 1с для разработки
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]