|
|
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.04.2016, 10:26 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
ESTIMATE_ONLY ? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.04.2016, 10:30 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Вячеслав ЛюбомудровESTIMATE_ONLY ? Спасибо ! ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.04.2016, 10:58 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
ESTIMATE_ONLY=Y показывает реальный размер таблиц и их сумму Total estimation using BLOCKS method: 5800 MB - почти 6 Тб, а мне нужен размер дампа, чтобы выискать место для него. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.04.2016, 11:38 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Это и есть приблизительный размер дампа (данные тащить надо все, а вот индексы не надо -- достаточно команды на пересоздание) Ну и плюс тонкости со сжатыми таблицами (если не DIRECT_PATH, то в дамп они попадут разжатыми) и, соответственно тонкости с DIRECT_PATH (там сжатые таблицы поедут сжатыми, но вот насчет обычных разреженных таблиц точно не скажу, возможно пустое место не поедет, но есть вероятность что блоки поедут как есть) Ну, а файлов для дампа ты можешь использовать несколько, разложив их по разным местам ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.04.2016, 11:48 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
добавила парамерт compression=all размер не уменьшился :( ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.04.2016, 15:39 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Вячеслав Любомудров, не можете подсказать, сколько приблизительно времени будет дамп заливаться в новую БД? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.04.2016, 16:35 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
AlionaВячеслав Любомудров, не можете подсказать, сколько приблизительно времени будет дамп заливаться в новую БД? Никто не может . ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.04.2016, 17:02 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Aliona, Ещё место под журналы предусмотреть. Пробовал грузить БД размером 3 тб так и в выходные не вложились. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 13.04.2016, 22:44 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
перед заливкой дампа надо архивлог отключить, потом включить. Я не поняла, 3 Тб загрузились или нет ? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.04.2016, 09:29 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Aliona, Данные так и не перенесли - задачу прибили, переносили данные через "холодную" копию прома. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.04.2016, 10:38 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
На скорость заливки очень сильно влияют типы данных, если много LOB-ов все будет достаточно медленно Но тебе ничего не мешает выполнять импорт (да и экспорт) в параллель ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.04.2016, 10:48 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Alionaне можете подсказать, сколько приблизительно времени будет дамп заливаться в новую БД? Здравствуйте. По многократному опыту подобных операций на Oracle 10-11 при соблюдении следующих условий: 1. expdp делается по 1-й схеме с опцией exclude grants 2. версии экспортируемой БД и импортируемой одинаковы, характеристики серверов сравнимы, экземпляры БД схожи по опциям 3. перед импортом в новую БД создаётся user, куда будет заливаться дамп схемы, со всеми теми же выданными грантами Импорт всегда (при отсутствии неучтённых ошибок) происходит в полтора-два (или даже больше) раза быстрее, чем экспорт. Такова статистика. И как правильно подсказали, можно использовать опцию parallel (предварительно оценив кол-во ядер и их текущую загрузку) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.04.2016, 11:04 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Вячеслав ЛюбомудровНо тебе ничего не мешает выполнять импорт (да и экспорт) в параллель Новоя БД будет на старом месте :) Такой фокус пройдёт? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.04.2016, 14:09 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
FogelПо многократному опыту подобных операций на Oracle 10-11 при соблюдении следующих условий: 1. expdp делается по 1-й схеме с опцией exclude grants Чё-то я не поняла, почему посхемно грузить сотни схем быстрее, чем всю базу разом в параллеле? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.04.2016, 14:15 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Aliona, Если мне память не изменяет, то это связано с тем, что какой-то ДМЛ не параллелится. я когда носил большие объемы делал так: 1. Експорт дампа нужных схем 2. Импорт только стркутуры этих данных на целевую БД (metadata_only) 3. Удаление констрейнтов/индексов руками (они тормозят импорт) 4. Импорт данных в созданную структуру (DATA_ONLY) 5. Восстановление индексов, пк и фк (фк при валидации медленно работает если поля не индексированы) руками же хоть с parallel, хоть в К потоков. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.04.2016, 14:31 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
AlionaFogelПо многократному опыту подобных операций на Oracle 10-11 при соблюдении следующих условий: 1. expdp делается по 1-й схеме с опцией exclude grants Чё-то я не поняла, почему посхемно грузить сотни схем быстрее, чем всю базу разом в параллеле? акцент был не на этом, а на том, что импорт идёт быстрее, чем экспорт при определённом наборе условий (в случае с переносом одной схемы). ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.04.2016, 14:41 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Я особо не тороплюсь, мне надо для начальства просто оценить, сколько пересоздание БД займет времени. Плюс-минус сутки в данной проблеме роли не играют :) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.04.2016, 16:16 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Никто2223Aliona, Если мне память не изменяет, то это связано с тем, что какой-то ДМЛ не параллелится. Параллелить DML/DDL совсем не обязательно, если экспорт был сделан в несколько потоков (и файлов, соответственно), то и импорт можно будет запустить так, чтоб каждый подчиненнный процесс заливал из своего файла (PARALLEL <= количеству дамп-файлов), а не лезли всем колхозом в один файл, мешаясь друг другу Если еще и файлы дампа разложены на разных устройствах -- вообще замечательно Никто22231. Експорт дампа нужных схем 2. Импорт только стркутуры этих данных на целевую БД (metadata_only) 3. Удаление констрейнтов/индексов руками (они тормозят импорт) 4. Импорт данных в созданную структуру (DATA_ONLY) 5. Восстановление индексов, пк и фк (фк при валидации медленно работает если поля не индексированы) руками же хоть с parallel, хоть в К потоков.Если заливать в пустую БД, то ничего удалять и восстанавливать не придется, ибо индексы и констрейнты поднимутся только после заливки данных Хотя, так действительно можно увеличить количество потоков пересоздания индексов (если PARALLEL не достаточно), но ведь PARALLEL можно увеличить и в процессе импорта Конечно, все это только если редакция позволяет ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 14.04.2016, 18:40 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Solaris SPARC, дисков нет и не предвидеться, дамп некуда класть. А нельзя ли как-нибудь извратиться, чтобы дамп сливать на ленту? мне кажется, нельзя,может, кто-нибудь такой фокус проделывал. Если сетевые диски подключить с других серверов, насколько это надёжно для датапампа? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 19.04.2016, 12:06 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
AlionaА нельзя ли как-нибудь извратиться, чтобы дамп сливать на ленту? мне кажется, нельзя,может, кто-нибудь такой фокус проделывал. Если сетевые диски подключить с других серверов, насколько это надёжно для датапампа? можно через пайпу сразу лить на другой сервер. Правда это обычным экспортом делали, с expdp не проверял... ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 19.04.2016, 12:24 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
С expdp не пролезет ни через pipe, ни на ленту Но подключить чужие диски по NFS вполне нормально ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 19.04.2016, 12:33 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
Если трудности с дисками, может воспользоваться обычным експортом? он проходит с любого места. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 19.04.2016, 16:26 |
|
||
|
Размер БД 10 Тб, как оценить размер полного дампа БД (expdp) ?
|
|||
|---|---|---|---|
|
#18+
trace.logЕсли трудности с дисками, может воспользоваться обычным експортом? он проходит с любого места. Для таких объемов - это жестоко :) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 19.04.2016, 16:28 |
|
||
|
|

start [/forum/topic.php?fid=52&msg=39214355&tid=1885797]: |
0ms |
get settings: |
11ms |
get forum list: |
20ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
189ms |
get topic data: |
12ms |
get forum data: |
3ms |
get page messages: |
89ms |
get tp. blocked users: |
2ms |
| others: | 239ms |
| total: | 573ms |

| 0 / 0 |
