Гость
Войти | Профиль | Очистить
Целевая тема:
Создать новую тему:
Автор:
Действия ...
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Скорсть backup и размер базы / 16 сообщений из 16, страница 1 из 1
24.06.2008, 13:55
    #35390836
Сергей Фролов
Сергей Фролов
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
Подскажите, плиз, как коррелируют между собой размер БД и скорость создания backup'а?
Понятно, что зависимость, скорее всего, линейная, но хотелось бы узнать более точные цифры.
Например: размер базы - 2 Гб, время создания backup - 40 минут и т.д.
Заранее спасибо.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
24.06.2008, 15:09
    #35391094
Ёш
Ёш
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
по моему скорость зависит от Вашего оборудования и настроек сервера.


--
„Истина — это вовсе не то, что можно убедительно доказать, это то, что
делает всё проще и понятнее“ — Антуан де Сент-Экзюпери
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
24.06.2008, 15:22
    #35391140
Сергей Фролов
Сергей Фролов
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
Ёшпо моему скорость зависит от Вашего оборудования и настроек сервера.
ИМХО, вряд ли у кого-то сервер стоит на P133 + 32 RAM. :)
Все-таки сервер достаточно приличная машина чаще всего, тем более тут, как я понимаю, в основном дисковые операции, которые имеют конечную производительность.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
24.06.2008, 16:07
    #35391316
iz
iz
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
Скорость бекапа зависит от очень многих факторов, например от схемы БД. Чтобы сбекапить varlena-тип, нужно перед этим вычислить его длину. Для каких-то record-ов -- залезть в toast-таблицы и т.д. Все это существенным образом может влиять на скорость бекапа.

Словом, нюансов много. Все проверяется только экспериментальным путем.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
24.06.2008, 16:44
    #35391462
Andrey Daeron
Andrey Daeron
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
Сергей Фролов Ёшпо моему скорость зависит от Вашего оборудования и настроек сервера.
ИМХО, вряд ли у кого-то сервер стоит на P133 + 32 RAM. :)
Все-таки сервер достаточно приличная машина чаще всего, тем более тут, как я понимаю, в основном дисковые операции, которые имеют конечную производительность.
Производительность дисковой подсистемы разительно отличаетсая от сервера к серверу, и зависит от рейда, общей загруженности системы и т.д.
Например - серьёзно будет отличаться вермя дампа с одного винта на него же и время бекапа с 5-го рейда на другой 5-й рейд.

ИМХО, можно прикинуть как время на считывание все БД + время на запись бекапа. Соотношение размера БД и бекапа - свойственно только Вашей БД (вдруг у Вас 90% объёма индексы).
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
24.06.2008, 16:55
    #35391517
Сергей Фролов
Сергей Фролов
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
Блин. Что же это такое такое? )))
Неужели так сложно привести просто цифры без флуда? То что они будут различаться - даже не подлежит обсуждению. Интересна просто средняя цифра, полученная в результате разных ответов.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
24.06.2008, 16:57
    #35391530
Сергей Фролов
Сергей Фролов
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
izВсе проверяется только экспериментальным путем.
Т.е. вы предлагаете выполнить достаточно крупный проект (предполагаемый рост базы от 4 Гб в год и больше), а после чего обнаружить, что базы такого размера не очень-то удобно обслуживать в Pg? Потрясающе!
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
24.06.2008, 17:30
    #35391659
iz
iz
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
некоторые базы, которые я (или коллеги) бекапил (с бзипом) и помню, сколько оно занимает:

10MB - 1-2 сек
1GB - ~60-80 сек
10GB - ~10-12 мин
50GB - ~40 мин
2TB - 1 неделя
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
24.06.2008, 17:32
    #35391671
iz
iz
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
izнекоторые базы, которые я (или коллеги) бекапил (с бзипом) и помню, сколько оно занимает:

10MB - 1-2 сек
1GB - ~60-80 сек
10GB - ~10-12 мин
50GB - ~40 мин
2TB - 1 неделя

только не спрашивайте, сколько ядер было на машинах, какие диски и тп: каков вопрос -- таков ответ :)

что касается, удобно ли обслуживать базы с ростом в 4ГБ в год на постгресе, то короткий ответ такой: да.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
24.06.2008, 17:53
    #35391737
Сергей Фролов
Сергей Фролов
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
iz
только не спрашивайте, сколько ядер было на машинах, какие диски и тп
Не буду, сервер будет нормальная машина :) Спасибо за ответ :)
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
25.06.2008, 05:25
    #35392340
ChameLe0n
ChameLe0n
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
Сергей Фролов izВсе проверяется только экспериментальным путем.
Т.е. вы предлагаете выполнить достаточно крупный проект (предполагаемый рост базы от 4 Гб в год и больше), а после чего обнаружить, что базы такого размера не очень-то удобно обслуживать в Pg? Потрясающе!

4 Гб в год - серьезный проект... насмешили
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
25.06.2008, 10:11
    #35392643
tadmin
tadmin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
Было бы неосмотрительно запускать серьезный проект, не сделав sizing с реальными объемами данных: с какой скоростью будут работать запросы при базе 4Гб? а 10Гб?

По любому придется заполнять данными, делать тестовые приложения которые эмулируют работу нескольких пользователей. На фоне этих задач проверить время дампа базы любого размера - мелочь.
На сервере с приличной дисковой системой база ~9Гб дампилась 4-5 минут.
Восстанавливалась раза в два дольше, показывая 1200-2000 IOPS.
Почти 50% базы - индексы.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
25.06.2008, 20:00
    #35394769
Сергей Фролов
Сергей Фролов
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
ChameLe0n4 Гб в год - серьезный проект... насмешили
У нас серьезность проектов теперь размерами БД меряется? Ну-ну.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
27.06.2008, 06:54
    #35397874
ChameLe0n
ChameLe0n
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
Сергей Фролов ChameLe0n4 Гб в год - серьезный проект... насмешили
У нас серьезность проектов теперь размерами БД меряется? Ну-ну.

Скорее у вас неверное понимание серьезных проектов
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
27.06.2008, 12:04
    #35398392
Сергей Фролов
Сергей Фролов
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
ChameLe0nСкорее у вас неверное понимание серьезных проектов
Может просветите? А то так и умру сирым и убогим.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
11.07.2008, 02:08
    #35424338
another-anonymous
another-anonymous
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Скорсть backup и размер базы
Храните сырой трафик в таблицах БД. И будет база большая-пребольшая :)
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Скорсть backup и размер базы / 16 сообщений из 16, страница 1 из 1
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]