ReSQL.ru
     
powered by simpleCommunicator - 2.0.61     © 2026 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / Microsoft SQL Server [игнор отключен] [закрыт для гостей] / Performance monitor
21 сообщений из 21, страница 1 из 1
Performance monitor
    #39570272
reamaz
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
reamaz
Гость
И еще раз всем доброго времени суток!
Возникла проблема, следующего характера:
Есть некий сервер, на нем крутится БД MS SQL и ежедневно выполняется бекапирование по сети в датацентр по гигабитному каналу.
Случилось так, что скорость бекапирования резко возросла. Всегда бекап длился примерно 17-18 часов (700ГБ данных), и вдруг время его выполнения увеличилось до 26-27 часов. Объем самого бекапа не вырос.
У меня на руках есть показатели Perfmon'a за один из "хороших" дней мониторинга и два "плохих" дня.
Я сильной принципиальной разницы не увидел, но возможно я что-то упускаю.
Прошу опытных ребят взглянуть одним глазом, может проблема на поверхности.

p.s. Базы находятся на диске D: (RAID 5, 6 HDD). Бекап идет по сети, сеть гигабитная, со стороны датацентра проблем с приемом нет.
если нужны какие-нибудь дополнительные счетчики, дополнительные данные - напишите, озвучу.

хороший perfmon: https://drive.google.com/open?id=12GnpuHjYN_cNtK3s-RbSs4ivkfZqkwsY
плохой perfmion #1: https://drive.google.com/open?id=1GukCACicnq4IVC61A572suEibxHYfCOC
плохой perfmoin #2: https://drive.google.com/open?id=1Zm1AE7RevXEzVuvgiT0-gafVPBDHGJ4F
...
Рейтинг: 0 / 0
15.12.2017, 12:59:11
| Ответить | Цитировать | Написать  
Performance monitor
    #39570287
rahzer
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
rahzer
Участник
Что-то у Вас с дисковой подсистемой случилось..
Посмотрите все ли нормально с массивами (нет ли ребилдов активных), состояние контроллера
...
Рейтинг: 0 / 0
15.12.2017, 13:20:30
| Ответить | Цитировать | Написать  
Performance monitor
    #39570288
adth
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
adth
Гость
нужно измерять ширину канала в конкретное время

http://netwild.ru/iperf/

https://blogs.oracle.com/mandalika/measuring-network-bandwidth-using-iperf
Measuring Network Bandwidth Using iperf
...
Рейтинг: 0 / 0
15.12.2017, 13:21:21
| Ответить | Цитировать | Написать  
Performance monitor
    #39570331
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
alexeyvg
Участник
reamazЕсть некий сервер, на нем крутится БД MS SQL и ежедневно выполняется бекапирование по сети в датацентр по гигабитному каналу.А что там за пики раз в 4 часа?
Бакап полный или какой то ещё?
На первом перфмоне когда был бакап, от и до?
...
Рейтинг: 0 / 0
15.12.2017, 14:16:40
| Ответить | Цитировать | Написать  
Performance monitor
    #39570333
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
alexeyvg
Участник
reamazВсегда бекап длился примерно 17-18 часов (700ГБ данных), и вдруг время его выполнения увеличилось до 26-27 часов. Объем самого бекапа не вырос.Легко подсчитать, что для гигабитной сети (36 ГБ/час) 18 часов - это очень быстро.
Какая то дополнительная нагрузка сети - и время увеличивается.

rahzerЧто-то у Вас с дисковой подсистемой случилосьУж скорее с сетью, гигабит не так много.
Впрочем, возможно всякое, может, рэйд деградировал?
...
Рейтинг: 0 / 0
15.12.2017, 14:20:16
| Ответить | Цитировать | Написать  
Performance monitor
    #39570350
reamaz
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
reamaz
Гость
Спасибо всем поучавствовавшим!
В ближайшее время постараюсь ответить на вопросы.

"Легко подсчитать, что для гигабитной сети (36 ГБ/час) 18 часов - это очень быстро."
Я может немного недопонимаю, но вроде 1Гбит/сек = 125Мб/сек ? итого 1 час = 125*60*60 = 450Гбайт/час
...
Рейтинг: 0 / 0
15.12.2017, 14:38:23
| Ответить | Цитировать | Написать  
Performance monitor
    #39570353
TaPaK
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
TaPaK
Участник
alexeyvg,

автордля гигабитной сети (36 ГБ/час)
а сколько у вас секунд в час?
...
Рейтинг: 0 / 0
15.12.2017, 14:42:46
| Ответить | Цитировать | Написать  
Performance monitor
    #39570357
Alexander Us
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Us
Участник
reamaz,

к сожалению не могу посмлтреть Ваши картинки.

Но проверьте, вдруг кто то поставил в плане обслуживания галочку "проверить бэкап".
Это как раз и даст увеличение времени в 1,5 - 2 раза.
...
Рейтинг: 0 / 0
15.12.2017, 14:47:25
| Ответить | Цитировать | Написать  
Performance monitor
    #39570373
rahzer
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
rahzer
Участник
Как вариант, может добавили или сместили какие-либо регламентные задания (проверка антивирусов, проверка дисковой подсистемы и т.п.), может кто-то свои данные так же стал бэкапить по тому же каналу..
...
Рейтинг: 0 / 0
15.12.2017, 14:58:45
| Ответить | Цитировать | Написать  
Performance monitor
    #39570374
reamaz
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
reamaz
Гость
alexeyvg,

"А что там за пики раз в 4 часа?"
Бекапы логов (~100GB)
...
Рейтинг: 0 / 0
15.12.2017, 15:01:21
| Ответить | Цитировать | Написать  
Performance monitor
    #39570467
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
alexeyvg
Участник
TaPaKalexeyvg,

автордля гигабитной сети (36 ГБ/час)
а сколько у вас секунд в час?3600, я землянин. А что?
3600 гигабит = 360 гигабайт
Мда, ошибся :-(
Что то медленно тогда
Тогда диски тормозят, 10 мбайт/сек, получается?
...
Рейтинг: 0 / 0
15.12.2017, 17:20:33
| Ответить | Цитировать | Написать  
Performance monitor
    #39570469
reamaz
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
reamaz
Гость
2rahzer - проверил рейд и контроллер - все в состоянии ОК

Сейчас уточнил - есть дни, в которые этот бекап выполняется по 40+ часов.
Вроде бы 700ГБ - не настолько много.
Один нюанс: в течение дня делается полный бекап (о котором мы сейчас говорим), дополнительно, каждые 4 часа делаются бекапы журналов. Не могут эти два бекапа мешать выполнению друг друга?
...
Рейтинг: 0 / 0
15.12.2017, 17:23:56
| Ответить | Цитировать | Написать  
Performance monitor
    #39570480
Фотография Yasha123
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Yasha123
Участник
reamazНе могут эти два бекапа мешать выполнению друг друга?
им друг на друга вообще наплевать.
единственное, когда идет полный/дифф бэкап,
параллельно идущий бэкап лога не сможет транкейтить лог.
но это уже разница для самого лога, а не для его бэкапа
...
Рейтинг: 0 / 0
15.12.2017, 17:34:15
| Ответить | Цитировать | Написать  
Performance monitor
    #39570506
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
alexeyvg
Участник
reamaz2rahzer - проверил рейд и контроллер - все в состоянии ОКА ресурс монитор что показывает, какие очереди у дисков бакапа и базы, какая ожидания и скорость записи в файл бакапов, ожидания и чтения из файлов базы?
...
Рейтинг: 0 / 0
15.12.2017, 18:19:09
| Ответить | Цитировать | Написать  
Performance monitor
    #39570512
Alexander Us
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Us
Участник
reamaz,

а галка "проверить бэкап" в плане обслуживания установлена?
...
Рейтинг: 0 / 0
15.12.2017, 18:27:52
| Ответить | Цитировать | Написать  
Performance monitor
    #39571988
reamaz
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
reamaz
Гость
Alexander Us ,
Пользуемся скриптами, вручную загнанными в Job.
Кусок скрипта, отвечающий за бекап:
Код: sql
1.
2.
3.
4.
BACKUP DATABASE [DBNAME] TO DISK = @path
	WITH FORMAT
		,INIT
		,STATS = 100


Собственно, никаких проверок нет.

alexeyvg ,
Только сейчас подключаем в perfmon счетчики SQL.
Не подскажите, в каких разделах находятся указанные счетчики?
SQLServer:Databases?
Ну и, собственно, какие показатели Performance monitor лучше подключить в нашем случае?
...
Рейтинг: 0 / 0
19.12.2017, 13:58:04
| Ответить | Цитировать | Написать  
Performance monitor
    #39572108
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
alexeyvg
Участник
reamaz alexeyvg ,
Только сейчас подключаем в perfmon счетчики SQL.
Не подскажите, в каких разделах находятся указанные счетчики?
SQLServer:Databases?
Ну и, собственно, какие показатели Performance monitor лучше подключить в нашем случае?Не, я говорил про ресурс монитор. Там сразу одним взглядом видна ситуация - очереди, задержки, см вкладку "Диск".
...
Рейтинг: 0 / 0
19.12.2017, 15:53:00
| Ответить | Цитировать | Написать  
Performance monitor
    #39572663
reamaz
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
reamaz
Гость
Выявилась проблема с дисковой подсистемой.
При тесте КристалМарком выявились сильные тормоза при создании файла для теста (к примеру, выбираем тест 8ГБ файлом, и он создается 8,5 минут).
Сейчас копаемся в настройках рейда, пока безуспешно.
Не совсем понятно, является ли это корнем нашей проблемы, ведь при бекапе нужна не запись, а чтение.

В связи с этим, уточнение: При бекапе базы "по сети" - каким образом SQL-сервер отправляет данные? Сначала ложит их куда то в кэш на диск или отправляет напрямую (из RAM, например)? Если создается временный файл на диске - тогда понятно, что нас тормозит.

Если нет простого ответа - дайте, плз статьи, подучу немного (гугл сходу не помог).
...
Рейтинг: 0 / 0
20.12.2017, 12:37:59
| Ответить | Цитировать | Написать  
Performance monitor
    #39572673
adth
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
adth
Гость
https://docs.microsoft.com/en-us/sysinternals/downloads/procmon

Process Monitor is an advanced monitoring tool for Windows that shows real-time file system , Registry and process/thread activity .
...
Рейтинг: 0 / 0
20.12.2017, 12:49:37
| Ответить | Цитировать | Написать  
Performance monitor
    #39572674
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
alexeyvg
Участник
reamazтогда понятно, что нас тормозит.Что вы всё гадаете, посмотрите уже, есть проблемы с дисковой системой или нет. Какой таймаут операции? Какая очередь к дискам? Есть пики, или оно присутствует постоянно?
...
Рейтинг: 0 / 0
20.12.2017, 12:51:52
| Ответить | Цитировать | Написать  
Performance monitor
    #39572678
rahzer
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
rahzer
Участник
Если у вас используется тиринг или SSD кэширование, то посмотрите, м.б данные переползли на более медленные диски или SSD кэш отключили..
Вобщем, надо сравнить та ли конфигурация железа до проблем и во время их возникновения.
...
Рейтинг: 0 / 0
20.12.2017, 12:56:17
| Ответить | Цитировать | Написать  
21 сообщений из 21, страница 1 из 1
Форумы / Microsoft SQL Server [игнор отключен] [закрыт для гостей] / Performance monitor
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение   Полит. конфиден.  
NoSQL.ru       Кролег: Проекты, Новости, Чат       РЕД ФОРУМ       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=46&msg=39570272&tid=1690640]:
 0ms
get settings:
 8ms
get forum list:
 10ms
check forum access:
 2ms
check topic access:
 2ms
track hit:
 182ms
get topic data:
 12ms
get forum data:
 2ms
get page messages:
 57ms
get tp. blocked users:
 1ms
others: 190ms
total:  466ms
созд. / загр.: 466ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]