ReSQL.ru
     
powered by simpleCommunicator - 2.0.52     © 2025 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / Microsoft SQL Server [игнор отключен] [закрыт для гостей] / Форматирование дисков
19 сообщений из 44, страница 2 из 2
  2  все
Форматирование дисков
    #39857391
Владислав Колосов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владислав Колосов
Участник
Alexander Us,

вообще любопsтный вопрос, ч думал, что вопросы низкоуровнего форматирования ушли вместе с MFM/IDE винтами и MS-DOS. Сейчас ведь винтовые контроллеры не пускают к "блинам" и делают то что им предписывают инженеры производителя. Т.е. они выставляют на интерфейс какую-то абстракцию вместо физический структуры.
...
Рейтинг: 0 / 0
04.09.2019, 17:28
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39857403
Alexander Us
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Us
Участник
Владислав Колосов,

к сожалению не разбираюсь в железе.
просто полистал эту статейку от 2014 года
там пишут о преемуществах "4K native" форматирования
так и появились вопросы
...
Рейтинг: 0 / 0
04.09.2019, 17:43
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39857465
Владислав Колосов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владислав Колосов
Участник
Alexander Us,

что-то такое припоминаю, мелькало в описании SSD накопителей или комбинированных на сайте IBM, кажется. Якобы 4К супер технология бла бла бла. Я думаю, что наилучшим решением на производстве будет использовать настройки по умолчанию, дабы не пришлось зависеть от типов оборудования, создавать регламент форматирования и еще много всякой пляски и заклинаний. Но это мое мнение.
...
Рейтинг: 0 / 0
04.09.2019, 19:33
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39857514
shalomb
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
shalomb
Гость
Для дисков SSD это уже не актуально ,это на шпинделе было актуально .
...
Рейтинг: 0 / 0
04.09.2019, 21:10
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39857598
Siemargl
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Siemargl
Участник
shalombДля дисков SSD это уже не актуально ,это на шпинделе было актуально .На соло шпинделе 4к, на рейде 64к.
А что с SSD пока темный лес
...
Рейтинг: 0 / 0
04.09.2019, 23:37
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39857684
Kirillich
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Kirillich
Участник
[quot Alexander Us]KirillichBytes per Physical Sector : 4096

на всех серверах?
уверен что на сервере S1 (sql2008) Bytes per Physical Sector : 512
...
Рейтинг: 0 / 0
05.09.2019, 08:05
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39857722
Alexander Us
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Us
Участник
Kirillichуверен что на сервере S1 (sql2008) Bytes per Physical Sector : 512

нет нет, именно как я написал.

Вот ещё раз, S1 (sql2008), в оригинале:

NTFS-Version : 3.1
LFS-Version : 2.0
......
Bytes pro Sektor : 512
Bytes pro physischem Sektor : 4096
Bytes pro Cluster : 4096
Bytes pro Dateidatensatzsegment : 1024
...
Рейтинг: 0 / 0
05.09.2019, 09:31
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39857729
Alexander Us
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Us
Участник
Kirillich,

посмотрите эту статью

Такое форматирование называется "512E Advanced Format".
...
Рейтинг: 0 / 0
05.09.2019, 09:35
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39857787
Владислав Колосов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владислав Колосов
Участник
2008 и 2008r2, емнип имеют массу технических отличий.
...
Рейтинг: 0 / 0
05.09.2019, 11:16
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39857961
Alexander Us
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Us
Участник
Вот ещё разъяснения от MS по размеру кластеров: Cluster size recommendations for ReFS and NTFS
...
Рейтинг: 0 / 0
05.09.2019, 15:07
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39858324
Alexander Us
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Us
Участник
После изучения "лучших практик" и обсуждения решил попробовать:

Создал
- базу TEST_DB на диске с 4k кластерами.
- две таблицы - "узкую" и "широкую", слелал в них по 4 вставки с последующим CHECKPOINT
- сделал в "широкую" таблицу перелив данных тулм на основе SqlBulkCopy

наблюдал файловую активность через Process Monitor.

Должен сказать, что после этого я совсем не уверен, что
- диск лога надо форматировать иначе чем в 4kb
- даже для диска данных 64kb выглядят перебопрм

4 вставки в "узкую" таблицу (первые 4 строки лога) с последующим CHECKPOINT (остальные строки)
 
"Time of Day""Process Name""PID""Operation""Path""Result""Detail""09:56:164204300""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 46.149.632 Length: 4.096 I/O Flags: Non-cached Write Through Priority: Normal""09:56:164233505""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 46.153.728 Length: 4.096 I/O Flags: Non-cached Write Through Priority: Normal""09:56:173333239""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 46.157.824 Length: 4.096 I/O Flags: Non-cached Write Through Priority: Normal""09:56:173354556""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 46.161.920 Length: 4.096 I/O Flags: Non-cached Write Through Priority: Normal""09:56:305772764""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 46.166.016 Length: 4.096 I/O Flags: Non-cached Write Through Priority: Normal""09:56:305979700""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 901.005.312 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:56:306013292""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 1.064.960 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:56:306013639""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 147.456 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:56:306015230""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 1.966.080 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:56:306027367""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 344.064 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:56:306112802""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 46.170.112 Length: 4.096 I/O Flags: Non-cached Write Through Priority: Normal""09:56:306114165""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 0 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:56:306114961""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 73.728 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal"


4 вставки в "широкую" таблицу (первые 4 строки лога) с последующим CHECKPOINT (остальные строки)
 
"Time of Day""Process Name""PID""Operation""Path""Result""Detail""09:57:566394558""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 46.174.208 Length: 16.384 I/O Flags: Non-cached Write Through Priority: Normal""09:57:573256498""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 46.190.592 Length: 12.288 I/O Flags: Non-cached Write Through Priority: Normal""09:57:581273273""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 46.202.880 Length: 36.864 I/O Flags: Non-cached Write Through Priority: Normal""09:57:588301600""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 46.239.744 Length: 20.480 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014219367""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 46.260.224 Length: 16.384 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014224486""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 122.200.064 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014250310""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 901.054.464 Length: 40.960 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014251757""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 163.684.352 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014253149""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 163.545.088 Length: 32.768 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014254002""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 898.293.760 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014254101""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 159.170.560 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014266909""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 619.528.192 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014268744""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 648.257.536 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014288601""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 147.456 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014288938""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 417.792 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014289676""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 1.064.960 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014290378""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 1.966.080 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014312677""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 738.058.240 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014347180""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 619.634.688 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014356819""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 318.914.560 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014360289""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 722.771.968 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014370406""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 824.696.832 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014397063""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 838.860.800 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014408912""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 331.284.480 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014419269""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 391.954.432 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014428786""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 380.141.568 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014436564""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 853.909.504 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014437327""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 853.884.928 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014440839""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 437.198.848 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014447030""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 824.893.440 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014449634""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 868.696.064 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014451062""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 838.942.720 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014457435""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 389.996.544 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014460617""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 839.180.288 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014468931""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 132.513.792 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014475522""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 854.310.912 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014478781""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 71.262.208 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014480112""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 71.524.352 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014484061""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 854.106.112 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014484744""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 854.384.640 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014485401""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 883.097.600 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014513024""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 861.339.648 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014525960""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 29.892.608 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014529213""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 561.119.232 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014537408""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 561.012.736 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014537722""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 893.337.600 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014539124""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 544.694.272 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014561378""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 122.175.488 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014563347""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 46.276.608 Length: 4.096 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014565092""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB_log.ldf""SUCCESS""Offset: 0 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""09:58:014566410""sqlservr.exe""1772""WriteFile""C:\Data\TEST_DB.mdf""SUCCESS""Offset: 73.728 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal"


Вставки в "широкую" таблицу через SqlBulkCopy, gj 1000 строк. Т.к. весь лог длинный, привожу вырезку
 
"Time of Day""Process Name""""PID""""Operation""""Path""""Result""""Detail""""09:59:058461503""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB_log.ldf""""SUCCESS""""Offset: 46.280.704 Length: 61.440 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058462853""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.120.000 Length: 57.344 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058497013""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB_log.ldf""""SUCCESS""""Offset: 46.342.144 Length: 57.344 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058509510""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.177.344 Length: 57.344 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058543006""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB_log.ldf""""SUCCESS""""Offset: 46.399.488 Length: 61.440 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058557545""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.234.688 Length: 65.536 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058623983""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB_log.ldf""""SUCCESS""""Offset: 46.460.928 Length: 57.344 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058656067""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.300.224 Length: 32.768 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058657260""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB_log.ldf""""SUCCESS""""Offset: 46.518.272 Length: 24.576 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058658675""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.332.992 Length: 49.152 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058695157""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB_log.ldf""""SUCCESS""""Offset: 46.542.848 Length: 57.344 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058705421""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.382.144 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058706172""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.398.528 Length: 40.960 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058756905""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB_log.ldf""""SUCCESS""""Offset: 46.600.192 Length: 61.440 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058783460""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.439.488 Length: 57.344 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058833048""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB_log.ldf""""SUCCESS""""Offset: 46.661.632 Length: 57.344 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058839457""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.496.832 Length: 65.536 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:058869309""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB_log.ldf""""SUCCESS""""Offset: 46.718.976 Length: 57.344 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:059117317""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.562.368 Length: 40.960 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:059118106""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB_log.ldf""""SUCCESS""""Offset: 46.776.320 Length: 28.672 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:059119437""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.603.328 Length: 40.960 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:059163018""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB_log.ldf""""SUCCESS""""Offset: 46.804.992 Length: 57.344 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:059171890""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.644.288 Length: 8.192 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:059172685""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB.mdf""""SUCCESS""""Offset: 901.660.672 Length: 40.960 I/O Flags: Non-cached Write Through Priority: Normal""""09:59:059215791""sqlservr.exe""""1772""""WriteFile""""C:\Data\TEST_DB_log.ldf""""SUCCESS""""Offset: 46.862.336 Length: 57.344 I/O Flags: Non-cached Write Through Priority: Normal"""
...
Рейтинг: 0 / 0
06.09.2019, 11:19
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39858329
Alexander Us
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Us
Участник
Дополнение:
база TEST_DB в модели "full"
вставки SqlBulkInsert шли блоками по 1000 строк
...
Рейтинг: 0 / 0
06.09.2019, 11:30
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39858403
Alexander Us
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Us
Участник
Выводы из эксперимента (применительно к SSD дискам)

Лог:
- запись в лог присходит в блоками, кратно 4k
- размер блока зависит от количества данных в инсерте
- что может сильно изменяться в зависимости от конкретной базы/типа данных
- для моих баз, видимо, 4k блоки будут преобладать

- поэтому представляется целесообразным форматировать диск лога по 4k

Данные:
- запись присходит в блоками, кратно 8k
- для моих баз, при записи, видимо, 8k блоки будут преобладать
- чтение присходит в блоками, кратно 64k (в основном)
- форматирование данных по 64k дало бы прирост производительности по чтению но было бы расточительно для записи из за TBW
- SSD диски и так быстры, данные кэшируются, так что вряд ли стоит ожидать существенного выигрыша для всего сервера при форматировании в 64k
- форматирование по 8k или 32k возможно, было бы золотой серединой но это привнесёт неразбериху, видимо, без существенного выигрыша

- поэтому представляется целесообразным форматировать диск данных по 4k

PS:
- много зависит от конкретной базы/характера данных
- форматирование по 4k ограничивает размер тома/файла в 16ТБ


Жду ваших мнений, критики
...
Рейтинг: 0 / 0
06.09.2019, 13:32
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39858574
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
alexeyvg
Участник
Alexander UsВыводы из эксперимента (применительно к SSD дискам)Мне кажется, результат замеров "вставки SqlBulkInsert шли блоками по 1000 строк" недостаточно, что бы выбрать размер кластера для данных сиквела, попутно обратившись в Микрософт "эй, вы там чушь понаписали, переделывайте документацию, я тут замерил!"

Нужно либо потратить "от" нескольких лет на эксперименты и изучение теории, что бы создать универсальную достоверную методику, либо произвести замеры на своей реальной системе, что бы выбрать оптимальные настройки для неё.
А вот так вот, "вставки SqlBulkInsert шли блоками по 1000 строк" - это профанация.

Вам рассказали про практику, дали ссылки, вы сами нашли и привели тут волне авторитетную статью, что вам ещё надо? Просто следуйте рекомендациям.
...
Рейтинг: 0 / 0
06.09.2019, 17:46
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39858604
Владислав Колосов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владислав Колосов
Участник
Alexander Us,

дык 64к форматируют для оптимизации чтения, если у вас много записи и это вызывает проблемы, о чем и пишут лучшие практики, то размер надо делать меньше. При типовой рабочей нагрузке наилучшим будет 32к, к примеру.
...
Рейтинг: 0 / 0
06.09.2019, 18:24
| Ответить | Цитировать | Написать  
Форматирование дисков
    #39858629
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
alexeyvg
Участник
Владислав Колосовдык 64к форматируют для оптимизации чтения, если у вас много записи и это вызывает проблемы, о чем и пишут лучшие практики, то размер надо делать меньше. При типовой рабочей нагрузке наилучшим будет 32к, к примеру.А нет каких то ссылок по этой теме?
По моему, размер кластера не связан с размером минимальной единицы записи.
Собственно, ошибка в начале обсуждаемой темы, и ссылки вначале показывают, что минимальной единицей является сектор.

Ещё, "если у вас много записи", это не означает, что запись будет производиться маленькими блоками.
В большинстве реальных систем она будет как раз по 64 кб
8 кб запись будет только если вы обновляете отдельные записи (на разных страницах, причём не соседних)
Запись в лог тем более всегда последовательная.
...
Рейтинг: 0 / 0
06.09.2019, 19:54
| Ответить | Цитировать | Написать  
Период между сообщениями больше года.
Форматирование дисков
    #40024497
Danion
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Danion
Гость
Приветствую.
Так в итоге 64к для "Байт на кластер" даёт какое-то преимущество над 4к?
Обычно форматирую новые диски под 64к, по рекомендации. Но какой-то особой разницы не заметил.
А тут пытаемся понять почему у сервака очереди по диску с БД стабильно при нагрузке выше 100. Бывает и под 3 тысячи.
По системному монитору очереди в основном чтения. Связка ВМ+дисковая полка усложняет реальную картину.
Настроено в древности, для диска выставлено вообще 16384 у "Байт на кластер".
Базы на диске большие, просто так их перемещать нельзя. Поэтому и вопрос - может ли текущих показатель форматирования диска настолько влиять на очереди к диску?
...
Рейтинг: 0 / 0
04.12.2020, 11:22
| Ответить | Цитировать | Написать  
Форматирование дисков
    #40024674
aleks222
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
aleks222
Участник
64к влияет, канешно, на уровне процентов. Т.е. с лупой разглядите.

А очередь 100 и больше - это кривой драйвер или помирающий контроллер.
...
Рейтинг: 0 / 0
04.12.2020, 15:53
| Ответить | Цитировать | Написать  
Форматирование дисков
    #40024714
Владислав Колосов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владислав Колосов
Участник
Danion,

авторТак в итоге 64к для "Байт на кластер" даёт какое-то преимущество над 4к?

Для того, чтобы разглядеть разницу, нужны особые сценарии использования. Среднепотолочно разницы не заметите.
...
Рейтинг: 0 / 0
04.12.2020, 17:56
| Ответить | Цитировать | Написать  
19 сообщений из 44, страница 2 из 2
  2  все
Форумы / Microsoft SQL Server [игнор отключен] [закрыт для гостей] / Форматирование дисков
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение
NoSQL.ru       Новости, Чат       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=46&msg=39858629&tid=1685333]:
 0ms
get settings:
 8ms
get forum list:
 14ms
check forum access:
 3ms
check topic access:
 3ms
track hit:
 60ms
get topic data:
 12ms
get forum data:
 3ms
get page messages:
 50ms
get tp. blocked users:
 1ms
others: 14ms
total:  168ms
созд. / загр.: 168ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]