|
база на SSD
|
|||
---|---|---|---|
#18+
Здравствуйте. Имеется база на простом диске. на сервере. И имеется apache на простом, но относительно дорогом компе. Апач ходит в базу по сети на сервер. Что то ударило в голову перенести базу на тот же комп, что и апач. тк теперь с базой работает только он. в основном. Посмотрел в сторону SSD. учитывая бюджет могу позволить себе только такое Micron 5200 PRO 960Gb Micron 5200 MAX 480Gb Intel D3-S4610 Series 480 Gb Плюс на компе есть sata-3. на сервере только sata-2. Возможно все ж даст некое преимущество на компе sata-3 хотя если посмотреть на пропускную способность sata-2 в 300 метров в секунду и на 70000 иопсов по 4К, то это получается 280 метров. те, теоретически, хватит и sata-2 Смущает, что эти два микрона стоят примерно одинаково. база сейчас 40 гигов. распухла она с 7 гигов примерно за 3 месяца. блобы. Знаю, что лучше их хранить как файлы, но сейчас нет возможности переделать. думаю до сотни гигов она может распухнуть за год. Может кто прокомментирует ... |
|||
:
Нравится:
Не нравится:
|
|||
12.06.2020, 16:16 |
|
база на SSD
|
|||
---|---|---|---|
#18+
AndrewVL, А что вам тут нужно комментировать? Как ускорить работу дисковой подсистемы? Это же зависит от задачи, если происходит интенсивная запись на диск (одновременно нескольким подключением), то можно разнести по разным контроллерам для начала ОС,FB,базу и временные файлы. У нас на работе для ускорения используется аппаратный raid контроллер с батарейкой. Вам нужно найти бутылочное горло. Может вам пропускной способности сети не хватает или скажем кол-ва процессоров. Для того чтобы вам подсказали напишите для начала что за аппаратная часть у вас, версию FB ? И где у вас происходит замедление? Удачи! ... |
|||
:
Нравится:
Не нравится:
|
|||
12.06.2020, 17:16 |
|
база на SSD
|
|||
---|---|---|---|
#18+
AltHaspИ где у вас происходит замедление? Нет у него замедления, просто ему хочется сложить все яйца в одну мошонку. Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
12.06.2020, 17:21 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Dimitry Sibiryakov AltHaspИ где у вас происходит замедление? Нет у него замедления, просто ему хочется сложить все яйца в одну мошонку. Скорее хочется осуществить «потенциально» более быструю выборку—загрузку блобов и выполнение запросов ... |
|||
:
Нравится:
Не нравится:
|
|||
12.06.2020, 20:22 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Предполагаю, что дорогой комп с sata3 плюс ssd плюс локальная база будет быстрее, чем древний сервак с sata2 и hdd с удалённой базой. ... |
|||
:
Нравится:
Не нравится:
|
|||
12.06.2020, 22:07 |
|
база на SSD
|
|||
---|---|---|---|
#18+
AndrewVL Может кто прокомментирует берите самсунг evo или интел. AndrewVL думаю до сотни гигов она может распухнуть за год. распухнет - почистите. ... |
|||
:
Нравится:
Не нравится:
|
|||
12.06.2020, 23:44 |
|
база на SSD
|
|||
---|---|---|---|
#18+
AndrewVLпосмотреть на пропускную способность sata-2 в 300 метров в секунду sata 2 - каменный век. 300мб сек ссд сейчас у меня на чахлом ноуте 7-летней давности. Уже 5 лет как везде сата 3, 600мб сек, и все нормальные современнные ССД поддерживают эту скорость как минимальные. samsung 512gb sata 3 EVO Prof стоил год назад 12к руб. сейчас должно быть дешевле. Покупать сейчас любой ссд для втыкания на шину сата 2 - это выкидывание денег. Я купил себе такое только чтобы спасти тормозной ноут, со старым процом. Подозреваю, что и ваш сервер с сата2 - это пипец какая старая тормозная железяка. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.06.2020, 03:12 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Алексей Роза, всё очень просто. SATA 3 это максимум 600 мегабайт в секунду, а nvme - почти в 3 раза больше, т.е. 1.6 гигабайт в секунду. сравнений в инете полно. например - https://firstvds.ru/blog/nvme-vs-ssd ... |
|||
:
Нравится:
Не нравится:
|
|||
13.06.2020, 13:49 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Интерфейсом PCIE и скоростью в 3 раза большей, и на чтение, и на запись. Как следует, например, из графиков здесь: https://techreport.com/review/33950/samsungs-860-evo-1-tb-ssd-reviewed ... |
|||
:
Нравится:
Не нравится:
|
|||
13.06.2020, 13:59 |
|
база на SSD
|
|||
---|---|---|---|
#18+
и при этом pcie дешевле на 40% или можно сказать, sata3 дороже на 50% kdv всё очень просто. да где ж просто то?? Я спрашиваю, почему сата3 лучше/дороже pcie, а вы мне расписываете, чем pcie лучше саты3 ... |
|||
:
Нравится:
Не нравится:
|
|||
13.06.2020, 18:23 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Алексей Роза, тогда я не понял. И что значит "лучше"? 1тб лучше 500гб? Ну да. Дороже? тоже да. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.06.2020, 20:32 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Алексей Роза, кстати, весьма подозрительная (низкая) цена на samsung 970 Pro 512гб в fcenter. У остальных продавцов она такая же, как на samsung 860 pro 512гб. Собственно, цены надо обсуждать где-то не здесь. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.06.2020, 20:58 |
|
база на SSD
|
|||
---|---|---|---|
#18+
а сорри это я тупой, не вижу 1тб ... |
|||
:
Нравится:
Не нравится:
|
|||
13.06.2020, 22:12 |
|
база на SSD
|
|||
---|---|---|---|
#18+
kdv всё очень просто. SATA 3 это максимум 600 мегабайт в секунду, а nvme - почти в 3 раза больше, т.е. 1.6 гигабайт в секунду. сравнений в инете полно. например - https://firstvds.ru/blog/nvme-vs-ssd Ну вот результаты сравнения SSD от Samsung: SATA III vs NVMe. Причём второй во время тестирования ещё и разогревается до 70 градусов. Так что сам по себе NVMe ничего не решает, надо ещё нормальное устройство на нём найти. P.S: MB/сек - это не мегабайты, как я понял, а попугаи какие-то иначе я хз откуда столько на SATA. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.06.2020, 23:17 |
|
база на SSD
|
|||
---|---|---|---|
#18+
alekcvpа попугаи какие-то иначе я хз откуда столько на SATA. потому что включен RAPID, это дополнительное кэширование через память. Реального толку от него немного, жрет память и показывает нереальные данные в синтетических тестах. Выключи rapid (хотя бы временно), увидишь реальную скорость. alekcvpнадо ещё нормальное устройство на нём найти. якобы еще есть ситуации, когда вроде бы MB на m.2 поддерживает нужный type (типа type 2242/2260/2280/22110), а на деле реальное устройство не работает. p.s. к примеру, у меня Samsung 860 Pro на предыдущей матплате GA-970A-UD3 наотрез не давал скорости выше 250мб/сек. Какая-то хрень с контроллером, хотя SATA3, и кабели норм, и т.д. Я плюнул, и воткнул его в ноут (там всё равно сата2), и на ноуте стало отлично. ... |
|||
:
Нравится:
Не нравится:
|
|||
14.06.2020, 00:04 |
|
база на SSD
|
|||
---|---|---|---|
#18+
kdv потому что включен RAPID, это дополнительное кэширование через память. Реального толку от него немного, жрет память и показывает нереальные данные в синтетических тестах. Выключи rapid (хотя бы временно), увидишь реальную скорость. kdv якобы еще есть ситуации, когда вроде бы MB на m.2 поддерживает нужный type (типа type 2242/2260/2280/22110), а на деле реальное устройство не работает. К тому же проблема именно в SSD - он за минуту разогревается до 70 градусов и уходит в троттлинг. Так что покупать EVO-серию от самсунга я смысла не вижу, либо PRO, либо какой-нибудь Kingston или Intel, ИМХО. ... |
|||
:
Нравится:
Не нравится:
|
|||
14.06.2020, 01:33 |
|
база на SSD
|
|||
---|---|---|---|
#18+
1. база под нагрузкой должна быть на ссд, помогает здорово. 2. брать надо ресурсные серверные ссд, пригодные для сервера бд, 4610 интелы вроде бы ничего, за год отказов не встретили, хотя 3700 серия мне нравилась больше. 3. одиночные накопители под базу - зло, если мрет ссд, то мгновенно и бесповоротно. 4. как только ставишь ссд начинаются находиться другие бутылочные горлышки, в частности процы, после тотального перехода на ссд отправили на покой несколько серваков с парами зионов на 1366 сокете, им ссд уже не дает толку, тупят все равно. Короче, надо мерить свою нагрузку, сколько иопсов твоей базе с твоей нагрузкой, сколько ядер оно готово сожрать, сколько прокачать по сети и т.п. ... |
|||
:
Нравится:
Не нравится:
|
|||
14.06.2020, 14:56 |
|
база на SSD
|
|||
---|---|---|---|
#18+
зачем вообще нужна БД, если можно просто в памяти держать данные безо всех этих ваших FK, JOIN-ов, кэшей и прочего гемора а лавное - БЕЗ тормозов (все тормоза от БД) ... |
|||
:
Нравится:
Не нравится:
|
|||
14.06.2020, 15:42 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Алексей Роза зачем вообще нужна БД, если можно просто в памяти держать данные безо всех этих ваших FK, JOIN-ов, кэшей и прочего гемора а лавное - БЕЗ тормозов (все тормоза от БД) Даже приснопамятный Дедал с его ФВМясом таких "смелых" заявлений себе не позволял ... :)) ... |
|||
:
Нравится:
Не нравится:
|
|||
14.06.2020, 16:30 |
|
база на SSD
|
|||
---|---|---|---|
#18+
если разговор о новом ssd, то можно посмотреть на новые интерфейсы, например, https://www.gigabyte.com/ru/Solid-State-Drive/AORUS-NVMe-Gen4-SSD-2TB#kf или (вообще огонь) https://www.gigabyte.com/ru/Solid-State-Drive/AORUS-Gen4-AIC-SSD-8TB#kf. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 09:30 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Недостаточно просто посмотреть на новые интерфейсы. Если диск не рассчитан на режим непрерывной записи, то могут быть прекрасные результаты "в пределах кэша" и "ужас-ужасный" при рабочих нагрузках СУБД. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 10:21 |
|
база на SSD
|
|||
---|---|---|---|
#18+
KreatorXXI если разговор о новом ssd, то можно посмотреть на новые интерфейсы, например, https://www.gigabyte.com/ru/Solid-State-Drive/AORUS-NVMe-Gen4-SSD-2TB#kf или (вообще огонь) https://www.gigabyte.com/ru/Solid-State-Drive/AORUS-Gen4-AIC-SSD-8TB#kf. Гарантия: Ограниченная 5-летняя или 3600 TBW Учитывая что там, скорее всего, новомодный 3D NAND или что-то такое, выглядит как звиздёжь. У MLC-шных самсунгов всего 60 TBW было. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 11:22 |
|
база на SSD
|
|||
---|---|---|---|
#18+
alekcvp, да зачем им звиздеть-то? Да и 3600, я так понимаю, сейчас не ахти. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 11:36 |
|
база на SSD
|
|||
---|---|---|---|
#18+
AndrewVL, если будете пинать эту тему под линухом, не забудьте правильно настроить триминг освободившихся блоков файловой системы, если файловая система поддерживает. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 11:56 |
|
база на SSD
|
|||
---|---|---|---|
#18+
rdb_dev, вечно там какой-то гемор. В винде оно или включено, или выключено, и всё. А на линуксе... https://habr.com/ru/post/497004/ ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 12:58 |
|
база на SSD
|
|||
---|---|---|---|
#18+
kdv, на линухе есть два варианта - через параметры монтирования ФС и через службу. Я предпочитаю второй, более гибкий вариант - через службу Код: plaintext 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18. 19. 20. 21. 22. 23. 24. 25. 26. 27. 28. 29. 30. 31.
... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 13:10 |
|
база на SSD
|
|||
---|---|---|---|
#18+
rdb_dev, это понятно из статьи, на которую я дал ссылку. Очистка либо она происходит сразу после удаления, либо ты пускаешь очистку по таймеру. Я не знаю, что лучше, и в какой ситуации. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 13:43 |
|
база на SSD
|
|||
---|---|---|---|
#18+
kdv, на десктопах вполне можно использовать для этого параметр монтирования, по которому триммирование будет пинаться на каждый чих, но для серваков БД, ИМХО, это не лучший выбор. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 13:59 |
|
база на SSD
|
|||
---|---|---|---|
#18+
KreatorXXI alekcvp, да зачем им звиздеть-то? Да и 3600, я так понимаю, сейчас не ахти. Это для промышленных на PCIex не ахти, а для маленького на M2 - подозрительно. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 14:11 |
|
база на SSD
|
|||
---|---|---|---|
#18+
rdb_dev kdv, на десктопах вполне можно использовать для этого параметр монтирования, по которому триммирование будет пинаться на каждый чих, но для серваков БД, ИМХО, это не лучший выбор. Я так понимаю что TRIM - это когда система сообщает контроллеру, какие блоки на диске свободны на уровне ФС. Иначе после удаления данных с диска контроллер ССД продолжает считать их блоки занятыми, даже если они по-факту свободны. Нужно это из-за всяких MLC, TLC и прочего, т.к. на свободное место данные просто записываются, а на занятое идёт цикл считывание - вставка - запись, если запись идёт в блок, который уже содержит данные с тз контроллера. Так что ИМХО трим лучше всегда иметь по-факту, а не как отдельную процедуру. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 14:16 |
|
база на SSD
|
|||
---|---|---|---|
#18+
alekcvp, сообщает о том, что выделенные ранее блоки SSD под ныне освобождённый участок ФС могут быть перевыделены для другого участка. У SSD нелинейное распределение блоков. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 14:46 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Учитывая, что файрберд при обычной работе никогда не уменьшает размер базы, трим тут вообще сбоку. разве что после б\р применить однократно. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 15:50 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Поскольку в топике автор занят улучшением того что и так хорошо то я подкину еще информации. Если FireBird ставится на Linux - то можно попробовать файловую систему F2Fs спецом разработанную для SSD. https://ru.wikipedia.org/wiki/F2FS ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 16:02 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Ivan_Pisarevsky Учитывая, что файрберд при обычной работе никогда не уменьшает размер базы, трим тут вообще сбоку. разве что после б\р применить однократно. а если все таблицы удалить чё он нулями заполнит терабайт? а нах? ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 16:55 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Я не спец в ваших файрбердах но КМК базы данных отдают дисковое пространство почти ... никогда. Объективно хорошая чистка - это drop tablespace с переносом данных в другой ts. А все остальные способы это какой-то онанизм диска. Опасно. Ненужно. Плохо для физических бэкапов и реплик. Какой номальный DBA будет заниматься стрёмным двиганием данных туда-сюда ради нескольких % свободных блоков? Да зачем ему это надо? Хороший DBA вообще не трогает БД без крайней необходимости. Из таковой я вижу только покупку новой дисковой подсистемы и повреждение старой. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 17:08 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Ivan_Pisarevsky Учитывая, что файрберд при обычной работе никогда не уменьшает размер базы, трим тут вообще сбоку. разве что после б\р применить однократно. Правда они не обязаны быть на том же носителе, что и БД. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 17:35 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Алексей Роза а если все таблицы удалить Алексей Роза а нах? ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 17:36 |
|
база на SSD
|
|||
---|---|---|---|
#18+
mayton Я не спец в ваших файрбердах но КМК базы данных отдают дисковое пространство почти ... никогда. Объективно хорошая чистка - это drop tablespace с переносом данных в другой ts. А все остальные способы это какой-то онанизм диска. Опасно. Ненужно. Плохо для физических бэкапов и реплик. Какой номальный DBA будет заниматься стрёмным двиганием данных туда-сюда ради нескольких % свободных блоков? Да зачем ему это надо? Хороший DBA вообще не трогает БД без крайней необходимости. Из таковой я вижу только покупку новой дисковой подсистемы и повреждение старой. 1. логи за 10 лет снести в архив. 2. рефакторинг. 3. смена проекта. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 18:43 |
|
база на SSD
|
|||
---|---|---|---|
#18+
hvlad Алексей Роза а если все таблицы удалить Алексей Роза а нах? "а нах ему нулями заполнять терабайт?" - вопрос всё туда же. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 18:45 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Алексей Роза 1. логи за 10 лет снести в архив. А разве в файрберде нету Код: sql 1.
? Есть в Постгресе и даже в этом Lego конструкторе MySQL. В монстрах типа Ora/MS/Db есть и подавно. 2. рефакторинг. 3. смена проекта. Ну... переезд равносилен пожару. Убивайте базу вместе с файлами и делайте логическое форматирование диска. Зачем там какие-то тримы. Полумеры... ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 19:08 |
|
база на SSD
|
|||
---|---|---|---|
#18+
mayton Полумеры... ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 19:09 |
|
база на SSD
|
|||
---|---|---|---|
#18+
меня заинтересовала фраза: Ivan_Pisarevsky файрберд при обычной работе никогда не уменьшает размер базы поскольку сам я от FB далёк. хотя наверное снос таблиц это уже "необычная работа" ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 19:25 |
|
база на SSD
|
|||
---|---|---|---|
#18+
mayton А разве в файрберде нету Код: sql 1.
... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 19:41 |
|
база на SSD
|
|||
---|---|---|---|
#18+
hvlad mayton А разве в файрберде нету Код: sql 1.
Спасибо. ... |
|||
:
Нравится:
Не нравится:
|
|||
15.06.2020, 19:46 |
|
база на SSD
|
|||
---|---|---|---|
#18+
hvlad Есть ещё временные файлы. Правда они не обязаны быть на том же носителе, что и БД. Алексей Роза а нах ему нулями заполнять терабайт?" - вопрос всё туда же. Алексей Роза снос таблиц это уже "необычная работа" ... |
|||
:
Нравится:
Не нравится:
|
|||
24.06.2020, 09:49 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Ivan_Pisarevsky А есть ли вопрос, если это и так никто не делает? ну таблицу ты же удалил, а размер базы при этом не уменьшился... так что вместо неё в итоге? Ivan_Pisarevsky вполне штатная работа. штатная - это CRUD. А снос таблиц в продакшене никто не делает. ... |
|||
:
Нравится:
Не нравится:
|
|||
24.06.2020, 10:03 |
|
база на SSD
|
|||
---|---|---|---|
#18+
Алексей Роза таблицу ты же удалил, а размер базы при этом не уменьшился... так что вместо неё в итоге? Алексей Роза А снос таблиц в продакшене никто не делает. ... |
|||
:
Нравится:
Не нравится:
|
|||
24.06.2020, 10:08 |
|
|
start [/forum/topic.php?all=1&fid=40&tid=1560318]: |
0ms |
get settings: |
9ms |
get forum list: |
14ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
170ms |
get topic data: |
13ms |
get forum data: |
2ms |
get page messages: |
73ms |
get tp. blocked users: |
1ms |
others: | 15ms |
total: | 303ms |
0 / 0 |