Гость
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Запись на Flash-память / 8 сообщений из 8, страница 1 из 1
15.10.2018, 10:40
    #39717429
Nixmist
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Запись на Flash-память
Имею поток данных (около 400 тыс. записей ежедневно), имею таблицу на 1 млн записей, которая перезаписывается непрерывно. Таблицу надо писать на Flash память (NAND, NOR, emmc).
Вопрос заключается в следующем, есть ли какие то готовые решения на postgres или же за отсутствием таковых, какую файловую систему выбрать для записи и желательно как ее реализовать еще, дабы минимизировать износ FLash памяти.
...
Рейтинг: 0 / 0
15.10.2018, 12:28
    #39717519
Maxim Boguk
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Запись на Flash-память
NixmistИмею поток данных (около 400 тыс. записей ежедневно), имею таблицу на 1 млн записей, которая перезаписывается непрерывно. Таблицу надо писать на Flash память (NAND, NOR, emmc).
Вопрос заключается в следующем, есть ли какие то готовые решения на postgres или же за отсутствием таковых, какую файловую систему выбрать для записи и желательно как ее реализовать еще, дабы минимизировать износ FLash памяти.

Любой внятный серверный SSD диск устареет сильно раньше чем протрется от такой смешной нагрузки. :)
Никаких готовых решений нет просто обычный SSD диски с обычной EXT4 FS.
Просто покупать нормальные write oriented модели а не самое дешевое что получилось найти на базаре.

--
Maxim Boguk
лучшая поддержка PostgreSQL: dataegret.ru [/quot]
...
Рейтинг: 0 / 0
15.10.2018, 12:58
    #39717548
Nixmist
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Запись на Flash-память
Maxim Boguk, проблема в цене
...
Рейтинг: 0 / 0
15.10.2018, 13:49
    #39717620
Dimitry Sibiryakov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Запись на Flash-память
Nixmistпроблема в цене
У тебя нет в бюджете на задачу и ста долларов? Тогда следует пересмотреть условие "надо писать на Flash память (NAND, NOR, emmc)" и обойтись обычным диском или даже оперативной памятью. Потеря данных из оперативной памяти при перезагрузке легко компенсируется быстрым её наполнением обратно.
...
Рейтинг: 0 / 0
15.10.2018, 17:09
    #39717764
BigBudda
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Запись на Flash-память
автор с обычной EXT4 FS
Предпочтение между ext4 и xfs следует отдавать ext4?
Это рекомендации со стороны postgresql? Чем грозит, если же Бд будет на xfs?
...
Рейтинг: 0 / 0
15.10.2018, 17:16
    #39717768
BigBudda
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Запись на Flash-память
BigBuddaавтор с обычной EXT4 FS
Предпочтение между ext4 и xfs следует отдавать ext4?
Это рекомендации со стороны postgresql? Чем грозит, если же Бд будет на xfs?

Нашёл ответ в другой теме:
авторЯ бы сейчас сказал что ставить EXT4 и успокоится.
Когда был ext3 там вопрос был другой.
А сейчас - использовать не особо развиваемую и в общем не особо поддерживаемую официально FS - к проблемам потенциальным.
Лучше использовать максимально стандартные решения потому что они максимально проверены.

PS: у меня где то половина из 200 серверов на xfs и половина на EXT4 я думаю.

Вопрос связан больше с утилитой e2fsprogs. Проблема в том, что на ext4 из-за неё мы ограничены размером раздела в 16 ТБ.
...
Рейтинг: 0 / 0
16.10.2018, 02:05
    #39717882
Maxim Boguk
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Запись на Flash-память
BigBuddaBigBuddaпропущено...

Предпочтение между ext4 и xfs следует отдавать ext4?
Это рекомендации со стороны postgresql? Чем грозит, если же Бд будет на xfs?

Нашёл ответ в другой теме:
авторЯ бы сейчас сказал что ставить EXT4 и успокоится.
Когда был ext3 там вопрос был другой.
А сейчас - использовать не особо развиваемую и в общем не особо поддерживаемую официально FS - к проблемам потенциальным.
Лучше использовать максимально стандартные решения потому что они максимально проверены.

PS: у меня где то половина из 200 серверов на xfs и половина на EXT4 я думаю.

Вопрос связан больше с утилитой e2fsprogs. Проблема в том, что на ext4 из-за неё мы ограничены размером раздела в 16 ТБ.

при более чем 10TB разделах я бы рекомендовал независимые рейды и tablespaces создавать для удобства управления а не собирать все в одну кучу.

PS: xfs ничем не грозит но фундаментальных преимуществ перед ext4 я сейчас у нее уже не вижу.

--
Maxim Boguk
лучшая поддержка PostgreSQL: dataegret.ru [/quot]
...
Рейтинг: 0 / 0
16.10.2018, 13:56
    #39718152
Dimitry Sibiryakov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Запись на Flash-память
BigBuddaВопрос связан больше с утилитой e2fsprogs. Проблема в том, что на ext4 из-за неё мы ограничены размером раздела в 16 ТБ.
Так зачем использовать на ext4 утилиту для ext2?..
...
Рейтинг: 0 / 0
Форумы / PostgreSQL [игнор отключен] [закрыт для гостей] / Запись на Flash-память / 8 сообщений из 8, страница 1 из 1
Целевая тема:
Создать новую тему:
Автор:
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]