powered by simpleCommunicator - 2.0.59     © 2025 Programmizd 02
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Форумы / Сравнение СУБД [игнор отключен] [закрыт для гостей] / выбор БД для хранения 8Tb данных
5 сообщений из 80, страница 4 из 4
выбор БД для хранения 8Tb данных
    #37371937
Victor Metelitsa
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Пожалуй, я-таки проголосовал бы за DB2 Express-C (не знаю насчёт PostgreSQL, слышал только нехорошее слово "vacuum"). Надо бы только оценить, важно ли ограничение в 2 гига ОЗУ, что зависит от объёма запрашиваемых данных и случайности запросов этих данных. Для быстрого удаления имеет смысл применять "партишионирование для бедных" - т.е. разбить данные на несколько таблиц и поверх них сделать view с union all; drop'ать/пересоздавать таблицы и view, когда данные в таблицах устарели.

(Интересно, что лицензия запрещает использовать MDC (многомерные кластера) и компрессию на Express-C, но физически они, вроде бы, не были отключены. А это чрезвычайно удобные и полезные штуки).

Насколько я вижу по синтаксису CREATE TABLE в DB2 9.7 (сам не пробовал создавать), таблица может принадлежать нескольким tablespace (раньше такого не было). Таким образом, имеет смысл создать по одному tablespace на каждый диск и бекапить по-тэйблспэйсно, а таблицы создавать на всех "данновых" tablespace сразу. Размер страницы имеет смысл выбрать в 32K (как известно, основное время тратится на позиционирование, а не на считывание); если оставить дефолтный, без толку пропадёт море места. Так называемый blob определить как VARCHAR(1024) FOR BIT DATA.
...
Рейтинг: 0 / 0
выбор БД для хранения 8Tb данных
    #37371952
Victor MetelitsaНасколько я вижу по синтаксису CREATE TABLE в DB2 9.7 (сам не пробовал создавать), таблица может принадлежать нескольким tablespace (раньше такого не было). Таким образом, имеет смысл создать по одному tablespace на каждый диск и бекапить по-тэйблспэйсно, а таблицы создавать на всех "данновых" tablespace сразу.
Это что за чудо такое?
Чтобы тейблспейс состоял из нескольких файлов, такое понятно. Но чтобы таблица лежала сразу на нескольких тейблспейсах, вы не путаете это с париционированием?
...
Рейтинг: 0 / 0
выбор БД для хранения 8Tb данных
    #37372051
Victor Metelitsa
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
http://publib.boulder.ibm.com/infocenter/db2luw/v9r7/index.jsp?topic=/com.ibm.db2.luw.sql.ref.doc/doc/r0000927.html
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
tablespace-clauses

|--+---------------------------------------+--●----------------->
   |     .-,---------------.               |      
   |     V                 |  .-CYCLE----. |      
   '-IN----tablespace-name-+--+----------+-'      
                              '-NO CYCLE-'        

>--+--------------------------------+--------------------------->
   |                           (11) |   
   '-INDEX IN--tablespace-name------'   

>--+------------------------------+-----------------------------|
   |          .-,---------------. |   
   |          V                 | |   
   '-LONG IN----tablespace-name-+-'  
Поскольку у меня нет реальных шансов продвинуться в реальном использовании DB2 дальше 9.1, то неохота разбираться, как это работает и работает ли в Express-C. Просто случайно увидел и был сильно удивлён.
...
Рейтинг: 0 / 0
выбор БД для хранения 8Tb данных
    #37398580
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Не претендую на "серебрянную пулю", но почему просто не попробовать несколько вариантов?

Например, на MSSQL 2008R2 это будет выглядеть примерно так: сжатая секционированная таблица с кластерным индексом по полям поиска.

В случае удаления "100 млн" - просто выкидываем секцию из таблицы.
Это происходит на уровне метаданных, и выполняется микросекунды.

В одном из моих проектов была таблица, содержащая примерно 5 млрд записей (подневные остатки крупной торговой сети), система очень хорошо себя чувствовала на машине, которая даже не поддерживала х64 (сервер был родом из начала века). Дисковая подсистема была приблизительно того же уровня. Правда, там не было блобов, но тут только тест все покажет.
...
Рейтинг: 0 / 0
выбор БД для хранения 8Tb данных
    #37523422
Андрей Васильевич
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Да. DB2 очень хорошая СУБД. Я знаю много больших баз данных на ней. И быстро и надежно. Не встречал проблем с ней. CACHE тоже может подойти. Но я был свидетелем когда при внезапном отключении электричества база CACHE испортилась(база теневого копирования), а вот с DB2 таких случаев не припомню.
...
Рейтинг: 0 / 0
5 сообщений из 80, страница 4 из 4
Форумы / Сравнение СУБД [игнор отключен] [закрыт для гостей] / выбор БД для хранения 8Tb данных
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]