Требуется создать довольно массивную базу данных для послудеющего полнотекстового поиска по ней. Всего планируется около 300 - 700 млн. (в главной базе) записей с индекс-текстовым полем длиной предварительно 32 байта и десятком чисел с плавающей запятой. Вспомагательные базы будут содержать двоичные данные, по которым также надо будет делать простые небольшие выборки. Статистики будет мало, критична скорость простой выборки. Пиковая нагрузка - до 50 выборок в секунду.

Посему вопрос, что использовать и сколько это будет стоить вместе с железом? Стоимость критична.

Мимопроходящий
Привет, Arrtem!
Ты пишешь:

Курсовик?

--
With best regards, Мимопроходящий.

Posted via ActualForum NNTP Server 1.3

Так точно :)

to gsi___: Почитал, вполне устраивает. Спасибо.

to all Не укажете, где найти тесты производительности по Berkley? И последний вопрос: в Berkley есть полнотекстовый поиск?? Или сами, ручками..

vadiminfoКурсовик 300-700 млн записей? Конечно, играет роль средний размер одной записи, но все-таки. И скока запрос должен по времени один выполняться? Про 50 одновременно в секунду я и не говорю. Для таких задач, возможно, система ценой 50000$ не такая уж дорогая - типа бесплатно.

Вот - вот)) Хорошо, отметаем вопрос стоимости.
+ я не верно объяснил кол-во записей. Это я написал для объяснения объема информации - где-то около 70 Гб. во всей базе. А объемы текста, по которому собираюсь вести поиск - это несколько миллионов строк (< 10). Причем не хотелось бы строить сложные ступенчатые индексы самостоятельно.

Но вопрос скорости остается, поэтому вопрос: какая машина должна быть и какую базу лучше использовать, чтобы можно было делать выборку из 1..10 Гб. базы по текстовому полю с несколькими словами и какие при этом ориентировочно будут задержки.

Вопрос 2. Есть машина 2*Xeon 1.8 Ghz, 2Гб. RAM. Какие для такой машины будут задержки с указанной базой? А на P4 3.0 Ghz

RAID 1

vadiminfo Arrtem
Но вопрос скорости остается, поэтому вопрос: какая машина должна быть и какую базу лучше использовать, чтобы можно было делать выборку из 1..10 Гб. базы по текстовому полю с несколькими словами и какие при этом ориентировочно будут задержки.

Мне кажется, с такими требованиям Вы выходите на лидирующие СУБД, в том числе и по TCP тестам (DB2, Оракл, Скуль). В нашей стране остаются, скорее всего, два последние - легче проконсультироваться в реале. Я Ораклист. Могу тока сказать, что в нем полно фич и для текстовых полей. Например, там есть Oracle Text со специальным каким-то индексированием.
Однако, наверное, чтобы Вам сказали что-то в сторону задержек нужны структура таблы, что-то про особенности данных и критичные запросы.

Спасибо, Вадим, это я и хотел узнать. Будем пробовать, может чего и получится..