Новые сообщения [новые:0]
Дайджест
Горячие темы
Избранное [новые:0]
Форумы
Пользователи
Статистика
Статистика нагрузки
Мод. лог
Поиск
|
|
20.02.2009, 15:00
|
|||
|---|---|---|---|
|
|||
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
Ищу устройство, которое бы обеспечило максимально быстрое чтение случайных секторов. Интересует емкость от 20 до 120 гигов, и умение читать/записывать больше 4000 случайных секторов данных в секунду. Собственно, цифра в 4000/секунду получена на SSD Пионер 120GB, но нам бы на порядок больше.. Подскажите, коллеги, какое железо может подойти? Бюджет , скажем, +-5 килобаксов. Piecrusts and virginity are made to be broken(с) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
20.02.2009, 15:04
|
|||
|---|---|---|---|
|
|||
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
Hello, VlasovVolodya! You wrote on Fri, 20 Feb 09 12:00:58 GMT: VlasovVolodya V> Собственно, цифра в 4000/секунду получена на SSD Пионер 120GB, V> но нам бы на порядок больше..в 5к не влезешь. а что за задача такая? -- With best regards, Мимопроходящий. Posted via ActualForum NNTP Server 1.4 ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
20.02.2009, 15:22
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
RAID из SSD дисков.. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
20.02.2009, 16:01
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
На порядок больше, если не следовать совету предыдущего оратора - только RAM. Есть СУБД в ней (Oracle TimesTen), или можно виртуальный диск организовать, если вам дорога именно другая СУБД. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
20.02.2009, 16:15
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
На ваш бюджет можно купить ~100 GB памяти, но позаботьтесь, чтобы сервер имел столько DIMM (например, HP DL580G5), да и софт обычно небесплатен. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
21.02.2009, 18:54
|
|||
|---|---|---|---|
|
|||
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
Задача - обрабатывать поток обращений, желающих по случайному ключу записать или прочитать блок данных фиксированного размера в 1 кб. Так как размер базы ожидается 100 000 000 строчек, а обращений будет 30000 в секунду и ключи случайные, то буферизовать эффективно сложно. Вариантом решения виделся сервер, у которого в памяти есть структура(например, Berkeley DB), хранящая ключи и ссылки на нужные сектора SSD диска. Поигравшись же просто с SSD диском, получили не больше 4000 случайных чтений в секунду, без BDB и других осложнений. Сейчас варианты подкрутить SSD диск на чуть большую скорость работы и распаралелить нагрузку, эксперементировать с буферизацией запросов в надежде на последовательное чтение, купить сервера с большим-большим RAMом. Piecrusts and virginity are made to be broken(с) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
21.02.2009, 20:40
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
VlasovVolodyaдо 120 гиговVlasovVolodyaблок данных фиксированного размера в 1 кб. Так как размер базы ожидается 100 000 000 строчек1Кбайт*100 000 000=100Тбайт, что несколько больше, чем 120 Гбайт. VlasovVolodyaа обращений будет 30000 в секундуЕще один супер-мега-проект? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
21.02.2009, 21:22
|
|||
|---|---|---|---|
|
|||
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
автор1Кбайт*100 000 000=100Тбайт, что несколько больше, чем 120 Гбайт. 100 000 000 kb = 97 656 mg = 95,367 gb Piecrusts and virginity are made to be broken(с) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
21.02.2009, 21:57
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
miksoftVlasovVolodyaдо 120 гиговVlasovVolodyaблок данных фиксированного размера в 1 кб. Так как размер базы ожидается 100 000 000 строчек1Кбайт*100 000 000=100Тбайт, что несколько больше, чем 120 Гбайт. VlasovVolodyaа обращений будет 30000 в секундуЕще один супер-мега-проект? Перевод всех московских маршруток на пластиковые карты с онлайн-авторизацией :) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
21.02.2009, 22:44
|
|||
|---|---|---|---|
|
|||
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
Ну что вы, бухгалтерию автоматизируем.=) Piecrusts and virginity are made to be broken(с) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
22.02.2009, 08:48
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
Вот про это почитайте. http://www.ixbt.com/storage/gigabyte-iram-p1.shtml ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
24.02.2009, 09:51
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
VlasovVolodyaавтор1Кбайт*100 000 000=100Тбайт, что несколько больше, чем 120 Гбайт. 100 000 000 kb = 97 656 mg = 95,367 gb Piecrusts and virginity are made to be broken(с)Да, с объемом я ошибся. Но в "а обращений будет 30000 в секунду" все равно не верю. Особенно для бухгалтерии. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
24.02.2009, 13:53
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
miksoft... Но в "а обращений будет 30000 в секунду" все равно не верю. Особенно для бухгалтерии... Разве что если 1С 8.2 поставить - тогда может и вытянет... :) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
24.02.2009, 14:07
|
|||
|---|---|---|---|
|
|||
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
Про бухгалтерию, конечно, была шутка. Вопрос изначально касался устройства, которое отвечает определенным требованиям. Мимопроходящий спросил про задачу, я ответил. То что она не типичная, мягко говоря - понимаю. Другое дело, что эта постановка задачи от заказчика, единственный вариант повлиять на котороую - ответить "Окей, но это будет стоить на столько-то пэсо дороже." Насколько больше песо - стало понятнее после прочтения ответов в этой теме. В общем, спасибо всем высказавшим суждения, пищу для размышлений и материалы на почитать получил. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
24.02.2009, 14:09
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
А если серьезно - то я думаю, что одна машина вряд ли справится с такой скоростью. Если все-таки достигается скорость 4000 обращений в секунду, то может как-то распараллелить процесс, чтобы база была распределена по 10 компам, а сервер хранил бы ключи и накапливал разумное число запросов к компу № такой-то, и затем отсылал по сети на этот комп, и через некоторое время получал ответ - обрабатывал его и т.д. Можно попробовать с разбиением базы на 2 сначала. Смутно все представляется, но решение должно быть, как мне кажется, в этом направлении. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
24.02.2009, 14:19
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
VlasovVolodyaМимопроходящий спросил про задачу, я ответил.Вы описали не столько задачу, сколько ваше видение ее решения. Например, насколько ключи в запросах случайные? каково распределение? Почему только один сервер? Некоторые и 200 серверов ставить не стесняются для более скромных задач. Кстати, если будете еще с SSD экспериментировать - замеряйте не отдельно чтения, отдельно запись, а в смеси именно в той пропорции и распределении, которые ожидаются у вас. Год-два назад была информация, что постоянном переключении чтение/запись картина удручающе портится. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
25.02.2009, 10:21
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
VlasovVolodya, EMC анонсировала такой дисковый массив, на SSD дисках. параметры IO там близки к запрошенным, но в бюджет вы совсем не входите. есть еще решения от IBM на SSD, но опять же там цены кусаются. можно посмотреть самые быстрые SSD от Intel - X25 на MLC и SLC памяти, на fcenter были тесты, там же было сравнение с 15-ти тысячниками SAS, если не ошибаюсь ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
25.02.2009, 21:24
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
Честно не совсем понял вашу задачу. Мне не совсем понятно чем вы будете формировать такую очередь? Я бы рекомендовал посмотреть SUN Disk Array посмотреть, связисты их очень "любят" для биллинговых систем пользовать. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
26.02.2009, 09:53
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
babys, связисты просто любят Oracle, а Oracle хорошо работает на SUN Sparc+Solaris дисковые массивы enterprise-уровня для SUN по OEM соглашению производит компания Hitachi Data Systems только в бюджет 5 тысяч долларов такое решение никак не укладывается ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
26.02.2009, 22:19
|
|||
|---|---|---|---|
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
mm1chael, я пока только superdom + sun array у них видел, под unix ами. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
27.02.2009, 07:16
|
|||
|---|---|---|---|
|
|||
Диск с быстрым рандомным доступом? Ищу. |
|||
|
#18+
babysmm1chael, я пока только superdom + sun array у них видел, под unix ами. У нас разные есть :) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
start [/forum/topic.php?fid=30&mobile=1&tid=1531642]: |
0ms |
get settings: |
7ms |
get forum list: |
13ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
33ms |
get topic data: |
12ms |
get forum data: |
3ms |
get page messages: |
62ms |
get tp. blocked users: |
2ms |
| others: | 14ms |
| total: | 154ms |
| 0 / 0 |
