powered by simpleCommunicator - 2.0.49     © 2025 Programmizd 02
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Помогите определиться с решением. 800гб 3 т запросов
15 сообщений из 15, страница 1 из 1
Помогите определиться с решением. 800гб 3 т запросов
    #38959113
Dr_No
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Привет всем. Такой вопрос.
Нужно сохранять некие значения с датчиков температур в базе данных.
Данных будет около 800Гб или 9000 000 000 записей за год.
Это около 3 или 4 т. записей в секунду т.е. это кол-во датчиков которые обращаются каждую секунду к системе на запись

Данные которым больше года будут удаляться
Чтение будет редко но по большому объему данных и без каких то преобразований. просто селект.

Вообщем вопрос какую БД выбрать лучше для этого ?


Подойдет ли оракл. Как его настроит?
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38959123
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Dr_NoПривет всем. Такой вопрос.
Нужно сохранять некие значения с датчиков температур в базе данных.
Данных будет около 800Гб или 9000 000 000 записей за год.
Это около 3 или 4 т. записей в секунду т.е. это кол-во датчиков которые обращаются каждую секунду к системе на запись

Данные которым больше года будут удаляться
Чтение будет редко но по большому объему данных и без каких то преобразований. просто селект.

Вообщем вопрос какую БД выбрать лучше для этого ?


Подойдет ли оракл. Как его настроит?Подойдет. Как минимум нужно включать партиционирование.
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38959124
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
P.S. С другой стороны подойдет и пачка плоских файлов :)
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38959151
Dr_No
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Пока из оптимизаций вижу копить данные в памяти и инсертить их в БД сразу пачкой. Ну и партиционирование по дате добавления
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38959817
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Alexander RyndinP.S. С другой стороны подойдет и пачка плоских файлов :)
+1
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38960667
GVF112GVF
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Alexander Ryndin,

Лучше использовать Informix V12 with timeseries datablade !!!
Вставка быстрее чем у Oracle да и меньше нужно места.

С уважением,
Вадим.
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38960780
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
GVF112GVFAlexander Ryndin,

Лучше использовать Informix V12 with timeseries datablade !!!
Вставка быстрее чем у Oracle да и меньше нужно места.

С уважением,
Вадим.3-4 тысячи записей в секунду спокойно делает Oracle на моем ноутбуке. Так что прячьте своего мамонта обратно
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38961520
GVF112GVF
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Alexander RyndinGVF112GVFAlexander Ryndin,

Лучше использовать Informix V12 with timeseries datablade !!!
Вставка быстрее чем у Oracle да и меньше нужно места.

С уважением,
Вадим.3-4 тысячи записей в секунду спокойно делает Oracle на моем ноутбуке. Так что прячьте своего мамонта обратно

Да не бойтесь так Informix ... лучше скажите сколько будет стоить Oracle ?

С уважением,
Вадим.
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38961536
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
GVF112GVFAlexander Ryndinпропущено...
3-4 тысячи записей в секунду спокойно делает Oracle на моем ноутбуке. Так что прячьте своего мамонта обратно

Да не бойтесь так Informix ... лучше скажите сколько будет стоить Oracle ?

С уважением,
Вадим.Oracle SE One - 5800$.
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38961538
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
GVF112GVFДа не бойтесь так Informix ... А чего его бояться? Достаточно глянуть на форум по Informix , где за последние полгода 20 тем из которых половина это ваша реклама, и все становится ясно.
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38963081
GVF112GVF
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Alexander RyndinGVF112GVFДа не бойтесь так Informix ... А чего его бояться? Достаточно глянуть на форум по Informix , где за последние полгода 20 тем из которых половина это ваша реклама, и все становится ясно.

Не знаю, что Вам там ясно ... но Ваш монстр покруче моего ... :-)

Относительно форумов - они разные. Есть такие - http://www.iiug.org/index.php и другие - http://www.informix-zone.com/

Относительно темы вопроса - Why Smart Meters Need Informix TimeSeries - http://www.slideshare.net/ibmsverige/informix-timeseries-forsmartmeters-13192056

Да, многие знают, что Informix (OEM) встроен в маршрутизаторы и т.д.
...
Cisco chose to embed IBM Informix® database software in their solutions because of the robust embeddability, high reliability, and extreme performance of Informix. Today, Cisco has over 100,000 instances of Informix running in production environments; a number that continues
to grow.
...

PS: http://www-01.ibm.com/software/sw-library/en_US/detail/M533016F41158W44.html

Интересно,
Oracle SE One - 5800$ - это на одно ядро ? Он сможет обработать 800 GB данных ?

С уважением,
Вадим.
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38963106
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
GVF112GVFИнтересно,
Oracle SE One - 5800$ - это на одно ядро ? Он сможет обработать 800 GB данных ?Это за 1 Socket (SE и SE One лицензируются по сокетам). При нынешнем количестве ядер на сокет - думаю сможет и больше.
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38963150
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
GVF112GVF Cisco chose to embed IBM Informix® database software in their solutions because of the robust embeddability, high reliability, and extreme performance of Informix. Today, Cisco has over 100,000 instances of Informix running in production environments; a number that continues
to grow.
...

PS: http://www-01.ibm.com/software/sw-library/en_US/detail/M533016F41158W44.html
Получается, что есть какая-то функция, которая очень полезна в Informix для Cisco (те самые Time Series, наверное).
Если я правильно понял, то Informix используется безальтернативно в единственном продукте Cisco Unified CCX Historical Reports .
При этом в родительском продукте Cisco Unified CCX поддержка Informix полностью отсутствует .
Нишевая база данных.
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38963208
GVF112GVF
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Alexander RyndinGVF112GVF Cisco chose to embed IBM Informix® database software in their solutions because of the robust embeddability, high reliability, and extreme performance of Informix. Today, Cisco has over 100,000 instances of Informix running in production environments; a number that continues
to grow.
...

PS: http://www-01.ibm.com/software/sw-library/en_US/detail/M533016F41158W44.html
Получается, что есть какая-то функция, которая очень полезна в Informix для Cisco (те самые Time Series, наверное).
Если я правильно понял, то Informix используется безальтернативно в единственном продукте Cisco Unified CCX Historical Reports .
При этом в родительском продукте Cisco Unified CCX поддержка Informix полностью отсутствует .
Нишевая база данных.

Возможно, что нишевая. Ее позиционирует как быстрый OLTP-движок, для встраиваимых OEM-систем (billing systems), решений IoT (smart meters) и т.д. У заказчика всегда существует альтернатива - это вопросы соотношения требований и цены за решение.

Сейчас, многие начинают начинают считать общую стоимость решения (как правило на три года). Времена такие ... :-)

С уважением,
Вадим.
...
Рейтинг: 0 / 0
Помогите определиться с решением. 800гб 3 т запросов
    #38964658
GVF112GVF
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
...
Рейтинг: 0 / 0
15 сообщений из 15, страница 1 из 1
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Помогите определиться с решением. 800гб 3 т запросов
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]