powered by simpleCommunicator - 2.0.59     © 2025 Programmizd 02
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Форумы / Сравнение СУБД [игнор отключен] [закрыт для гостей] / Vertica vs Netezza vs Grennplum
18 сообщений из 93, страница 4 из 4
Vertica vs Netezza vs Grennplum
    #38037243
Фотография ASCRUS
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Apex_Dogпропущено...

интересно, почему именно MPP, если даже данные машино генерируемые ?

Масштабируемость.

_Dogпропущено...


это в основном для оптимального load'a?
Это в основном для масштабируемости.
Спасибо что ответил :) Мне в принципе и добавить нечего.

Ну разве что, возвращаясь к прошлому вопросу, я еще раз внимательно посмотрел на сайт Actian/Vectorwise и так и не понял, что за "On-chip cache computing", который "100x faster to process data on chip cache than RAM" и как он помогает, когда очень очень много разных данных, которые ну никак даже частями особо и не влазят в тот самый RAM. Плюс "Very fast reporting engine" тоже не очень понятен, про который написано "Connect Vectorwise to any Business System or Enterprise Data Warehouse and load data using bulk or batch loading, and transform either before or after loading". По рисунку архитектуры на сайте производителя смахивает на какую надстройку над Warehouse, в принципе сейчас любой уважающий себя BI имеет аналогично похожий механизм затягивания на себя части данных для организации быстрого анализа, ну разве что без чипа, но с другой стороны значит и без привязки к конкретному оборудованию. В общем мне до конца не понятный продукт, одно понятно было изначально и 100% - нам он не подходит по требованиям.
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38047867
_Dog
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
ASCRUS,
А что вместо SQL Central используете?
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38047896
Фотография ASCRUS
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
_DogASCRUS,
А что вместо SQL Central используете?
Eclipse с плагином DBViewer, еще народ на Белке сидит. В принципе любой JDBC клиент подходит, даже тот же ISQL с комплекта Sybase. Так же накатал под PowerDesigner небольшой плагин на реверс таблиц и представлений, чтобы физ модель видеть наглядно. Сейчас подумываем расширить этот плагин до уровня полноценного с поддержкой всех фич и генерацией скриптов на создание и изменение объектов.
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38049094
ASCRUS,

Лёша, привет.

А PD у вас откуда взялся :)
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38049567
Фотография ASCRUS
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Привет Юра. PD триальный, чтобы его купить надо что то показать. Чтобы что то показать, надо сделать реверс. Пока к сожалению показать кроме табличек нечего, Sybase ответил, что поддержка Vertica не планируется, в духе вот купите его, потом попросите и мы поставим в планы. Очень печальная позиция, где надо пояснять руководству, почему купив продукт, мы еще должны будем потратить ресурс на его доработку до уровня работоспособности. В общем не переживай, пиратством не занимаемся ;)
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38069991
megaexpert
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
MasterZivя к тому, что терабайты-то разные бывают.
У меня например вот 53 миллиарда записей, но терабайт только 4, ибо компрессия.
Если не секрет, в какой компании, или хотя бы в какой отрасли такая база? И что в двух словах в ней хранится?

Меня звали на работу в фирму, где в терадатовском хранилище 2ярда записей. Я подумал, что это много.
Потом узнал, что в eBay например их 17 ТРИЛЛИОНОВ в Greenplum, и 3 триллиона в терадате.
Интересно, сколько в сбере?
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38071350
Павел Новокшонов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
megaexpertMasterZivя к тому, что терабайты-то разные бывают.
У меня например вот 53 миллиарда записей, но терабайт только 4, ибо компрессия.
Если не секрет, в какой компании, или хотя бы в какой отрасли такая база? И что в двух словах в ней хранится?

Меня звали на работу в фирму, где в терадатовском хранилище 2ярда записей. Я подумал, что это много.
Потом узнал, что в eBay например их 17 ТРИЛЛИОНОВ в Greenplum, и 3 триллиона в терадате.
Интересно, сколько в сбере?

Пару лет назад Ebay вроде как собирался мигрировать GreenPlum в пользу Терадаты.

http://www.dbms2.com/2010/10/06/ebay-followup-greenplum-out-teradata-10-petabytes-hadoop-has-some-value-and-more/
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38073131
Фотография SergSuper
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
megaexpertMasterZivя к тому, что терабайты-то разные бывают.
У меня например вот 53 миллиарда записей, но терабайт только 4, ибо компрессия.
Если не секрет, в какой компании, или хотя бы в какой отрасли такая база? И что в двух словах в ней хранится?

Меня звали на работу в фирму, где в терадатовском хранилище 2ярда записей. Я подумал, что это много.
Потом узнал, что в eBay например их 17 ТРИЛЛИОНОВ в Greenplum, и 3 триллиона в терадате.
Интересно, сколько в сбере?например в северо-западном сбере в день если нет никаких дополнительных операций типа начисления процентов, в день делается примерно полмиллиона проводок, хранится только последний год
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38073264
Фотография Vovaka
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Павел НовокшоновПару лет назад Ebay вроде как собирался мигрировать GreenPlum в пользу Терадаты.

Были какие-то траблы у них, но все так и осталось.
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38073341
Фотография Apex
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
VovakaПавел НовокшоновПару лет назад Ebay вроде как собирался мигрировать GreenPlum в пользу Терадаты.

Были какие-то траблы у них, но все так и осталось.
Подозреваю, что с уходом Оливера эта тема заглохла.
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38192283
AAron
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
SergSupermegaexpertпропущено...

Если не секрет, в какой компании, или хотя бы в какой отрасли такая база? И что в двух словах в ней хранится?

Меня звали на работу в фирму, где в терадатовском хранилище 2ярда записей. Я подумал, что это много.
Потом узнал, что в eBay например их 17 ТРИЛЛИОНОВ в Greenplum, и 3 триллиона в терадате.
Интересно, сколько в сбере?например в северо-западном сбере в день если нет никаких дополнительных операций типа начисления процентов, в день делается примерно полмиллиона проводок, хранится только последний год
мы делали проект миграции их ИАСКа - там были не такие уж большие базы. до десятка террабайт. насчет остальных систем - не в курсе.
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38207145
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
megaexpertЕсли не секрет, в какой компании, или хотя бы в какой отрасли такая база? И что в двух словах в ней хранится?

например, подневные остатки товаров за 10 лет для ритейла (сотня тысяч номенклатур и несколько тысяч магазинов)
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38207149
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
впрочем, тут не нужно упомянутое ПО,
и MSSQL, и Oracle вполне справляются
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38207625
geereye
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Vovaka100ТБ - это оценочная прикидка года через 3.

Телеком. Ну вот типичный пример одной из многих сущностей: сейчас порядка 100 млн записей в сутки, далее будет только расти, сырые данные нужны как минимум месяца 3, далее можно слегка агрегировать + нужно еще сразу несколько агрегатов держать. Есть еще нетипичные примеры, когда записей в секунду сейчас порядка 200 тысяч . Т.е. порядка 17 млрд записей в сутки :) Тут не нужно ничего агрегировать, нужен просто быстрый поиск.
вопросы:
- быстрый поиск нужен для одной записи, или для массива записей? если для массива записей, общий признак (по которому агрегатируете) у этого массива записей есть, или это записи из разных групп, ничем логически не связанные?
- как часто нужен этот быстрый поиск? если точно не можете сказать, и приблизительно затрудняетесь, то, хотя бы, как часто по сравнению с частотой вставки записей?
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38207906
geereye
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
потому как уж очень задача смахивает на уже давно решённую.
раздельные структуры:
- для дерева агрегатов, оптимизированная на изменение
- для массива фактов, оптимизированная на вставку
каждая вставка единичного факта приводит к изменению соответствующих агрегатов.
факты можно вставлять единично, группами, батчами.
но из-за специализации структур хранения, факты не адресуемы единично. факты пишутся в хронологическом порядке, с возможностью вынуть пачку фактов от заданного начального до заданного конечного таймстампа, и уже вынуть из пачки нужный "вручную" - программно.
Работает уже давно и прекрасно, скорости вставки машино-генерируемых данных очень высокие.
Состряпать, в принципе, недолго, к тому же есть чудный TPNS (teleprocessing network simulator) который замечательно симулирует кучу сетевых клиентов, которые люто шлют пакеты. Так что сразу можно и посмотреть.
В принципе, по цене будет в пределах связки WAS + DB2, то есть, если я правильно понимаю, и в пределах стоимости неттезы, плюс-минус.
Да, только никто это дело хранилищем не обзывал.
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38508828
bmv_rus
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
05.07.2013 - НР Vertica: современная аналитика.

YouTube Video
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38508945
19 Белых Котиков
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Vovaka,

авторОбъем ХД планируется до сотни ТБ через несколько лет

Дурное дело нехитрое...
...
Рейтинг: 0 / 0
Vertica vs Netezza vs Grennplum
    #38509699
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
bmv_rus05.07.2013 - НР Vertica: современная аналитика.


"Масштабируемо - просто добавьте лезвие!"
Лезвие, это пять!!!!
...
Рейтинг: 0 / 0
18 сообщений из 93, страница 4 из 4
Форумы / Сравнение СУБД [игнор отключен] [закрыт для гостей] / Vertica vs Netezza vs Grennplum
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]