powered by simpleCommunicator - 2.0.59     © 2025 Programmizd 02
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Форумы / OLAP и DWH [игнор отключен] [закрыт для гостей] / MPP Databases
25 сообщений из 47, страница 1 из 2
MPP Databases
    #39991144
Фотография a_voronin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Господа,
если говорить о MPP (Massively parallel) базах. Какие стоит рассматривать?

Vertica, Greenplum, Teradata, Clickhouse.

Есть ещё какое-то кандидаты достойные рассмотрения?

Teradata все сеперкруто за запредельльные деньги.

Vertica все круто за разумные деньги.

GreenPlum -- бесплатно и неплохо, но надо админить и функционал на среднем уровне.

Clickhouse -- бесплатно, но для довольно ограниченного круга задач.

Есть где-то обзоры и сравнения внятные?
...
Рейтинг: 0 / 0
MPP Databases
    #39991187
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
a_voronin,

Рассматривать с точки зрения вакансий можно так:

Clickhouse - 49%
Teradata - 20%
Greenplum - 17%
Vertica - 14%
...
Рейтинг: 0 / 0
MPP Databases
    #39991199
ShIgor
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Exasol, на хабре поищите.
неплохие обзоры.
...
Рейтинг: 0 / 0
MPP Databases
    #39991222
Sintetik
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
если терадата для вас запредельно, я бы смотрел
Netezza если готовы раскошелится на железку
Vertica если хотите рабочий, неглючний софт, ну а железо как получится

больше ничего, имхо из опыта
...
Рейтинг: 0 / 0
MPP Databases
    #39991228
Бумбараш
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
5+ лет назад рынок(на Роисси) был поделен между Vertica и Teradata

после 14 года Teradata стала мегадорогая. Основные клиенты начали пытаться с неё слезть. В России распустили часть офиса терадаты.

В это же время начал расти Greenplum. Сейчас у него самая большая доля рынка, особенно по новым внедрениям. Самое активное развитие, коммьюнити и т.п. + он бесплатный. Я бы выбрал его.

Clickhouse хорошая высокопроизводительная штука, но напрямую сравнивать с другими нельзя, так как узкий функционал.
Часто используют Greenplum + Clickhouse.
...
Рейтинг: 0 / 0
MPP Databases
    #39991266
T87
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
a_voronin,

Azure Synapse
...
Рейтинг: 0 / 0
MPP Databases
    #39991267
T87
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
AWS Redshift
...
Рейтинг: 0 / 0
MPP Databases
    #39991326
Фотография a_voronin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
T87
AWS Redshift


Это облачные, а я скорее веду речь о земных MPP.
...
Рейтинг: 0 / 0
MPP Databases
    #39991383
Фотография George Nordic
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
T87
AWS Redshift
Тогда уж и Snowflake, в копилочку.
ShIgor
Exasol, на хабре поищите.неплохие обзоры.
+1 за Exasol. К тому же, скоро на Россию выйдет отдельный человек.
Отличается от Вертики тем, что сам греет кэш. Скорость дисков не принципиальная. Но, насколько я понял, что в узле кластера хранится всего несколько сотен миллионов, максимум - несколько миллиардов записей. Да, и платная.
Из моих партнеров АТК консталтинг данным продуктом занимались.

Clickhouse - хорош для хранения и анализа логов. В общем, она изначально была для этого и предназначена.
GreenPlum - да, есть хорошие проекты. но если говорить про промышленное применение, то там поддержка нужна всё-таки, а она весьма не бесплатная.

С Уважением,
Георгий.
...
Рейтинг: 0 / 0
MPP Databases
    #39991428
Бумбараш
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
George Nordic
+1 за Exasol.

где он работает в продакшене в России?

откуда такие советы? вы работали с ним? или только статью на хабре прочитали?
...
Рейтинг: 0 / 0
MPP Databases
    #39991443
Фотография a_voronin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Прислали мне вакансию сегодня (РосШтрафы) вот с таким зверем.

MariaDB ColumnStore
MariaDB ColumnStore is a columnar storage engine that utilizes a massively parallel distributed data architecture. It's a columnar storage system built by porting InfiniDB 4.6.7 to MariaDB, and released under the GPL license.
...
Рейтинг: 0 / 0
MPP Databases
    #39991455
Фотография George Nordic
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Бумбараш, партнеры рыли и внедряют. Рассказывали. Так как они смотрели несколько вышеуказанных платформ (кроме teradata), они их сравнивали и решили остановиться на exasol, как на оптимальном сочетании цена / требуемая функциональность. Но проекты больше по чековой аналитике / аналитика маркетинга, под другие задачи, возможно, лучше будет другая платформа.

Смотрю, даже подборку обучающих материалов сделали.

А что человек выходит - это инсайт :) но не в продакшен, это сейл.

С Уважением,
Георгий
...
Рейтинг: 0 / 0
MPP Databases
    #39991457
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Бумбараш
George Nordic
+1 за Exasol.

где он работает в продакшене в России?

откуда такие советы? вы работали с ним? или только статью на хабре прочитали?


7 вакансий с этим Exasol, из них только 2 вакансии разработчика от Ситимобил и Badoo - это социальная сеть 18+ (из их описания на hh). Имхо, бесперспективно.
...
Рейтинг: 0 / 0
MPP Databases
    #39991477
Фотография George Nordic
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Критик, вариант оценки по вакансиям - очень здравый. Но иногда на новом продукте можно неплохо заработать. Сейчас по snowflake спецов нет от слова совсем. А на западе - вполне себе востребованная технология, но у них и к облакам отношения другое. Так что на новой технологии можно иногда неплохо заработать.
a_voronin
Прислали мне вакансию сегодня (РосШтрафы)
Ну, если гос.сектор, то надо что-нибудь скрепное:
* Arenadata DB (ADB) – распределенная масштабируемая отказоустойчивая СУБД на базе аналитической массивно-параллельной системы с открытым исходным кодом Greenplum, адаптированная для российского использования и зарегистрированная в государственном реестре программ для ЭВМ;
* Arenadata Grid (ADG) — платформа вычислений в памяти, которая позволяет значительно ускорить приложения без необходимости замены существующих СУБД.
* Arenadata QuickMarts (ADQM) — кластерная колоночная система управления базами данных (СУБД) для быстрого анализа больших объёмов данных при одновременном снижении нагрузки на системы их хранения.
...
Рейтинг: 0 / 0
MPP Databases
    #39991482
londinium
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
авторTeradata все сеперкруто за запредельльные деньги.
Всегда интересовал вопрос: сколько это весьма сомнительное счастье (Teradata) стоит
...
Рейтинг: 0 / 0
MPP Databases
    #39991512
Фотография a_voronin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Критик
Бумбараш
пропущено...

где он работает в продакшене в России?

откуда такие советы? вы работали с ним? или только статью на хабре прочитали?


7 вакансий с этим Exasol, из них только 2 вакансии разработчика от Ситимобил и Badoo - это социальная сеть 18+ (из их описания на hh). Имхо, бесперспективно.


Вы все вакансии смотрите, а они там напишут
"SAP BW/HANA,Vertica, Teradata, Hadoop, GreenPlum. "
И какая на самом деле есть непонятно.
...
Рейтинг: 0 / 0
MPP Databases
    #39991515
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
a_voronin,

Все так, но в первой прикидке оценить перспективность можно.

Я согласен George Nordic, что денег можно поднять, т.к. у работодателя нет особого выбора, но при этом есть и обратная сторона - работнику придется становиться заложником этого работодателя, ибо наработанный опыт сложно будет применить где-то еще.
...
Рейтинг: 0 / 0
MPP Databases
    #39991518
Фотография George Nordic
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Критик
...но при этом есть и обратная сторона - работнику придется становиться заложником этого работодателя, ибо наработанный опыт сложно будет применить где-то еще.
Однако, если технология стрельнет, то можно писать себе овергодов опыта и выгодно отличаться (для того же HR) от прочих кандидатов.
a_voronin
Вы все вакансии смотрите, а они там напишут
"SAP BW/HANA,Vertica, Teradata, Hadoop, GreenPlum. "
И какая на самом деле есть непонятно.
Да Excel, ясен пень. Чем больше систем указано, тем больше подозрений, что ничего из них толком не запущено.
...
Рейтинг: 0 / 0
MPP Databases
    #39991562
Бумбараш
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
George Nordic
Бумбараш, партнеры рыли и внедряют.

Так я тоже много чего рыл, и знаю, как происходит рытьё.
Делается конкурс на хранилище, туда набивается штук десять претендентов. Большая часть для массы или лицом поторговать. Делают костыльный пилот и убывают в закат. Я таким образом рыл штук двадцать движков, но в проде используют в итоге только движки четырех видов. Остальные так и продолжают рыться по конкурсам годами.

Вопрос-то простой - где Exasol является ядром хранилища в РФ в продакшене?

По всей видимости, нигде. Либо используется как Кликхаус в узкой части. Но и о таких случаях мне неизвестно.
...
Рейтинг: 0 / 0
MPP Databases
    #39991567
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
...
Рейтинг: 0 / 0
MPP Databases
    #39991569
Бумбараш
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Критик
a_voronin,

Все так, но в первой прикидке оценить перспективность можно.

Я согласен George Nordic, что денег можно поднять, т.к. у работодателя нет особого выбора, но при этом есть и обратная сторона - работнику придется становиться заложником этого работодателя, ибо наработанный опыт сложно будет применить где-то еще.

я по такому пути однажды пошел. Когда в России появилась Терадата, и на нашей галере в ней проекты начались, я туда пошел. Думал получу уникальный востребованный скил. Я в ней прокачался, наполучал сертификатов, знал архитектуру и т.п. Сидел думал щас меня будут разрывать.
Терадата в свою очередь начала окукливаться и потихоньку сворачиваться. Сейчас никаких проектов развития на ней нет. Только легаси. По деньгам тоже ничего особенного. Гораздо интереснее в популярные технологии идти. Тот мой полученный опыт, на что я немало потратил, сейчас не востребован.

Сейчас даже сотрудники самой терадаты как интегратор сидят пилят проекты по витринам на оракле и гринпламе. Как рядовые галеристы.
...
Рейтинг: 0 / 0
MPP Databases
    #39991577
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Бумбараш,

Аналогично, но относительно Cognos TM1, только 2 года зря потерял.
Сейчас по нему 5 вакансий на всю Москву (если исключить всяких контролеров, методологов и стажеров)
...
Рейтинг: 0 / 0
MPP Databases
    #39991674
T87
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Прочитав тред, можно сделать вывод, что всё фигня. Так куда же идут современные DWH в РФ?
...
Рейтинг: 0 / 0
MPP Databases
    #39991678
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
T87,

сейчас основной тренд - это бигдата,
суют везде, даже там, где она совсем не нужна
и совершенно не задумываются о стоимости поддержки решения
...
Рейтинг: 0 / 0
MPP Databases
    #39991748
T87
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Критик
T87,

сейчас основной тренд - это бигдата,
суют везде, даже там, где она совсем не нужна
и совершенно не задумываются о стоимости поддержки решения

Но че-то всю эту бигдату сливают потом в терадату, гринплам и т.п.
...
Рейтинг: 0 / 0
25 сообщений из 47, страница 1 из 2
Форумы / OLAP и DWH [игнор отключен] [закрыт для гостей] / MPP Databases
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]