powered by simpleCommunicator - 2.0.49     © 2025 Programmizd 02
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Big Data - собирается ли кто-либо создавать здесь такой форум?
25 сообщений из 76, страница 1 из 4
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38956929
Всем добрый день.

Вошел я наконец в big data. Скажу вам, что тема очень интересная, и очень отличается от классического DWH/ETL/OLAP.

В связи с этим вопрос: а не собираются ли уважаемые модераторы сделать отдельный форум тут по Big Data?
Я думаю в этом есть смысл.

С другой стороны, можно было этот форум "расширить", поменяв название. Но думаю это не самый хороший вариант, так как в big data такой "зоопарк" и столько вопросов, которые и близко не стояли к тем, что в классическом DWH стоят, что люди просто не будут пересекаться.

Если модераторы это видят, предлагаю свою кандидатуру на пост модератора форума.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38956938
Фотография vikkiv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Так обсуждаются бигдатые вопросы по необходимости, то тут - то там бигдатость мелькает и не похоже чтобы так уж активно всё было аж до нового субфорума .. закидывай в заголовок темы это сокровенно-ключевое слово, и кому интересно - клюнут, иначе действительно потеряемся в деревьях структуры форума..
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38956950
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Такой форум уже имеется...
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957050
babona
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
и что, БигДата - доходная поляна? должно быть да пока новая и моднявая тема.
CRM и BPM-ов уже наелись, а BI обещанных прибылей не приносят конторам. Так и живем'с
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957062
Фотография StarikNavy
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
babonaновая и моднявая тема.
ага, в ветке ("отдельный форум") - "no sql, big data" каждый месяц по новому сообщению )
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957090
haXbat
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
babonaи что, БигДата - доходная поляна? должно быть да пока новая и моднявая тема.
CRM и BPM-ов уже наелись, а BI обещанных прибылей не приносят конторам. Так и живем'с
Дело не моде, а в том, что данных становится все больше и больше, темпы прироста увеличиваются. Обрабатывать все это с помощью старых подходов становится слишком неэффективно.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957138
babona
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
haXbat,

и чо? а то можно подумать вчерашние/текущие объемы данных научились анализировать? т.е. имеем согласованные измерения, непротиворечивые данные в атрибутах, отсутствие критически важных пропусков в данных и т. д., навели порядок в OLTP системах и бизнес-процессах
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957200
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
babonahaXbat,

и чо? а то можно подумать вчерашние/текущие объемы данных научились анализировать? т.е. имеем согласованные измерения, непротиворечивые данные в атрибутах, отсутствие критически важных пропусков в данных и т. д., навели порядок в OLTP системах и бизнес-процессах
и че?? можно подумать беспорядок в oltp базах помешал созданию олап и dwh.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957215
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
А есть какие-то успешные примеры использования Big Data технологий на пространстве бывшего СССР? Я знаю про телекомы, но не уверен, что там это принесло какую-то выгоду. Интересно было бы увидеть ROI, потому как BigData это весьма ресурсоемкая штука как с точки зрения людей, так и точки зрения floorspace и используемой энергии.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957228
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Alexander RyndinА есть какие-то успешные примеры использования Big Data технологий на пространстве бывшего СССР? Я знаю про телекомы, но не уверен, что там это принесло какую-то выгоду. Интересно было бы увидеть ROI, потому как BigData это весьма ресурсоемкая штука как с точки зрения людей, так и точки зрения floorspace и используемой энергии.
давайте к конкретике. Бигдата это хадуп+сверху на нем все что угодно.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957246
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Ivan DurakAlexander RyndinА есть какие-то успешные примеры использования Big Data технологий на пространстве бывшего СССР? Я знаю про телекомы, но не уверен, что там это принесло какую-то выгоду. Интересно было бы увидеть ROI, потому как BigData это весьма ресурсоемкая штука как с точки зрения людей, так и точки зрения floorspace и используемой энергии.
давайте к конкретике. Бигдата это хадуп+сверху на нем все что угодно.Да, согласен - хорошее замечание.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957270
fduch f.f.
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Игорь БобакЕсли модераторы это видят, предлагаю свою кандидатуру на пост модератора форума.

форум же вроде как есть
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957338
babona
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Ivan Durak,
так и я про тож - всё это BI/DWH/BigData разводилово по большей части и слабоокупаемое.


Alexander Ryndin,
про успешные проекты - это смотря кого и где читать. Неужто эффективный ТОП-менеджер напишет правду, что эффект есть, но кратковременные, а в длинную - издержки очень велики и нестабильный эффект.
Глянцевые ИТ-журналы читать - так там вранье, интеграторы те еще басни нахваливают.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957355
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
babonaIvan Durak,
так и я про тож - всё это BI/DWH/BigData разводилово по большей части и слабоокупаемое.Ну как и любая технология Hadoop проходит через Hype Cycle . Это нормально.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957458
haXbat
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
babonaIvan Durak,
так и я про тож - всё это BI/DWH/BigData разводилово по большей части и слабоокупаемое.
Так можно про любой стек технологий сказать. Oracle - разводилово!
Hadoop и прочее - это всего лишь инструмент. Если в аналитике не будут копаться модные data scientist, если топы не будут принимать решения на основе исследований, то вся Big Data становится бесполезной для бизнеса.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957478
Бумбараш
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Игорь БобакВсем добрый день.

Вошел я наконец в big data. Скажу вам, что тема очень интересная, и очень отличается от классического DWH/ETL/OLAP.

YouTube Video
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957629
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
babonaIvan Durak,
так и я про тож - всё это BI/DWH/BigData разводилово по большей части и слабоокупаемое.


Alexander Ryndin,
про успешные проекты - это смотря кого и где читать. Неужто эффективный ТОП-менеджер напишет правду, что эффект есть, но кратковременные, а в длинную - издержки очень велики и нестабильный эффект.
Глянцевые ИТ-журналы читать - так там вранье, интеграторы те еще басни нахваливают.
ну классическое BI/DWH уже давно не разводилово.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957793
babona
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
классическое BI/DWH уже давно не разводилово, а унылые серые будни и неочень оплачиваемое
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957856
kirillss
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
babona, ага пересядем на хадуууп и будет весело
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38957931
Очень лысый
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Ну вот опять проводят знак равенства BigData = Hadoop. BigData цэ challenge, а Hadoop - экосистема, призванная с ним бороться. Не обязательно зацикливаться на нём. Что касается выгоды, то я лично считал для телекома стоимость солюшена для хранения и обработки данных для СОРМ на hdfs и Оракле. На hdfs получилось подешевле. И, думается, что ad hoc запросы там тоже бегали бы повеселее. Но для менеджеров выгоднее чем подороже. Пересекался с парой контор: российской и буржуйской, которые тупо зарабатывают кластером деньги.
Вообще, как и любая технология, хадупный кластер просто даёт новые возможности: сохранять и обрабатывать данные, которые раньше бы удалили, либо скинули бы на ленту. Кто умеет извлекать выгоду - извлечёт выгоду, кто умеет только пилить - будет пилить, а если не получается пилить, то будет хаять.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38958117
Фотография Apex
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Очень лысыйНа hdfs получилось подешевле.

Хранение на HDFS безусловно дешевле.

Очень лысыйИ, думается, что ad hoc запросы там тоже бегали бы повеселее.

А вот это уже весьма спорно. А очень часто вообще не верно.

Очень лысыйНо для менеджеров выгоднее чем подороже.

Сразу видно человека, который никогда не был менеджером.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38958708
Очень лысый
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
ApexОчень лысыйНа hdfs получилось подешевле.

Хранение на HDFS безусловно дешевле.

Очень лысыйИ, думается, что ad hoc запросы там тоже бегали бы повеселее.

А вот это уже весьма спорно. А очень часто вообще не верно.

Очень лысыйНо для менеджеров выгоднее чем подороже.

Сразу видно человека, который никогда не был менеджером.

Лень мне расставлять тэги цитат. Так отвечу.

1. Безусловность под вопросом.
2. В общем случае всё зависит от движка, конфигурации кластера, формата хранения и т.п., речь шла о вполне конкретном частном случае, конкретном объёме данных и конкретном бюджете. В данных условиях вполне реально сделать соответствующие оценки, тесты и т.д.
3. люблю я местных "проницательных" товарищей
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38958722
Очень лысый
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Естесно, на конечное решение кроме "распильного" повлияли и многие другие нюансы. Я тут чисто из лени скатился в нарратив. Однако дальнейшее развитие истории показывает, что принятое решение было ошибочным. Кстати, не факт, что предложенное мной было самым лучшим. Так бывает.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38960906
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
ApexОчень лысыйИ, думается, что ad hoc запросы там тоже бегали бы повеселее.

А вот это уже весьма спорно. А очень часто вообще не верно.

Если речь о sql поверх хадуп, типа классического хайва - то это без вариантов будет медленнее.
В наших тестах на почти на порядок по сравнению с mpp субд на таком же количестве серверов.
Единственное где-то хоть как-то можно говорить о быстром выполнении - это навесить на хадуп, что-то типа спарка.
...
Рейтинг: 0 / 0
Big Data - собирается ли кто-либо создавать здесь такой форум?
    #38960913
Бумбараш
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
А где вы в Минске навешиваете на хадуп типа спарка?
У вас там переполненные склады тракторов на три года вперед и постановления правительства о том, сколько должно стоять горизонтов на первой полке в магазине электроники. Просто интересно.
...
Рейтинг: 0 / 0
25 сообщений из 76, страница 1 из 4
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Big Data - собирается ли кто-либо создавать здесь такой форум?
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]