|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
Всем добрый день. Вошел я наконец в big data. Скажу вам, что тема очень интересная, и очень отличается от классического DWH/ETL/OLAP. В связи с этим вопрос: а не собираются ли уважаемые модераторы сделать отдельный форум тут по Big Data? Я думаю в этом есть смысл. С другой стороны, можно было этот форум "расширить", поменяв название. Но думаю это не самый хороший вариант, так как в big data такой "зоопарк" и столько вопросов, которые и близко не стояли к тем, что в классическом DWH стоят, что люди просто не будут пересекаться. Если модераторы это видят, предлагаю свою кандидатуру на пост модератора форума. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 00:58 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
Так обсуждаются бигдатые вопросы по необходимости, то тут - то там бигдатость мелькает и не похоже чтобы так уж активно всё было аж до нового субфорума .. закидывай в заголовок темы это сокровенно-ключевое слово, и кому интересно - клюнут, иначе действительно потеряемся в деревьях структуры форума.. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 01:36 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
Такой форум уже имеется... ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 02:37 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
и что, БигДата - доходная поляна? должно быть да пока новая и моднявая тема. CRM и BPM-ов уже наелись, а BI обещанных прибылей не приносят конторам. Так и живем'с ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 09:21 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
babonaновая и моднявая тема. ага, в ветке ("отдельный форум") - "no sql, big data" каждый месяц по новому сообщению ) ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 09:38 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
babonaи что, БигДата - доходная поляна? должно быть да пока новая и моднявая тема. CRM и BPM-ов уже наелись, а BI обещанных прибылей не приносят конторам. Так и живем'с Дело не моде, а в том, что данных становится все больше и больше, темпы прироста увеличиваются. Обрабатывать все это с помощью старых подходов становится слишком неэффективно. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 10:11 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
haXbat, и чо? а то можно подумать вчерашние/текущие объемы данных научились анализировать? т.е. имеем согласованные измерения, непротиворечивые данные в атрибутах, отсутствие критически важных пропусков в данных и т. д., навели порядок в OLTP системах и бизнес-процессах ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 10:57 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
babonahaXbat, и чо? а то можно подумать вчерашние/текущие объемы данных научились анализировать? т.е. имеем согласованные измерения, непротиворечивые данные в атрибутах, отсутствие критически важных пропусков в данных и т. д., навели порядок в OLTP системах и бизнес-процессах и че?? можно подумать беспорядок в oltp базах помешал созданию олап и dwh. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 11:40 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
А есть какие-то успешные примеры использования Big Data технологий на пространстве бывшего СССР? Я знаю про телекомы, но не уверен, что там это принесло какую-то выгоду. Интересно было бы увидеть ROI, потому как BigData это весьма ресурсоемкая штука как с точки зрения людей, так и точки зрения floorspace и используемой энергии. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 11:50 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
Alexander RyndinА есть какие-то успешные примеры использования Big Data технологий на пространстве бывшего СССР? Я знаю про телекомы, но не уверен, что там это принесло какую-то выгоду. Интересно было бы увидеть ROI, потому как BigData это весьма ресурсоемкая штука как с точки зрения людей, так и точки зрения floorspace и используемой энергии. давайте к конкретике. Бигдата это хадуп+сверху на нем все что угодно. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 11:54 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
Ivan DurakAlexander RyndinА есть какие-то успешные примеры использования Big Data технологий на пространстве бывшего СССР? Я знаю про телекомы, но не уверен, что там это принесло какую-то выгоду. Интересно было бы увидеть ROI, потому как BigData это весьма ресурсоемкая штука как с точки зрения людей, так и точки зрения floorspace и используемой энергии. давайте к конкретике. Бигдата это хадуп+сверху на нем все что угодно.Да, согласен - хорошее замечание. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 12:01 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
Игорь БобакЕсли модераторы это видят, предлагаю свою кандидатуру на пост модератора форума. форум же вроде как есть ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 12:13 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
Ivan Durak, так и я про тож - всё это BI/DWH/BigData разводилово по большей части и слабоокупаемое. Alexander Ryndin, про успешные проекты - это смотря кого и где читать. Неужто эффективный ТОП-менеджер напишет правду, что эффект есть, но кратковременные, а в длинную - издержки очень велики и нестабильный эффект. Глянцевые ИТ-журналы читать - так там вранье, интеграторы те еще басни нахваливают. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 12:44 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
babonaIvan Durak, так и я про тож - всё это BI/DWH/BigData разводилово по большей части и слабоокупаемое.Ну как и любая технология Hadoop проходит через Hype Cycle . Это нормально. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 12:51 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
babonaIvan Durak, так и я про тож - всё это BI/DWH/BigData разводилово по большей части и слабоокупаемое. Так можно про любой стек технологий сказать. Oracle - разводилово! Hadoop и прочее - это всего лишь инструмент. Если в аналитике не будут копаться модные data scientist, если топы не будут принимать решения на основе исследований, то вся Big Data становится бесполезной для бизнеса. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 13:37 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
Игорь БобакВсем добрый день. Вошел я наконец в big data. Скажу вам, что тема очень интересная, и очень отличается от классического DWH/ETL/OLAP. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 13:49 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
babonaIvan Durak, так и я про тож - всё это BI/DWH/BigData разводилово по большей части и слабоокупаемое. Alexander Ryndin, про успешные проекты - это смотря кого и где читать. Неужто эффективный ТОП-менеджер напишет правду, что эффект есть, но кратковременные, а в длинную - издержки очень велики и нестабильный эффект. Глянцевые ИТ-журналы читать - так там вранье, интеграторы те еще басни нахваливают. ну классическое BI/DWH уже давно не разводилово. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 15:03 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
классическое BI/DWH уже давно не разводилово, а унылые серые будни и неочень оплачиваемое ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 17:06 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
babona, ага пересядем на хадуууп и будет весело ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 17:48 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
Ну вот опять проводят знак равенства BigData = Hadoop. BigData цэ challenge, а Hadoop - экосистема, призванная с ним бороться. Не обязательно зацикливаться на нём. Что касается выгоды, то я лично считал для телекома стоимость солюшена для хранения и обработки данных для СОРМ на hdfs и Оракле. На hdfs получилось подешевле. И, думается, что ad hoc запросы там тоже бегали бы повеселее. Но для менеджеров выгоднее чем подороже. Пересекался с парой контор: российской и буржуйской, которые тупо зарабатывают кластером деньги. Вообще, как и любая технология, хадупный кластер просто даёт новые возможности: сохранять и обрабатывать данные, которые раньше бы удалили, либо скинули бы на ленту. Кто умеет извлекать выгоду - извлечёт выгоду, кто умеет только пилить - будет пилить, а если не получается пилить, то будет хаять. ... |
|||
:
Нравится:
Не нравится:
|
|||
13.05.2015, 18:46 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
Очень лысыйНа hdfs получилось подешевле. Хранение на HDFS безусловно дешевле. Очень лысыйИ, думается, что ad hoc запросы там тоже бегали бы повеселее. А вот это уже весьма спорно. А очень часто вообще не верно. Очень лысыйНо для менеджеров выгоднее чем подороже. Сразу видно человека, который никогда не был менеджером. ... |
|||
:
Нравится:
Не нравится:
|
|||
14.05.2015, 01:26 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
ApexОчень лысыйНа hdfs получилось подешевле. Хранение на HDFS безусловно дешевле. Очень лысыйИ, думается, что ad hoc запросы там тоже бегали бы повеселее. А вот это уже весьма спорно. А очень часто вообще не верно. Очень лысыйНо для менеджеров выгоднее чем подороже. Сразу видно человека, который никогда не был менеджером. Лень мне расставлять тэги цитат. Так отвечу. 1. Безусловность под вопросом. 2. В общем случае всё зависит от движка, конфигурации кластера, формата хранения и т.п., речь шла о вполне конкретном частном случае, конкретном объёме данных и конкретном бюджете. В данных условиях вполне реально сделать соответствующие оценки, тесты и т.д. 3. люблю я местных "проницательных" товарищей ... |
|||
:
Нравится:
Не нравится:
|
|||
14.05.2015, 14:29 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
Естесно, на конечное решение кроме "распильного" повлияли и многие другие нюансы. Я тут чисто из лени скатился в нарратив. Однако дальнейшее развитие истории показывает, что принятое решение было ошибочным. Кстати, не факт, что предложенное мной было самым лучшим. Так бывает. ... |
|||
:
Нравится:
Не нравится:
|
|||
14.05.2015, 14:36 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
ApexОчень лысыйИ, думается, что ad hoc запросы там тоже бегали бы повеселее. А вот это уже весьма спорно. А очень часто вообще не верно. Если речь о sql поверх хадуп, типа классического хайва - то это без вариантов будет медленнее. В наших тестах на почти на порядок по сравнению с mpp субд на таком же количестве серверов. Единственное где-то хоть как-то можно говорить о быстром выполнении - это навесить на хадуп, что-то типа спарка. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.05.2015, 19:45 |
|
Big Data - собирается ли кто-либо создавать здесь такой форум?
|
|||
---|---|---|---|
#18+
А где вы в Минске навешиваете на хадуп типа спарка? У вас там переполненные склады тракторов на три года вперед и постановления правительства о том, сколько должно стоять горизонтов на первой полке в магазине электроники. Просто интересно. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.05.2015, 20:07 |
|
|
start [/forum/topic.php?fid=48&tid=1856819]: |
0ms |
get settings: |
9ms |
get forum list: |
13ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
39ms |
get topic data: |
11ms |
get forum data: |
2ms |
get page messages: |
60ms |
get tp. blocked users: |
2ms |
others: | 239ms |
total: | 381ms |
0 / 0 |